是否需要支付违约金取决于你与买家之间的协议或合同。
如果在你与买家之间的交易过程中,已经明确签署了合同或协议,并且这份协议中规定了卖号后不能随意反悔,否则需要支付违约金,那么如果你改变主意不想卖了,那么你可能需要按照协议支付相应的违约金。
但如果并没有明确的合同或协议规定这种情况,那么你可以选择不卖,并不需要支付违约金。
但请注意,如果你在交易过程中给买家造成了损失(例如买家因为你的行为而产生了其他费用或损失),你可能需要承担相应的赔偿责任,在做出决定之前,最好先咨询法律专业人士的意见,以确保自己的权益得到充分保护。