二手房交易时，只签署了一个私人协议，没有正式的合同，当时写明交付订金2万，还有收据，都在买方，口头承诺双方任何一方反悔，订金双倍偿还，第二天买方就反悔要退房，称买方神经病发作，要求退还订金，当时签字的是买方夫妻二人，妻子有神经病，这种情况订金要退还吗？