本人出售房子，后来买家不买了并要求退还定金（5w），我方不同意退还，对方将我告至法庭。付定金时我们有共同签署合约书，上面写明买房爽约定金不退，并有两人的手印及签名。（情况特殊是： 房子是没有房产证的农村集体土地上造的小别墅） 请问这样的情况我要怎么应对？