我在邢台新楼盘买一套房子，交了3万元定金，协议上说如果违约扣除2000元后，剩余的退回，现在不想要了，找他退款，可他说要把他给我签的收据和协议都收回去才能走程序，但是还是需要三个月到一年才能退定金，我不敢把收据和协议给他，我现在该怎么办？