您好。双方是达成协议的。可是一个星期后就说房子不能过户、就要我退钱、可我把钱给了别人、我让他看我的欠条，他死活不看。说钱给我了、所以从我这里要。我说分几次给。不愿意、说交人打我。我该怎么办？