今年五月份卖房后，因买房人没回来，当时只和买房人的哥进行卖房公正，未过户。已告之中介和买房人最迟七月份本人要买的楼盘要开盘，希望他们在之前能回来把户过了，但催了几次他们都一拖再拖，只是说要得要得就是不回来过户，现在首套房和二套房贷款利息和契税都要多好多，我想咨询一下，如果买房人不过户给我买新房造成了贷款利息和契税增加，可不可以找他赔偿损失。谢谢！