您双方已经签订定金合同且以及实际缴纳了定金，如果房子本身没有问题，是您基于自身的意愿不想购买的话，对方可以拒绝退还定金。法律依据：《中华人民共和国担保法》第八十九条当事人可以约定一方向对方给付定金作为债权的担保。债务人履行债务后，定金应当抵作价款或者收回。给付定金的一方不履行约定的债务的，无权要求返还定金；收受定金的一方不履行约定的债务的，应当双倍返还定金。第九十条定金应当以书面形式约定。当事人在定金合同中应当约定交付定金的期限，定金合同从实际交付定金之日起生效。