购买房屋时，定金是双方约定的意向性支付，如果一方反悔，通常情况下可以要求退还。但是，在实际操作中，具体情况需要根据合同条款和法律规定来判断。建议您详细阅读购房合同中的相关条款，并在必要时寻求专业的法律帮助。同时，如果您已经决定不再购买该房产，您可以直接与对方协商退款事宜，或者通过法律途径解决争议。