根据《民法典》的规定，买卖合同中约定的定金不得超过合同标的额的百分之二十。在您的情况下，如果房屋不符合购买条件，您有权要求对方退还定金，并且不需要支付违约金。 因此，在这种情况下，您可以直接与商家协商解决这个问题，或者向当地消费者协会投诉，以维护自己的合法权益。同时，建议保留好相关证据，以便日后处理此类问题时有据可依。