在法律上，如果您已经支付了购房的定金，并且双方尚未签订正式的房屋买卖合同或协议，那么您可以要求将这部分款项退回。这通常被称为“定金退款”或“解除合同”。请注意，在提出退款请求时，请确保您有足够的证据证明您的行为是合理的，例如对方未能履行合同义务。 此外，如果双方有书面的合同或者协议，则按照该合同或协议的规定处理退款事宜。如果没有明确约定，可以考虑通过协商解决，或是依据相关法律规定进行调解或诉讼。 最终决定应基于具体的情况和双方达成的共识。建议咨询专业的法律人士以获取更详细的指导和建议。