根据您的描述，您与对方签订的房屋买卖合同在法律上具有约束力，双方均应遵守合同条款。对方拒绝履行合同，您有权要求对方继续履行合同或支付违约金。如果合同中约定了违约金的数额，且违约金不足以弥补您的损失，您可以要求对方支付实际损失。 在这种情况下，您可以采取以下步骤： 1. 首先，与对方进行协商，尝试解决争议。 2. 如果协商无效，您可以向法院提起诉讼，要求对方履行合同或支付违约金及赔偿损失。 3. 准备相关证据，包括合同文本、付款凭证、对方违约的证据等，以支持您的诉讼请求。 建议您尽快联系专业律师，获取具体的法律咨询和代理服务，以便更有效地维护您的合法权益。律师将帮助您评估损失、准备诉讼材料，并代表您在法庭上进行辩护。