您好，在您与中介签订的房屋买卖合同中，应明确双方的权利义务和违约责任。如果未签合同，那么按照法律规定，您可以要求中介退还已经支付的定金，并且根据具体情况可以主张赔偿损失。 在您的情况下，如果您不想继续购买该房产，首先需要确认您是否有权利要求中介返还定金。一般来说，如果合同中没有明确规定退款条件或条款，则可能无法直接要求中介退款。在这种情况下，您可以尝试通过沟通协商解决纠纷，或者寻求第三方调解机构的帮助。 另外，如果您愿意继续购买该房产，但希望将剩余款项减少到50万元以下，您可以通过与中介进行谈判来达成共识。这需要您提供合理的理由并证明自己的诚意，同时也要考虑到中介的合理利润。 最后，建议您保留好所有相关的证据材料，以便于将来处理类似情况时作为依据。