在处理此类纠纷时，首先需要明确的是，房屋买卖合同中通常会有关于违约责任的规定。如果合同中有约定，且对方未能履行合同义务，则可能需要承担相应的法律责任。 在这种情况下，您已经支付了6万元的定金，并且解除合同后要求中介公司退还剩余款项。根据您的描述，中介公司表示他们有权收取一定的中介费用作为服务回报。因此，在这种情况下，您可以考虑与中介公司协商，看看是否可以就这部分中介费用达成一致，或者寻求法律帮助来解决争议。 同时，如果您对合同中的具体条款有疑问，建议您查阅合同的具体内容，了解双方的权利和义务。此外，对于任何涉及金钱交易的情况，最好保留相关的证据，以备不时之需。 最终，您应该依据相关法律法规以及合同条款来决定如何处理此事。希望上述信息能对您有所帮助。