根据您提供的信息，您与中介公司的纠纷主要围绕着“取消交易”和“退款”的争议展开。在合同法中，通常情况下一方提出解除合同或变更合同条款需要双方协商一致，除非存在法定或者约定的解约条件。 首先，如果您认为取消交易是您的单方面行为引起的，并且不存在任何违约的情况，那么您可以要求中介公司将定金退还给您。按照《民法典》的规定，如果一方无正当理由单方面违反合同，另一方可要求对方返还已支付的定金。 其次，关于中介公司的说法，“怪我们买家不够精明”，这可能涉及到中介公司在提供服务过程中存在的误导或其他不当行为。在这种情况下，您可以通过收集相关证据（如聊天记录、录音等），向当地消费者保护组织投诉，或直接向法院提起诉讼来维护自己的权益。 最后，建议您尽快与中介公司进行沟通，明确您的诉求并寻求解决问题的最佳途径。同时，也可以考虑聘请一位专业的律师帮助您处理此事，以确保您的合法权益得到充分保障。 希望上述信息对您有所帮助，祝您早日解决纠纷！