在处理此类争议时，重要的是要明确双方之间的权利和义务，并遵循相关的法律规定。首先，你需要了解你提出的退款请求是否合法。 根据我国《民法典》的规定，父母对未成年子女有抚养教育的义务，因此如果你们之间存在抚养关系，一方支付抚养费是应当的。但是，在这种情况下，如果对方已经将子女归还给了前配偶，那么他有权拒绝返还抚养费用。因为抚养费是基于父母与子女之间的特定关系而产生的，而非基于任何协议或判决。 此外，即使对方同意将子女归还给你，你也需要确保自己的行为符合法律规定和道德准则。例如，如果你没有取得对方的书面同意或者按照法定程序进行，你的行为可能被视为不当得利或者侵权。 综上所述，建议你在提出退款请求之前，先确认自己是否有权要求退还抚养费，并且必须遵守相关法律法规，以避免不必要的纠纷。如果有疑问，可以寻求专业的法律帮助来解决这个问题。