您好！根据《民法典》的规定，合伙人一方单方退伙的，应当提前通知其他合伙人。如果合伙人之间协商一致，并且没有违反法律规定或者损害他人利益的情况下，可以按照协议约定解决剩余债务的问题。如果您和对方已经就退款事宜进行了协商并达成了一致意见，那么您可以按照协商的结果来处理。如果无法达成一致，建议双方进行沟通，寻求一个公平合理的解决方案。 同时，您也可以考虑聘请专业的法律顾问协助处理此事，以确保自己的权益得到保护。在处理此类纠纷时，重要的是要保持冷静，避免情绪化的反应，以免导致更严重的后果。希望我的回答能够帮助到您。