首先，请您了解您的权利和义务。根据我国《民法典》的规定，如果一方当事人未按照约定履行义务，另一方有权要求其承担违约责任。 在本案例中，您已经向对方提供了衣物，并且收到了部分衣物。然而，当对方提出要退回剩余的衣物时，您应该与对方协商解决。如果您认为对方的行为是不合理的或者有其他理由拒绝接收剩余的衣物，您可以向法院提起诉讼，请求对方退还衣物并支付相应的赔偿金。 同时，如果您认为对方的行为构成侵权，您可以向法院提起诉讼，请求对方停止侵害、消除影响、赔礼道歉等。 请注意，以上建议仅供参考，具体情况应根据实际情况进行分析和判断。如果您需要进一步的帮助或解答，请及时联系专业的法律顾问。