首先，根据《劳动民法典》的相关规定，劳动者有权在试用期内随时解除合同。因此，如果你们决定不再继续工作，可以立即通知工厂并要求支付剩余工资。 其次，关于中介的问题，一般来说，中介公司应当帮助双方达成一致协议，并确保交易安全和公平。如果中介未能提供合理的解决方案，或者存在欺诈行为，您可以考虑向相关的消费者保护机构或劳动监察部门投诉，以维护您的权益。 最后，建议您保留好与中介及工厂的所有相关证据，以便将来可能需要时进行申诉或维权。同时，也可以考虑聘请专业的律师协助处理此事，以确保您的合法权益得到充分保障。