首先，根据法律规定，如果双方自愿结婚并已经生育子女，那么双方之间的婚姻关系是合法有效的。因此，在这种情况下，只要双方能够共同抚养孩子，并且没有其他不可调和的问题存在，那么他们之间的婚姻关系是可以维持下去的。 然而，如果女方的家人强烈反对这门婚事，可能会影响到双方的感情发展。在这种情况下，建议男方与女方进行深入沟通，了解对方的真实想法和需求，寻找解决问题的方法。同时，也建议双方的家庭成员之间加强沟通，理解彼此的观点和立场，为解决这个问题提供支持和帮助。 总的来说，虽然存在一些困难，但只要双方愿意努力，通过沟通和妥协，还是有可能让这段感情继续发展的。但是，如果情况严重到无法调解，那么可能需要考虑结束这段关系。在这个过程中，双方都应保持冷静，避免情绪化的决定对彼此造成伤害。