您的情况比较复杂，建议您尽快寻求专业的法律帮助。首先，您可以考虑与丈夫进行沟通，了解他的想法和动机，并尝试理解他的处境。其次，如果你们之间的婚姻确实存在问题，可以考虑通过协商的方式解决，以避免家庭纠纷的升级。此外，如果孩子是您的主要担忧，您可以考虑将孩子的抚养权交给更合适的人来照顾。最后，如果您决定采取法律手段解决问题，可以咨询专业的律师，以便得到更好的解决方案。