根据您提供的信息，关于家庭纠纷的问题，建议采取以下步骤来解决。 首先，双方应当冷静下来，尝试沟通协商解决问题。可以考虑共同寻找解决方案，比如通过法院调解或协议离婚等方式。 其次，在处理孩子抚养权方面，应充分尊重孩子的意见，并结合双方的实际情况进行综合考量。如果孩子自愿跟随女方，且女方有能力照顾孩子，那么可以根据法律规定和实际情况确定孩子的抚养权归属。 最后，为了解决长期困扰双方的问题，建议双方尽快寻求专业的心理咨询师或婚姻家庭治疗师的帮助，以便更好地理解和应对彼此的需求和期望，从而找到更好的解决方案。 希望以上建议能够帮助到您和您的家人，祝您早日解决家庭纠纷。