根据中国法律规定，夫妻双方应当互相尊重、互相关爱，共同抚养子女。如果一方长期不履行家庭义务，如未尽到照顾子女的责任等，另一方可以依法主张离婚，并要求对方支付抚养费、补偿金等相关费用。 在本案中，男方长时间不与孩子生活在一起，导致孩子的健康成长受到影响，且未能提供足够的经济支持。这种情况下，女方有权请求法院判决解除婚姻关系，并要求男方支付相应的抚养费、补偿金等费用。同时，考虑到孩子的成长环境以及对未来的考虑，女方也可以考虑申请变更孩子的监护权。 建议您咨询专业的律师，以便了解具体的法律程序及可能的解决方案。