根据我国相关法律规定，父母对未成年子女享有平等的抚养权。在离婚协议中明确约定孩子归女方抚养，并且没有规定男方有责任抚养孩子，这并不意味着男方不需要承担任何义务。 通常情况下，即使离婚协议中未明确规定男方需要承担孩子的抚养费用，但根据《民法典》的规定，一方抚养子女，另一方应负担必要的生活费和教育费的一部或全部，该义务不因离婚而消除。因此，在这种情况下，男方仍然有义务支付抚养费用给女方，除非双方另有约定或者法律另有规定。如果男方确实无力支付抚养费用，可以协商或者通过法律途径解决这个问题。