在您的情况下，您和对方之间存在婚姻关系，因此按照法律规定，双方应该共同承担对孩子的抚养责任。如果男方拒绝履行这个义务，您可以考虑通过法院提起诉讼，要求他支付必要的抚养费用。同时，建议您收集好相关证据，比如医疗证明、生活费记录等，以支持您的主张。在处理此类纠纷时，最好寻求专业的法律帮助，以便更好地维护自己的权益。