关于子女的抚养权问题，一般遵循“有利于子女成长”的原则。在您离婚时，双方可以就子女的抚养权达成一致意见，但需要注意的是，在没有约定的情况下，法院通常会根据具体情况来判决。 如果您的协议中明确表示子女归男方抚养，并且男方也已经履行了相应的义务（如支付抚养费），那么他有权要求按照协议规定进行抚养费的支付。然而，如果男方未能按照协议执行，或者存在其他违反协议的行为，例如不承担子女的教育费用等，您可以考虑通过诉讼的方式解决。 具体来说，你可以收集相关证据证明男方未按协议履行抚养责任的事实，并提交给法院。同时，你也可以寻求律师的帮助，以便更好地维护自己的权益。请注意，为了保护隐私和避免不必要的麻烦，请确保所有的沟通都遵守保密原则。