您好，关于您所描述的情况，确实存在一定的争议。首先，根据法律规定，如果一方无法完全履行对子女的抚养义务，另一方有权要求变更抚养权。然而，需要考虑的因素包括但不限于双方的经济状况、家庭环境、教育条件等。 在您的情况下，由于奶奶的文化程度不高，可能会影响到孩子的成长和发展。此外，作为父亲，他是否有能力承担起抚养和教育孩子的责任也是需要考虑的一个因素。因此，在决定是否要回孩子的抚养权时，应当综合考虑上述因素，并寻求专业的法律意见或调解服务来帮助解决问题。 同时，您可以尝试与孩子父亲进行沟通，了解他的想法和意愿，并尽可能地为孩子创造一个有利于其发展的环境。如果您认为自己的做法符合法律规定，可以向有关机构或组织寻求支持和建议，以维护自己及孩子的合法权益。希望以上信息能对您有所帮助。