根据您描述的情况，您想要回孩子的抚养权是合理的。在中国，非婚生子女与婚生子女享有同等的权利，包括抚养权。虽然孩子目前与父亲和祖父母生活在一起，但您作为孩子的母亲，同样拥有法定的抚养权。 首先，您可以尝试与孩子的父亲协商，表达您想要回孩子抚养权的意愿，并说明您能为孩子提供更好的成长环境。如果协商不成，您可以向人民法院提起诉讼，请求变更抚养权。在诉讼中，法院会综合考虑孩子的意愿、双方父母的抚养能力、孩子的成长环境等因素来决定抚养权的归属。 您需要准备相关证据，比如孩子目前的生活环境、父亲的不良习惯（如抽烟、喝酒）以及他未能履行父亲职责的证据。此外，您还需要证明您有能力抚养孩子，比如您的经济状况、居住环境等。 请注意，抚养权的变更需要法院的判决，而且孩子的意愿也非常重要，尤其是孩子已经11岁，法院会考虑孩子的选择。因此，与孩子保持良好的沟通，了解他的想法和需求，也是非常重要的。如果需要法律援助，建议您咨询专业律师，以便获得更具体的法律指导和帮助。