关于您提出的问题，根据我国婚姻法的规定，父母与子女之间的权利和义务，因父亲或母亲的死亡或者没有监护能力，由兄姐代为抚养。因此，如果您的丈夫因为某些原因无法履行作为父亲的责任，您可以考虑将孩子归还给您的照顾。 然而，在决定孩子的归属时，应当考虑到孩子的最大利益。在考虑孩子的最佳利益方面，应充分听取孩子的意见，并尊重他们的意愿。此外，双方均应尽力维持良好的关系，以促进孩子的成长和发展。 最终，是否将孩子归还给您，以及如何处理孩子的抚养权问题，需要您与您的丈夫进行深入沟通，并根据双方的具体情况做出决定。同时，建议您寻求专业的法律帮助，以便更好地保护自己的权益。