从生完小孩一直在家带孩子，四年前他出去打工有外遇导致感情破裂协议离婚，一个女儿跟着他，那时候考虑自己无业养不起孩子，所以女儿跟着他过。她爸再婚了又有两个孩子了，经济上他很吃不消，我现在再婚了不想要孩子，而且我有能力扶养孩子，请问打官司可以要回孩子跟我吗？谢谢！