我们结婚，有一个儿子，离婚时，离婚协议上儿子的抚养权归他，我净身出户，后来又联系，没有办结婚证，现在还是离婚证，离婚证状态下生了个女儿，现在103天，前几天做完亲子鉴定上在了他的户口下，现在我们又想分开，原因是，发现男方有出轨行为，第一次离婚是因为男方之前赌博，不顾家，这次如果分开的话，我们的孩子，这个女儿，抚养权归谁？