双方没有结婚证有一小孩现在5岁多了，小孩两岁多之前都是在男方家，后来因女方出轨，不愿跟男方在一起，男方是单亲家庭没有妈妈的，后来小孩是一直在外婆家养的，女方再婚一次有一个女儿，男方怎么要回小孩，女方喜欢打架闹事，昨天还去我家把我家玻璃都给砸了