我有两个小孩大的十岁小的一周六我小的是试管婴儿在怀孕三个月左右老公就跟了一个坐台小姐没有回家过在小孩十个月协议离婚两个小孩跟我他每月六千生活费离婚后他半年多没有给生活费现在我不想要他看小孩他说要告我要回小孩我应该怎么办