我们一结婚13了，有一个12岁的孩子，但是没有登记，在二年前他在外边有了别的女人并且还和这个女人等了记，我现在和他妈生活在一起，他偶尔也回我们这个家里来，家里有事他也去办，就是不和我提出不过，我应该怎么办，能告他们吗，他现在就属于两个家庭穿梭生活