我想问一下，我和前任有个小孩五岁了，他是来我家上门女婿的，但是我们没有结婚，也没有结婚证，在一起我们经常打架吵架，之后我离开了，后来他说他敢了让我再给他一次机会，我看心疼小孩就给他一次机会，在一起后又打架，我受不了就离开了，过年时候他自己带小孩来我家过年，求我再给他一次机会，我家人很心疼我小孩都劝我原谅他，我就一次次给他机会，之后出来工作又吵架在厂差点打架，我受不了了，就离开了然后他给我发信息说不会让我好过，不过我和哪个在一起他都不会放过我，他妈和我家人也这样说，然后他家人说如果我不在家养我父母， 就让我前任在我家当家，娶别人来我家养我父母，我想想这是不可能的，但是我家人没有意见，我怎么办