您好，我的情况是这样的，我们是在2014年离得婚，当时女儿三岁，儿子四个月，我坚决离婚的，孩子的抚养权都判给了我，抚养费三千，这两年孩子的爸爸也没拿什么抚养费，如果现在孩子的爸爸，想给我要儿子还能要过去吗，假如起诉我，能不能要回去