你好，我和我前夫是协议离婚，当时离婚的时候我净身出户，男方谈的条件是孩子和房子归他，如果一方再婚孩子如果想跟我也可以，他现在再婚，而且把孩子给爷爷奶奶，很久都不管孩子，孩子心灵受到伤害并且性格孤僻，孩子现在不想跟着爸爸，想跟我可是男方我根本联系不上，还通过我女儿说不给钱，不管孩子，如果孩子跟我，我要怎么办