我们没有结婚就生了儿子，从医院生完孩子回来孩子爸爸就再没出现过，就只有每个月给那么一点有限的生活费，我没住房没工作，现在孩子快两岁了，都是我一个人带，随着孩子一天天长大，开销大了，孩子爸爸现在又找女朋友了，我一个人也养不了孩子，商量他把孩子带走，我也同意，但他们不允许我再见孩子了，我该怎么办？该早赔偿吗？