我2003年花一万八买下大队的一点房基地，结果地没有给人家调解，我不能盖，结果2013年他又在我的房基地周围盖楼房啦，我现在是想盖也不能盖，他钱也不给我退，像我这种情况，能起诉吗。