我爸当年为了能够落户到一个村，就给这个村里的一个孤寡老人做了继子。但后来因为国家有补助，老人的哥哥觉得有哪些钱没必要在让我爸照管了，但户口还在这个村，也盖了房子，生活了十八年左右了。现在村里要拆迁，土地分钱，队里的人就开始闹事，说要赶我们家走，我们到底该怎么办？当年那个老人的哥哥不让我爸管他，也是写了协议的，是他们单方面不让的，并不是我们不愿意照管他了。