你好，请问在农村，很多年前别人在我家门前盖了一个车库，我几年前要重新翻盖房子他的车库碍事就拆了，当时说好是给他几千块钱了事，现在他非要让我给他一万五千块钱，要不然就起诉我们，请问他这是合理的吗？