根据法律规定，您有权在自己合法拥有的土地上建造房屋。如果您认为村里的规划是合理的，并且已经得到了村委的认可和同意，那么您可以按照自己的意愿进行建设。 然而，在这种情况下，如果您的邻居不愿意签署同意书并拒绝您的建房计划，这可能意味着他们有其他理由不希望看到您建造新的房屋。在这种情况下，您可以考虑与邻居沟通，了解他们的担忧和顾虑，并尝试找到一个双方都能接受的解决方案。 此外，您也可以考虑寻求法律帮助，例如请律师介入处理此事，以确保您的权益得到保护。同时，也可以考虑向当地政府部门报告这种情况，以便相关部门能够介入解决这个问题，维护公共利益和社会秩序。