您好！根据我国《民法典》等相关法律法规的规定，您的权利受到保护。如果您有合法的建设规划许可证，并且该建筑符合当地规划要求和安全标准，那么您有权自行决定是否建造房屋。 然而，如果村上认为需要在您所拥有的土地上修建一个公共设施（如广场），并且这与您的规划不符，那么他们可以提出异议并进行协商。具体来说，村上可能需要提供相关文件证明其拥有对土地的使用权，并说明为什么必须在您现有的土地上修建公共设施。 因此，在决定是否开始施工之前，建议您先了解清楚相关的法律规定以及村上的意见，必要时寻求专业的法律帮助以确保自己的权益得到保障。同时，也可以通过与村上的沟通来达成共识，共同寻找一种既能满足村民需求又能兼顾到个人利益的方式。