您好！根据我国《民法典》的规定，不动产的相邻关系应当遵循“有利生产、方便生活、团结互助、公平合理”的原则。如果该大楼是您的私人财产，那么您有权要求对方退还那一半房屋。 然而，在实践中，由于涉及到复杂的合同关系和产权争议，建议您首先与对方进行协商，明确双方的权利义务，并达成一致意见。如果无法通过协商解决，可以考虑聘请专业的房地产律师或调解机构帮助解决纠纷。 此外，如果您发现他人正在非法使用您的房产，或者存在其他侵犯您权益的行为，您可以向当地公安机关报案，依法维护自己的合法权益。同时，也可以尝试与开发商或其他相关方沟通，争取解决问题。 总之，处理此类纠纷时应保持冷静，理性分析情况，寻求合法途径解决问题。希望以上信息对您有所帮助。