对于您的情况，首先需要明确的是，在中国，房屋的所有权和使用权是不同的概念。即使您在换土地时承诺将房子给对方，但若该房产并未按照法律规定进行合法手续办理（例如未取得合法产权证），则该房产可能被视为违法建筑。 如果您认为自己的房屋符合合法建设条件，并且有权要求政府给予相应的补偿，那么可以考虑通过合法途径解决。您可以向当地政府或相关管理部门提出申请，说明房屋的历史背景以及其是否属于合法建设范围。同时，也可以考虑聘请专业的律师协助处理，以确保自己的权益得到充分保护。 此外，建议您关注当地的拆迁政策和程序，了解如何依法维护自己的合法权益。在任何情况下，都应避免采取任何可能引发纠纷的行为，以免造成不必要的损失和麻烦。