兄弟之间的土地使用权争议可以采取多种方式来解决。首先，可以通过协商达成一致意见，明确双方的权益范围和边界。如果无法通过协商解决，则可以向法院提起诉讼，由法官根据事实和法律规定进行裁决。 在您的情况下，如果一方已经建下了楼层，并且该建筑物可能影响到另一方的土地使用，建议您及时与对方沟通并寻求解决方案。如果对方不同意调整或拆除建筑物，您可以考虑聘请专业的房地产估价师评估建筑物的价值以及其对土地使用的影响，然后根据评估结果与对方进行谈判或者采取其他法律手段维护自己的合法权益。 在任何情况下，都应确保遵守当地法律法规，尊重他人的权利和利益。如果您需要进一步的帮助，请咨询当地的法律顾问。