根据您的描述，您与大房东和二房东之间的关系存在纠纷。在房屋拆迁过程中，如果涉及到补偿款的分配，通常需要按照相关法律规定进行协商或通过诉讼解决。 关于赔偿金额，虽然您提到已经得到了大约164万元的搬迁费用，但具体数额可能会因为各种因素（如拆迁标准、补偿比例等）而有所不同。因此，在处理此类案件时，建议您寻求专业的律师帮助，以便了解可能存在的权益，并确保自己的合法权益得到维护。 至于是否应该离开该房产的问题，这取决于具体情况和法院最终的裁决结果。如果您认为自己有权继续居住在这个房产中，可以考虑向法院提出抗辩意见，或者在法庭上提供有力的证据证明自己的主张。 总之，建议您尽快联系律师，详细了解您的权利和义务，以确保自己的利益得到保护。同时，保持冷静，积极应对任何可能出现的情况。祝您好运！