根据《中华人民共和国土地管理法》的规定，集体所有的土地由村集体经济组织或者村民委员会等组织代为行使所有权。如果您的土地是通过合法方式取得，并且已经办理了相关手续，那么您有权依法主张自己的权益。 在本案中，虽然没有签订正式的租赁合同，但您可以通过其他证据证明您的土地使用权和租金支付的事实。此外，即使存在争议，您可以寻求当地自然资源部门或人民法院的帮助，以维护自己的合法权益。 关于赔偿金的问题，由于该厂房已经被政府收回并进行拆迁，因此其价值可能无法按照原价购买，而是需要考虑市场价格等因素确定合理的补偿金额。在此情况下，您可以与当地政府相关部门沟通协商，争取得到公平合理的补偿。 总之，在处理此类纠纷时，建议您仔细收集相关的证据材料，并尽可能地寻求专业人士的帮助，以便更好地维护自己的权益。