你好！根据我国相关法律法规，农民集体所有的土地属于国家所有。因此，任何单位和个人不得侵占、买卖或者以其他形式非法转让土地。如果您的房屋位于集体土地上，那么您有权保留该房屋的土地使用权，并有权在不损害他人利益的情况下进行改造和利用。如果您认为土管所的扣留行为违法，请及时向当地人民政府或相关部门反映情况，寻求解决办法。同时，建议您详细了解相关法律法规，以便更好地维护自己的合法权益。