您好！根据《中华人民共和国土地管理法》的规定，集体所有的土地只能用于农业生产和公益事业。如果您的家位于农村地区，并且该地区的土地所有权归集体所有，那么您有权在符合规划和政策的前提下进行土地利用。 关于您的情况，如果您已经按照规定进行了合理的土地使用并得到了当地村民委员会或政府相关部门的认可，则您可以继续使用该土地。同时，您也需要注意遵守相关法律法规，确保自己的行为不会对他人造成损害或者违反公共利益。 如果村里认为您占用的土地超过了集体土地的合理范围，可能是因为他们担心其他村民会对此产生不满或者因为他们的规划需要。在这种情况下，您可以考虑与村委沟通，解释您的用地需求以及您的权利。如果村委仍然坚持要求您让出多余的部分，您可以向当地政府反映情况，寻求解决办法。