自留山是指农民集体所有或者国家所有由农民集体使用的土地。根据《中华人民共和国农村土地承包法》的规定，承包期内发包方不得收回承包地。如果自留山的承包期限为五十年，那么在该期间内，除非有法律规定的情形发生，如自然灾害等不可抗力因素导致土地荒废或退化，否则发包方无权收回承包地。 因此，在自留山承包合同未到期的情况下，承包方享有对土地的使用权和管理权，有权干涉政府关于征地的决定。当然，这需要考虑具体的法律法规以及实际情况，建议承包方在遇到此类情况时，及时寻求专业的法律意见，以保护自己的合法权益。