在中华人民共和国境内从事畜禽养殖活动应当遵守《中华人民共和国畜牧法》等法律法规的规定。根据该法的相关规定，禁止任何单位和个人将动物排泄物、病死或者死因不明的动物尸体用于食用或者出售。因此，在没有得到相关部门许可的情况下，不得将学校食堂的剩饭用于养猪。 如果您已经采取了相应的措施来处理这些剩余食物，例如将其捐赠给需要的人或组织，那么您的行为是合法的。但需要注意的是，您应该确保所有的食物都经过适当的处理和消毒以防止疾病的传播，并且确保所有的食品来源都是可靠的。 此外，如果您正在考虑进行这种活动，建议您首先了解相关的法律规定和要求，以及可能产生的法律责任。如果存在疑问或不确定的地方，请咨询当地的农业部门或其他相关机构以获取准确的信息和指导。