根据《中华人民共和国护照法》规定，公民的护照由本人保管。因此，原单位不得将退休公务员的护照交给他人保管。 此外，《中华人民共和国护照法》还规定，国家机关工作人员应当妥善保管自己的护照，并在必要时向有关部门申请补发或者换发护照。如果发现有人擅自使用或冒用他人的护照，应当及时向公安机关报案处理。 综上所述，原单位保管退休公务员的护照是不合法的行为，同时也违反了相关法律法规。