根据《最高人民法院关于审理城镇房屋租赁合同纠纷案件具体应用法律若干问题的解释》的规定，承租人在租赁期间因房屋发生损坏而要求出租人承担维修义务，并请求解除合同的，应当提供相应的证据证明房屋存在损害。如果承租人未能提供充分的证据证明房屋确实存在损害，或者其主张与事实不符，法院通常不会支持其诉讼请求。 因此，在您提到的情况下，如果您无法提供足够的证据证明房屋在三年前已经存在损害，那么房主要求对房屋进行司法鉴定可能不太合理。然而，具体情况需要根据您提供的更多信息来判断，建议您与律师进一步讨论以获取更准确的意见。