您好，今天房东打电话给我说要过来，我不是很方便就拒绝了，但是没一会听到有人开门，原来房东私自留了钥匙开门进来了，我一紧张也没想到留证据，到初租房就说只有两把钥匙都给我们了，这个可以告他违法吗？本来租期没到想不租了，由于个人原因就在协商当中