我租了一个房子，六月一号房子到期，这个房子我是租了一年，但只住了四个月，其他时间都是空在那里的，有的时候房东还不经过我的允许，就把他的东西放到我屋子里，现在房子到期了！钥匙还在我手里，可我现在在外地回不去，之前房东跟我要钥匙，可我在外地回不去，他说他要起诉我，说我不给他钥匙是要受到法律处置的，是这样的吗？