我租房子，未到期，房东告知房子要卖，并已经委托中介，于是我就重新找了房子搬家，但搬好之后，房东却不愿意退还剩余的房租押金，说他并没有要我搬走是我自己搬走的，可是都已经有人来看房子了，也委托给中介了，我总不能等他房子卖了，我再临时找房子啊，现在就是房租押金的问题，房东不愿意退，该怎么办？