房产正上有我的名字,前夫是还贷人,离婚后房产归男方，离婚两年了房贷没还清无法变更过户,我要买房我我和前夫离婚两年多了，离婚时说好房子归男方，房贷由男方承担，由于他一直没有还清房贷没办法过户，现在房产上还有我的名字，房产的名字去不了，买房算二套首付得6成，利息也都高，3成我可以承担，6成这样算下来我就拿不出来这些钱。因为这个耽误一年多，现在房子没法变更我是否有使用居住权呢，现在房价涨了一倍，这个可以要求对方承担责任嘛？