根据法律规定，您有权要求贷款公司退还多收的款项。如果您已经将房产出售并偿还了部分贷款，那么剩下的债务应该是可以免除的。建议您尽快与贷款公司沟通，以了解您的权益，并采取必要的行动来保护自己。