首先，需要明确借款合同的合法性。如果借款合同中约定的利息超过了法律规定的上限，那么超出部分的利息是不受法律保护的。根据《最高人民法院关于审理民间借贷案件适用法律若干问题的规定》，民间借贷的利率不得超过合同成立时一年期贷款市场报价利率的四倍。 其次，如果你们已经偿还了20多万元，这部分还款应当从借款本金中扣除，剩余的债务应当按照实际未偿还的本金和合法的利息来计算。如果对方要求偿还40万元，你们可以要求对方提供详细的计算方式，以确定是否合理。 最后，如果双方无法协商一致，你们可以寻求法律途径解决，比如向法院提起诉讼，请求法院确认实际的债务金额。在诉讼过程中，法院会根据借款合同、还款记录等证据，依法判决债务的金额。 建议你们收集所有相关的证据，包括借款合同、还款记录、银行转账凭证等，以便在必要时作为证据使用。同时，可以咨询专业律师，获得更具体的法律意见和帮助。