在您与高利贷之间存在纠纷的情况下，您需要仔细考虑您的情况是否符合民法典中的“非法放贷罪”和“合同违约责任”的规定。首先，请确保您已经充分了解相关法律规定，并且根据法律规定来判断自己是否有义务偿还剩余的债务。 其次，如果您认为自己的权益受到侵害，建议采取以下步骤。 与债权人进行协商，尝试达成和解。 如果无法达成协议，您可以向当地的人民法院提起诉讼。 在法院审理过程中，您可以申请证据保全等程序以保护自己的合法权益。 最后，重要的是要避免任何可能激化矛盾的行为或措施，以免加重问题。希望这些建议能够帮助您解决问题。