首先，您需要冷静下来，仔细考虑您的情况。如果您确实没有按照约定归还借款，那么您可以要求对方退还剩余的款项。但是，在这种情况下，建议您尽量避免与对方发生冲突或采取极端措施。 其次，您可以尝试联系对方，了解他的具体情况和目的，并试图协商解决这个问题。如果无法达成一致，您可以考虑寻求第三方的帮助，例如调解机构或者法律援助机构。 最后，无论结果如何，都应保持理智和客观，避免情绪化的反应，以免影响到后续的关系处理和解决问题的能力。