首先，您应该立即与您的中介联系并确认他们的立场。如果他们确实要求支付剩余的款项作为违约金，那么您可能需要考虑是否继续履行合同或寻求其他解决方案。 其次，您可以考虑向当地房地产管理局报告这一情况，以记录此事。这有助于证明您的权益，并为将来可能发生的争议提供证据。 最后，如果您认为中介的行为是不正当的，请考虑聘请一位法律顾问来帮助您了解自己的权利和义务，并指导您采取适当的行动。在任何情况下，确保保留所有相关文件和通信记录是非常重要的。