我向担保公司贷了一笔三十万的款，当时没有告知提前还款有百分之五的违约金，现在还了一年，准备还未款的时候才知道有违约金，但合同已经签了，除了刚开始给担保公司交百分之三的手续费，每个月还给担保公司额外两千多，现在没有钱还了，并且不想还这个违约金，该怎么办？