我急需五万元，在顶呱呱网站上找到贷款中介，签了一份居间合同，叫我去拉一份个人征信，因为我刚查过没多久，不想去查了。他们就要收我违约金，可是合同中说的是按照借款合同约定的贷款金额的5%支付，可是我没签借款合同，它们客户经理就说这份服务协议就是借款合同，要我支付违约金，我该怎么办？