买卖原材料纠纷：我是属于中间商一样，买家把钱给我，我打钱给供货商，然后发货，这次货品不合格，买家要求退货退款，我这边已经找不到供货商，卷款跑了，我们都没有签合同，只有微信电话联系，我自己已经赔了4万给买家，现在买家起诉了我，要求还剩余的钱，还冻结了我银行卡，请问要怎么做？