我与卖方之前达成了一笔3000多的a货品，因a货品销售不出去，我想全额退货退款，A货品无任何损伤，同时卖方和我又达成另一笔交易，并已发货给我价值1600元的b货品，我未付款，我想让卖方直接将b货品的金额从A货品的退款金额中扣除，但是卖方不愿意，并且索要500元额外费用，还说若是我不同意便要起诉，我应该答应他的额外费用吗？