首先，根据《中华人民共和国消费者权益保护法》第34条的规定，“经营者提供商品或者服务有欺诈行为的，应当按照消费者的要求增加赔偿其受到的损失，增加赔偿的金额为消费者购买商品的价款或者接受服务的费用的一倍。”因此，如果司机收取了您的车费并拒绝退还，您有权要求增加赔偿其损失。 其次，《中华人民共和国民法典》规定。“当事人一方不履行合同义务或者履行合同义务不符合约定的，在履行义务或者采取补救措施后，对方还有其他损失的，应当赔偿损失。” 综上所述，虽然司机没有退还发票是违法的行为，但您可以先与司机协商解决，如无法达成一致，可以向当地市场监管部门或消费者协会投诉，通过法律途径维护自己的合法权益。同时，也可以考虑寻求其他途径，比如使用信用卡支付等，以减少不必要的经济损失。