您好！根据《中华人民共和国民法典》的相关规定，拒绝接受货物的义务是买受人的权利而非义务。因此，在您的情况下，您有权拒绝接收快递并要求退回费用。如果卖家坚持要起诉你，您可以考虑通过协商解决或寻求法律援助来保护自己的合法权益。