我有一个出租车手续对外出租，3月28日收了对方10000元订金，4月1日我又不租给他了，他让我赔偿违约金5000元，我没同意他要起诉我。对我最坏的结果是什么。请帮助解答一下，谢谢