我在前两个月驾驶我的一辆白色客货两运轿车正常行驶，在我不知情的情况下一个骑三轮车的男子撞在我的车斗上，我当时没发现，所以就没停车。事后那个男子就报警去医院了，因为我的车是黑车么，所以交警队就扣除了我的车。那个男子在医院住院确实也不严重，交警队叫我们双方私下处理，我刚开始给他一万块钱，这几天又给他三万块钱，他还不罢休，是他自己撞上来的，他还喋喋不休，我可以告他勒索吗