我欠他的钱，写欠条了，不久我就去坐牢了，我家人都不知道我欠他钱的事。我坐牢期间，他多次到我家威胁骚扰我家人，要她们还我欠的钱，我家人不知道这事当然不理会了，后面的一次，他尾随我妈进了我家后就把门反锁起来，对她打了一顿，扬言不赔钱就要她死，出于害怕，就把身上仅有的三千多块钱给了他。这种情况，我可以告他什么罪呢？