对方辱骂已侵犯了你的名誉权可以起诉他，至于他威胁，情节轻微的话不构成犯罪，但如果以勒索财物为目的，构成敲诈勒索罪，如果不是，但情节严重，可按治安管理处罚条例予以行政处罚。不过现在是法治社会，什么都是要讲究证据的，到法庭上是要求你举证的，如果有下一次建议你保留证据如：偷偷录音，如果不在骚扰你了，建议大度一点，与小人一争高下的人，也不见得有多高明，一笑而过，才是君子风度。