我是一名大学生，暑假找了私人家教中介想通过中介介绍家长，收了四百元中介费后称如果介绍不成功可以退还，后来因对方态度问题违约在先，起了矛盾之后家教没有介绍成功，四百元至今也仍未退还，对方态度恶劣并且拒绝沟通，因为数额较小派出所也无法调解，并且对方作为年长男性多次威胁一名大一女学生，这种情况可以起诉让他道歉还钱吗