我跟一个男的在一起几个月，但是在一起期间，我不知道他去借了高利贷，来用作我们两个的花费，后面我觉得我们不合适，我就提出分手，然后他才告诉我的这个事，现在那边打了他家里所有电话，我现在分不掉了，他一直缠着我，就要我跟他在一起，不然他就对我家里不利，我该怎么办，