结婚三年不经常同居要离婚男方要求退还彩礼，彩礼金额12.8万，结婚后应要在外地工作不经常在一起，逢年过节都会回家一起过节，因是相亲结的婚，男方说不想和我结婚，是家里逼迫的，现在我在外地工作没给男方家打电话，男方家父母跑到我家辱骂我母亲，以及用打电话和发短信的方式威胁我母亲，要把我家人都杀了，请问这种情况我要退还所有彩礼以及结婚消费的所有费用吗？