我们结婚四年，因为没有领结婚证，男方上诉要求退还彩礼钱，我们共同生活期间，他根本没有给我生活费，还不让上班，我是不是应该只还他一部分，？而且，他还要求我把他们家请客的钱也给他。