你好，我是女方，我原本有意愿离婚可男方没有，男方因工作原因经常半年不在家，我因买房需要付首付，就借买房说和他假离婚（真离了，没有复合，房子贷款还完了）这几年每年给过我钱，因一些原因现在赖在我买的房子里不走，我想让他走，我该怎么办。