你好，我和我老公结婚两年，女儿四个月大，我发现他出轨，但是我没有实质证据，他还有打人的习惯，我想离婚，他说不给我小孩，我家庭一般，我自己也没有工作，他说离婚可以不给我小孩。我不知道怎么办。