我是男方，因女方出轨，导至感情破裂了，女方回娘家四年了，这四年里没来看过小孩，没有任何联系，扶养费也不给，她又不肯离婚，小孩都是靠我扶养，我现在又娶了一个也生了个小孩，算重婚吗？我该怎么与前妻离婚？