您好，根据我国相关法律规定，夫妻双方应当共同承担对子女的抚养义务。如果您与丈夫已经协议离婚或依法解除婚姻关系，并且您提供了足够的证据证明自己是孩子的法定监护人和实际抚养人，那么法院一般会支持您的请求，判决由您直接抚养孩子。但是，具体到您的情况，建议您先收集好相关证据，比如孩子的出生证明、户口簿等，以及您与丈夫之间的协议书等，以便于在诉讼中更好地维护自己的权益。同时，如果对方确实存在过错行为，也可以考虑通过其他途径解决问题，如协商、调解等方式解决家庭矛盾。