首先，很抱歉听到您的困境。在婚姻中，夫妻双方应该互相尊重和支持，共同面对生活中的挑战和困难。如果您的丈夫经常对您进行暴力行为，并且对孩子造成了伤害，那么这显然不是一个健康的家庭环境。建议您尽快寻求专业的帮助，例如与当地的妇女权益组织联系，或者向法院申请保护令。同时，您可以考虑寻找一个可以提供支持和指导的专业人士或机构，以帮助您处理当前的情况并为未来的家庭关系奠定基础。请记住，您有权选择自己的生活方式和伴侣，而不需要担心失去孩子的抚养权。希望您能够找到解决这个问题的方法，重新建立一个安全、健康和充满爱的家庭环境。