根据法律规定，如果您的丈夫没有合法手续抚养您的孩子，并且您拒绝让他办理户籍登记手续，那么您可以向法院提起诉讼要求撤销其作为孩子的监护人资格，并申请将孩子交由你来抚养。同时，建议您寻求专业的法律帮助，以确保自己的合法权益得到保护。