Project Description
Este curso foi desenvolvido para ‘Data Stewards’ ou ‘Data Flow Managers’, que estão ansiosos para automatizar o fluxo de dados entre sistemas. Tópicos Incluem Introdução ao NiFi, Instalação e Configuração do NiFi, Explicação detalhada da Interface do Usuário NiFi, Explicação de seus componentes e Elementos associados a cada um. Como construir um fluxo de dados, Linguagem de Expressão NiFi, Compreender o Cluster de NiFi, Proveniência de Dados, Segurança em NiFi, Ferramentas de Monitoramento e Melhores Práticas do HDF. Faça o download da folha de dados para visualizar a lista completa de objetivos e laboratórios do curso. Esta é a versão atualizada do curso HDF Operations: Hortonworks Data Flow .
Público-Alvo
Somente treinamentos para empresas (In-Company). Os alunos devem estar familiarizados com os princípios de programação e ter experiência anterior em desenvolvimento de software. A experiência com o Linux e um entendimento básico das ferramentas do Dataflow seria útil. Nenhuma experiência anterior do Hadoop / NiFi é necessária, mas é muito útil.
Requisitos
Somente treinamentos para empresas (In-Company). Engenheiros de dados, engenheiros de integração e arquitetos que estão buscando automatizar o fluxo de dados entre sistemas.
Conteúdo Programático
Este é o conteúdo que será abordado durante o curso.
UMA INTRODUÇÃO AO FLUXO DE DADOS HORTONWORKS
OBJETIVOS
- Introdução ao fluxo de dados corporativos
- O que há de novo no HDF 3.0
- Arquitetura e recursos do HDF 3.0
- Instalando e configurando o HDF NiFi
- A menos que User Interface
- Resumo e História
- Anatomia de um processador
- Anatomia de uma conexão
- Serviços do controlador e tarefas de relatório
- Construindo um fluxo de dados NiFi
- Comando e Controle de um Fluxo de Dados NiFi
- Anatomia de um grupo de processadores
LABORATÓRIOS
- Instalando e iniciando o HDF com o Ambari
- Demonstração: A menos que User Interface
- Construindo um DataFlow NiFi
- Trabalhando com grupos de processamento NiFi
TRABALHANDO COM GRUPOS DE PROCESSADORES, MODELOS E MONITORAMENTO DE NIFI
OBJETIVOS
- Anatomia de um grupo de processadores remotos
- Transmissão de grupo de processadores remotos
- Comunicação Site-a-Site NiFi
- O idioma da expressão NiFi
- A estrutura da expressão NiFi
- Como usar funções de linguagem de expressão
- Usando o Expression Language Editor
- Usando If / Then / Else no idioma de expressões NiFi
- Usando atributos e propriedades
- Criar, gerenciar e instanciar um modelo NiFi
- Como otimizar um fluxo de dados HDF
- Definir Eventos de Proveniência de Dados e Proveniência de Dados
- A menos que descrevem Gerenciamento de Estado Cluster
- Descrever a configuração e o gerenciamento de cluster por meio da interface do usuário do NiFi
- Explicar os mecanismos disponíveis para monitoramento de NiFi
LABORATÓRIOS
- Trabalhando com sites de site de grupos de processadores remotos
- Trabalhando com o idioma de expressão NiFi
- Demonstração: Trabalhando com Atributos
- Demonstração: Trabalhando com Modelos
- Demonstração: Proveniência de Dados
- Trabalhando com NiFi Clusters
- Demonstração: A menos que os serviços de notificação
- Demonstração: A menos de Monitorização
- A menos de Monitoramento Avançado
HDF E HDP
OBJETIVOS
- Descrever como o HDF complementa o HDP
- Descrever como a Big Data Ingesting é possível com o HDF
- Descrever as Melhores Práticas da Configuração HDF
- Descrever o processo de proteção do HDF com SSL de 2 vias
- Descrever a autenticação do usuário LDAP com NiFi
- Descrever a Autenticação do Kerberos com NiFi
- Descrever a multilocação do HDF
- Descrever como o autorizador baseado em arquivo no NiFi funciona
- Descrever como autorizador baseado em Ranger em NiFi Works
- Descrever a Arquitetura de Autorização via Plug-in Ranger-NiFi
- Listar os pré-requisitos de instalação do Ranger
- Configurar e instalar o Ranger
- Descrever como criar políticas de guarda-florestal para NiFi
LABORATÓRIOS
- Integrando HDF com HDP
- Protegendo HDF com SSL de 2 vias usando o Ambari
- Autenticação do usuário NiFi com LDAP
- Instalando o Ranger e configurando o NiFi com o Kerberos
- Autorização Baseada em Arquivo em NiFi
- Autorização Baseada em Guarda-Parques em NiFi