Project Description

Este curso foi desenvolvido para ‘Data Stewards’ ou ‘Data Flow Managers’, que estão ansiosos para automatizar o fluxo de dados entre sistemas. Tópicos Incluem Introdução ao NiFi, Instalação e Configuração do NiFi, Explicação detalhada da Interface do Usuário NiFi, Explicação de seus componentes e Elementos associados a cada um. Como construir um fluxo de dados, Linguagem de Expressão NiFi, Compreender o Cluster de NiFi, Proveniência de Dados, Segurança em NiFi, Ferramentas de Monitoramento e Melhores Práticas do HDF. Faça o download da folha de dados para visualizar a lista completa de objetivos e laboratórios do curso. Esta é a versão atualizada do curso HDF Operations: Hortonworks Data Flow .

Público-Alvo

Somente treinamentos para empresas (In-Company). Os alunos devem estar familiarizados com os princípios de programação e ter experiência anterior em desenvolvimento de software. A experiência com o Linux e um entendimento básico das ferramentas do Dataflow seria útil. Nenhuma experiência anterior do Hadoop / NiFi é necessária, mas é muito útil.

Requisitos

Somente treinamentos para empresas (In-Company). Engenheiros de dados, engenheiros de integração e arquitetos que estão buscando automatizar o fluxo de dados entre sistemas.

Conteúdo Programático

Este é o conteúdo que será abordado durante o curso.

UMA INTRODUÇÃO AO FLUXO DE DADOS HORTONWORKS

OBJETIVOS

  • Introdução ao fluxo de dados corporativos
  • O que há de novo no HDF 3.0
  • Arquitetura e recursos do HDF 3.0
  • Instalando e configurando o HDF NiFi
  • A menos que User Interface
  • Resumo e História
  • Anatomia de um processador
  • Anatomia de uma conexão
  • Serviços do controlador e tarefas de relatório
  • Construindo um fluxo de dados NiFi
  • Comando e Controle de um Fluxo de Dados NiFi
  • Anatomia de um grupo de processadores

LABORATÓRIOS

  • Instalando e iniciando o HDF com o Ambari
  • Demonstração: A menos que User Interface
  • Construindo um DataFlow NiFi
  • Trabalhando com grupos de processamento NiFi

TRABALHANDO COM GRUPOS DE PROCESSADORES, MODELOS E MONITORAMENTO DE NIFI

OBJETIVOS

  • Anatomia de um grupo de processadores remotos
  • Transmissão de grupo de processadores remotos
  • Comunicação Site-a-Site NiFi
  • O idioma da expressão NiFi
  • A estrutura da expressão NiFi
  • Como usar funções de linguagem de expressão
  • Usando o Expression Language Editor
  • Usando If / Then / Else no idioma de expressões NiFi
  • Usando atributos e propriedades
  • Criar, gerenciar e instanciar um modelo NiFi
  • Como otimizar um fluxo de dados HDF
  • Definir Eventos de Proveniência de Dados e Proveniência de Dados
  • A menos que descrevem Gerenciamento de Estado Cluster
  • Descrever a configuração e o gerenciamento de cluster por meio da interface do usuário do NiFi
  • Explicar os mecanismos disponíveis para monitoramento de NiFi

LABORATÓRIOS

  • Trabalhando com sites de site de grupos de processadores remotos
  • Trabalhando com o idioma de expressão NiFi
  • Demonstração: Trabalhando com Atributos
  • Demonstração: Trabalhando com Modelos
  • Demonstração: Proveniência de Dados
  • Trabalhando com NiFi Clusters
  • Demonstração: A menos que os serviços de notificação
  • Demonstração: A menos de Monitorização
  • A menos de Monitoramento Avançado

HDF E HDP

OBJETIVOS

  • Descrever como o HDF complementa o HDP
  • Descrever como a Big Data Ingesting é possível com o HDF
  • Descrever as Melhores Práticas da Configuração HDF
  • Descrever o processo de proteção do HDF com SSL de 2 vias
  • Descrever a autenticação do usuário LDAP com NiFi
  • Descrever a Autenticação do Kerberos com NiFi
  • Descrever a multilocação do HDF
  • Descrever como o autorizador baseado em arquivo no NiFi funciona
  • Descrever como autorizador baseado em Ranger em NiFi Works
  • Descrever a Arquitetura de Autorização via Plug-in Ranger-NiFi
  • Listar os pré-requisitos de instalação do Ranger
  • Configurar e instalar o Ranger
  • Descrever como criar políticas de guarda-florestal para NiFi

LABORATÓRIOS

  • Integrando HDF com HDP
  • Protegendo HDF com SSL de 2 vias usando o Ambari
  • Autenticação do usuário NiFi com LDAP
  • Instalando o Ranger e configurando o NiFi com o Kerberos
  • Autorização Baseada em Arquivo em NiFi
  • Autorização Baseada em Guarda-Parques em NiFi