Visão geral
 

Enfrente os desafios operacionais em torno da implantação e monitoramento de fluxos NiFi.

O Cloudera DataFlow for the Public Cloud é uma nova experiência no Cloudera Data Platform (CDP) que aborda os desafios operacionais de implantação, dimensionamento e dimensionamento de infraestrutura para fluxos Apache NiFi e oferece recursos abrangentes de monitoramento.

O DataFlow for Public Cloud aborda os seguintes desafios:

  • O compartilhamento de recursos entre vários fluxos NiFi no mesmo cluster afeta o desempenho geral

  • A subestimação dos tamanhos de cluster pode resultar em despesas não planejadas com infraestrutura

  • Dimensionar a infraestrutura conforme necessário pode ser um pesadelo operacional

  • Não é possível monitorar métricas de fluxo de dados em vários clusters em uma única exibição com ferramentas atuais

Leia como o DataFlow para a nuvem pública elimina esses problemas

 

 

Diagrama CDF para nuvem pública

Recursos

  • ReadyFlows NiFi pré-construídos
  • Painel centralizado
  • Flow Catalog

ReadyFlows NiFi pré-construídos


Aumente a produtividade com fluxos NiFi comuns pré-construídos para usuários novos e especializados de NiFi.

ReadyFlows são definições de fluxo para ajudar os novos usuários do NiFi a começar com os casos de uso de fluxo de dados mais comuns e implementá-los com sucesso com o Cloudera DataFlow. Os usuários podem baixar a definição de fluxo, configurar propriedades rapidamente, importar para o Catalog e, em seguida, implantar em seu ambiente de nuvem pública.

Exemplos de ReadyFlows:

  • Consumir Kafka para Kafka

  • Consumir do Kafka e filtrar dados

  • Consumir do Kafka para o bucket S3

Captura de tela do DataFlow ReadyFlow

Painel centralizado


Monitore todos os fluxos de NiFi em vários clusters de nuvem a partir de um único painel.

A página do painel na interface de usuário do Cloudera DataFlow é o console de monitoramento central para todas as implantações de fluxo NiFi em ambientes. Os usuários podem monitorar métricas de fluxo e uso da infraestrutura, bem como verificar o status das implantações, garantindo que atendam às expectativas de desempenho. Os usuários obtêm insights sobre a integridade das implantações monitorando o status dos dados enviados e recebidos, bem como verificando quaisquer alertas sobre KPIs que eles definiram.

Captura de tela de monitoramento DataFlow

Flow Catalog


Armazene, gerencie e implante todas as suas definições de fluxo em um único local.

O Catalog, outra página importante na interface de usuário do Cloudera DataFlow, é onde as definições de fluxo são armazenadas. O usuário pode gerenciar o ciclo de vida da definição de fluxo CDF desde a importação até o controle de versão e exclusão. A importação de um fluxo para o catálogo permite que o usuário obtenha uma definição de fluxo NiFi tradicional configurada para configuração e implantação na nuvem pública. Os recursos de controle de versão do Catalog também permitem que o usuário implante versões específicas de um fluxo. 

Captura de tela do Catalog

Principais recursos

Dimensione as implantações de fluxo para cima e para baixo em clusters do Kubernetes gerenciados pelo CDP, com base na utilização da CPU dentro dos limites especificados no assistente de implantação. 

O conjunto predefinido de fluxos de dados chamado ReadyFlows ajuda os desenvolvedores a implementar os casos de uso de fluxo de dados mais comuns. Aumenta a produtividade do desenvolvedor para implantar fluxos pré-criados rapidamente com configuração mínima.

As definições de fluxo são armazenadas no catálogo. Gerencie o ciclo de vida da definição de fluxo CDF desde a importação até o controle de versão e exclusão. O catálogo também é onde os usuários podem iniciar novas implantações de fluxo.

Um processo passo a passo simples transforma uma definição de fluxo no catálogo em uma implantação de fluxo para processamento de dados. Permita que os usuários configurem parâmetros, criem guardrails para escalonamento automático e estabeleçam definições de KPI para as implantações de fluxo.

Monitore diferentes implantações de fluxo em vários clusters de relance em tempo real. Os detalhes da implantação no painel mostram KPIs predefinidos, métricas do sistema, bem como eventos e alertas do sistema.

O suporte para Kubernetes no ambiente de nuvem pública permite o isolamento de implantações de fluxo individuais e permite o dimensionamento de cada cluster sem disputa de recursos. Isso também ajuda na solução de problemas e isolamento de falhas.

Pronto para conhecer mais de perto?


Experimente o DataFlow para a nuvem pública por si mesmo

Introdução

DOCUMENTAÇÃO DO PRODUTO

Leia sobre especificações técnicas, arquitetura, tutoriais e como fazer artigos sobre o Cloudera DataFlow para a nuvem pública.

Saiba mais

CDF PARA PREÇOS DE NUVEM PÚBLICA


Avalie a definição de preço do Cloudera DataFlow para a nuvem pública em vários tipos de instância de nuvem

Saiba os detalhes

TOUR DE VISÃO GERAL DO DATAFLOW

Faça um tour prático pelo Cloudera DataFlow para a nuvem pública.

Acesse agora

COMUNIDADE CLOUDERA COM NIFI

Conecte-se com seus colegas, faça perguntas, solucione problemas e saiba mais sobre o Apache NiFi

Conheça agora

TREINAMENTO NIFI

Reserve um curso de treinamento prático de três dias sobre os fundamentos do Apache NiFi e muito mais.

Aprenda

WEBINAR DE PRODUTOS

Assista à introdução e demonstração do Cloudera DataFlow for the Public Cloud.

Assistir

Datasheet

Cloudera DataFlow para a Nuvem Pública

Solution Brief

Filosofia de dados em movimento: um plano para a arquitetura de dados de streaming junto à empresa

Treinamento, serviços e suporte de classe mundial

Your form submission has failed.

This may have been caused by one of the following:

  • Your request timed out
  • A plugin/browser extension blocked the submission. If you have an ad blocking plugin please disable it and close this message to reload the page.