Visão geral
O que é o Streams Messaging?
Os recursos do Streams Messaging oferecidos no Cloudera DataFlow (CDF) e no Cloudera Data Platform (CDP) permitem que as empresas armazenem buffer e escalonem grandes volumes de ingestão de dados para atender às necessidades de dados de outros aplicativos corporativos e de nuvem que exigem acesso a esses dados em tempo real.
Principalmente alimentado pelo Apache Kafka, os recursos do Streams Messaging incluem todo um ecossistema de ferramentas para atender às suas necessidades de streaming.
Leia por que a Cloudera oferece o melhor ecossistema Kafka atualmente
Casos de uso
Otimização de produção
Monitoramento de mercado
Gerenciamento da experiência do cliente
Otimização de produção
Ajuste os processos operacionais, melhore a produtividade e obtenha insights preventivos.
Algumas das empresas de manufatura mais inovadoras estão combinando streaming de dados com dados históricos para prever e alterar automaticamente processos em diferentes linhas operacionais que aumentarão a produção. Os recursos de Streams Messaging da Cloudera DataFlow podem cumprir os requisitos de streaming de dados e permitir casos de uso preventivos para automatizar os processos de fabricação com muito sucesso.
Monitoramento de mercado
Lide com milhões de negociações por segundo e escalone petabytes de informações financeiras.
As bolsas de valores enfrentam desafios com as demandas dos clientes por relatórios em tempo real e exigências de SLA mais rápidos. No entanto, é necessário processar petabytes de dados para fornecer esses serviços. O Streams Messaging do Cloudera DataFlow pode facilmente transmitir grandes volumes de dados para que as bolsas de valores possam criar rapidamente análises em tempo real orientadas para o mercado e atender aos SLAs cada vez mais exigentes.
Gerenciamento da experiência do cliente
Melhore a experiência do cliente com dados de 360 graus e insights em tempo real.
Uma experiência melhor do cliente é conseguir conhecê-lo, assim como os tipos de produtos e serviços que ele deseja. Os recursos de Streams Messaging do Cloudera DataFlow podem ingerir dados de alto volume e alta velocidade de vários fluxos e armazenamentos que fornecem dados de clientes. Permite a visão holística do cliente por meio de data lakes, lojas operacionais ou mecanismos analíticos.
Oferece suporte a milhões de mensagens por segundo com baixa latência e alto rendimento, dimensionando de forma elástica e transparente sem tempo de inatividade. Aborda uma ampla gama de iniciativas de dados de streaming, permitindo que as empresas acompanhem a demanda dos clientes, forneçam melhores serviços e gerenciem proativamente os riscos.
O Streams Messaging Manager oferece um único painel de visualização com visibilidade completa sobre como os dados se movimentam entre clusters Kafka, entre produtores, brokers, tópicos e consumidores, permitindo que você rastreie a linhagem de dados e a governança do edge à nuvem. Ele também simplifica a solução de problemas de ambientes Kafka com filtragem e classificação inteligentes.
O Streams Replication Manager, baseado no Mirrormaker 2, oferece replicação de tópicos Kafka entre clusters tolerantes a falhas, escalonável e robusta, bem como monitoramento e métricas de replicação nos níveis de cluster e tópico. Oferece alta disponibilidade, recuperação de desastres, migrações de nuvem, geoproximidade e muitas outras opções.
O Registro de Esquemas permite que você gerencie, compartilhe e ofereça suporte à evolução de todos os esquemas de produtores e clientes em um repositório de esquemas compartilhados que permite que os aplicativos interajam de forma flexível entre si em todo o cenário do Kafka. Diminua com segurança as interrupções que ocorrem devido a incompatibilidades do esquema.
O Cruise Control permite gerenciar e equilibrar a carga de grandes instalações Kafka, além de detectar e corrigir automaticamente anomalias. Resolva problemas difíceis, como falhas frequentes de hardware/máquinas virtuais, expansão/redução de cluster e a distorção de carga entre os brokers.
O Cloudera SDX oferece segurança centralizada, políticas de controle, governança e linhagem de dados em todos os componentes. Eles são definidos uma vez e automaticamente aplicados e são também independentes de fornecedores, permitindo que você adote com confiança estratégias de nuvem multinuvem e híbrida. Suporta os quatro pilares principais da segurança: identidade, acesso, proteção de dados e visibilidade.
Ponto de partida
Documentação do produto
Leia as especificações técnicas, arquitetura, tutoriais e artigos de instruções sobre Apache Kafka.
Preços do CDP Data Hub
Avalie os preços da CDP Public Cloud para Data Hub em vários tipos de instância e provedores de nuvem.
Kafka na nuvem
Estenda seus recursos de mensagens de streams para a nuvem com o CDP Data Hub.
Melhor ecossistema Kafka
Saiba por que a Cloudera oferece o melhor ecossistema Apache Kafka do setor atualmente.
Comunidade Cloudera no Kafka
Conecte-se com seus colegas, faça perguntas, solucione problemas e saiba mais sobre o Apache Flink.
Recursos do Streams Messaging
Tenha todos os principais ativos para saber como os streams messaging transformarão a maneira como você gerencia streaming de dados.