No atual cenário de tecnologia empresarial, estamos testemunhando uma corrida em todo o setor. À medida que as organizações migram de arquiteturas monolíticas para ambientes complexos que usam infraestruturas heterogêneas, as plataformas de dados em nuvem estão esbarrando em um limite de visibilidade — isto é, de observabilidade. A resposta tem sido uma onda de aquisições reativas, na casa de bilhões de dólares, projetadas para “acoplar” a observabilidade que elas não têm de forma nativa.
Mas a observabilidade não deveria ser um pós-escrito nem um item adicionado por causa de uma fusão recente — ela precisa ser um recurso central. Na Cloudera, estamos evoluindo nosso DNA nativo de observabilidade para transformá-lo em uma potência unificada, híbrida em primeiro lugar, demonstrando que a visibilidade real em todo o patrimônio de dados é um requisito fundamental para um tecido de dados unificado, um data lakehouse aberto, dados em movimento, IA e sua plataforma de dados como um todo. Isso é verdade quer você execute seus aplicativos, cargas de trabalho, modelos e agentes em nuvens públicas, localmente em data centers ou em edge.
A verdadeira observabilidade não é uma ferramenta única; é um recurso fundamental incorporado à plataforma de dados para responder a perguntas críticas de todos os stakeholders em todo o patrimônio de dados. Seja um analista de negócios querendo saber por que um dashboard não foi atualizado, um administrador de banco de dados investigando uma consulta de longa duração ou um administrador de sistemas identificando armazenamento de dados desequilibrado entre os nós do cluster, a observabilidade precisa oferecer telemetria integrada para fornecer respostas imediatas e acionáveis.
Na realidade dos ambientes híbridos e de multinuvem, depender de ferramentas separadas e de propósito único — para qualidade de dados, desempenho em nuvem, integridade da infraestrutura e assim por diante — que não operam em todo o cenário de dados não oferece visibilidade real. Em vez disso, isso cria um problema de silos de dados compostos por ilhas desconectadas de sistemas observados.
É a interação entre esses sistemas (nos dados, nas cargas de trabalho, na utilização de recursos etc.) que torna a observabilidade necessária. Quando essas categorias estão desconectadas, as organizações perdem o contexto profundo necessário para alcançar excelência operacional. Para atingir esse nível de percepção, é preciso contar com visibilidade que conecte logs, métricas e rastreamentos de forma coesa entre a camada de dados e a infraestrutura subjacente, além de tudo o que existe entre elas.
A ascensão da IA generativa e da modelagem em larga escala transformou fundamentalmente a arquitetura híbrida de uma escolha estratégica em uma necessidade técnica. As cargas de trabalho de IA exigem um equilíbrio delicado entre a enorme capacidade computacional em nuvem para treinamento e a gravidade dos dados localizados em ambientes locais, por motivos de privacidade e inferência de baixa latência, levando a empresa moderna a se tornar uma intrincada rede de ambientes heterogêneos.
Essa mudança para uma presença verdadeiramente distribuída — que vai do data center central à nuvem pública e ao edge — amplia inerentemente a complexidade, já que as cargas de trabalho se comportam de maneira diferente tanto dentro quanto entre essas várias infraestruturas. Essa complexidade torna exponencialmente mais difícil chegar ao “porquê” crítico por trás de quedas de desempenho, picos de custo ou problemas de consumo. Nesta era híbrida da IA, a complexidade dos sistemas, sem uma visão unificada e sem telemetria, se transforma em uma caixa-preta impossível de administrar, deixando líderes de TI incapazes de prever ou evitar falhas críticas.
Houve recentemente um aumento nas aquisições de startups de observabilidade por fornecedores de dados baseados em nuvem: a Snowflake adquirindo a Observe, a Palo Alto Networks adquirindo a Chronosphere e outras mais. Essas aquisições de vários bilhões de dólares mostram que, quando as plataformas de dados não têm observabilidade nativa, elas acabam esbarrando em uma “barreira de visibilidade”. Esses fornecedores agora estão tentando acoplar algo que deveria ter sido um recurso central desde o início.
Para a empresa moderna, uma abordagem fragmentada e restrita à nuvem não fornecerá a visibilidade necessária para alcançar verdadeira excelência operacional:
As ferramentas restritas à nuvem ficam limitadas a um segmento específico do stack, ignorando o vasto patrimônio de dados existente fora da nuvem pública.
Ferramentas com observabilidade acoplada têm dificuldade para fornecer o contexto unificado necessário para compreender a causa dos problemas em ambientes híbridos complexos. Os clientes frequentemente se veem lidando com interfaces desconexas para logs, métricas e rastreamentos, o que evidencia uma falta significativa de coesão entre a camada de dados e a infraestrutura que a sustenta.
A Cloudera Observability é um recurso nativo e fundamental que vai além do simples monitoramento para atuar como uma potência unificadora. Ao posicionar a visibilidade como um requisito fundamental, a Cloudera oferece percepção total em toda a nuvem híbrida: locais, nuvem pública e edge. E, ao usar o OpenTelemetry como framework de observabilidade para coletar e capturar rastreamentos distribuídos e métricas, estamos alinhados ao principal framework de padrões de observabilidade.
A Cloudera Observability entrega mais do que apenas o “porquê” por trás do desempenho; ela oferece um ciclo completo de percepção. “Nós engarrafamos” a inteligência diagnóstica reunida de mais de 1,3 milhão de nós sob assinatura para criar ferramentas sofisticadas de diagnóstico. Agora, com a integração da Cloudera Cloud Factory (anteriormente conhecida como Taikun CloudWorks), estamos em posição privilegiada para estender esses recursos para além do gerenciamento de infraestrutura nativa da nuvem.
Essa evolução coloca a confiabilidade preditiva firmemente ao alcance da empresa moderna, transformando a manutenção de um ciclo de correções reativas em uma estratégia proativa. Ao utilizar alertas antecipados sobre problemas conhecidos e vulnerabilidades de segurança, as organizações podem finalmente ir além da solução de problemas tradicional para alcançar um estado de desempenho contínuo e confiável em todo o seu patrimônio de dados.
Em última análise, a observabilidade é a única maneira de lidar com a complexidade da era híbrida da IA, por meio de uma plataforma de dados construída com observabilidade em seu DNA. Para saber mais sobre como alcançar verdadeira observabilidade com a Cloudera, entre em contato com nossa equipe de serviços profissionais, veja nossas demonstrações de produto ou inscreva-se para um teste gratuito de 5 dias.
This may have been caused by one of the following: