Arquitetura para Resiliência de Dados: Garantindo a Continuidade dos Negócios com Cloudera
A recente interrupção global de TI sofrida por um hiperescalador de nuvem foi um lembrete de uma verdade universal na tecnologia: mesmo que seja mínima, o tempo de inatividade e as interrupções no serviço são inevitáveis. Embora o impacto tenha sido generalizado, interrompendo os serviços em varejo, bancos, saúde e outros setores, essa não foi uma falha exclusiva de um único provedor ou de uma única nuvem. Isso ilustra que a interrupção pode ocorrer em qualquer lugar: em qualquer região de nuvem, com qualquer provedor.
A principal conclusão é clara: as organizações podem e devem assumir o controle, construindo uma arquitetura de dados resiliente que possa se adaptar e prosperar em meio a mudanças constantes. Neste blog, vamos compartilhar como os clientes da Cloudera estão em uma posição única para garantir a continuidade do negócio graças à flexibilidade da nossa arquitetura portátil e ferramentas que garantem failover e recuperação sem falhas. A Cloudera é a única empresa de plataforma de dados e IA que leva a IA aos dados em qualquer lugar: nas nuvens, nos data centers e no edge.
O que significa projetar para a resiliência?
A resiliência de dados é a capacidade de uma organização de resistir, recuperar-se rapidamente e minimizar o impacto de interrupções ou falhas relacionadas a dados. Trata-se de uma abordagem proativa para a continuidade dos negócios, que vai além do backup ou da recuperação de desastres para garantir que os dados críticos permaneçam sempre:
Disponível: Acessível a usuários e aplicativos quando necessário (minimizando o objetivo de tempo de recuperação ou RTO).
Íntegro/preciso (integridade dos dados): Não corrompido e inalterado (minimizando o objetivo de ponto de recuperação ou RPO)
Seguro: Protegido contra acesso não autorizado, perda ou roubo
A arquitetura para verdadeira resiliência envolve dois pilares centrais e interconectados: tecnologia que permita a portabilidade e um processo validado para failover.
1. Habilite o failover em qualquer lugar: elimine pontos únicos de falha.
Depender de um único fornecedor, de uma única nuvem ou até mesmo de uma única região dentro de uma nuvem cria uma vulnerabilidade crítica para os negócios, ou um ponto único de falha. As interrupções ocorrem devido a falhas de hardware, problemas de software, erro humano, desastres naturais ou ataques cibernéticos. O objetivo da resiliência é garantir que, se um ambiente falhar, suas operações possam continuar de forma integrada e automática em outro local.
Isso significa que você precisa ser capaz de realizar failover em qualquer lugar: entre regiões de nuvem, entre provedores de nuvem e até mesmo de volta a um data center. As operações comerciais devem continuar e os sistemas críticos devem permanecer operacionais, independentemente de onde ocorreu a interrupção inicial.
2. Tenha um plano de resiliência validado.
A tecnologia pode proporcionar capacidade de resiliência, mas o processo é essencial para o sucesso da continuidade dos negócios. Muitos planos de recuperação de desastres são elaborados apenas uma vez e raramente revisados, mesmo com a evolução das pessoas e da tecnologia. Um plano bem elaborado é documentado, praticado e revisto regularmente para garantir que a organização possa executá-lo em caso de falha. Alguns elementos do plano:
Priorizar as cargas de trabalho para garantir que as operações críticas, como o processamento de transações no varejo e o monitoramento remoto na área da saúde, tenham os menores acordos de nível de serviço (SLAs) para RTO e RPO.
Garantir redundância e alta disponibilidade , estabelecendo a capacidade de realizar failover entre ambientes para manter as operações.
Fazer backup de dados e metadados críticos, além de estabelecer políticas de retenção e governança.
Como a Cloudera ajuda as organizações a projetar soluções resilientes?
A Cloudera é a única provedora de plataforma de dados e IA que oferece uma experiência consistente em nuvem para dados em qualquer lugar. Isso dá às empresas a liberdade de mover dados e cargas de trabalho de IA entre nuvens e centros de dados, sem atritos nem dependência de fornecedores, para você não ficar mais preso a nenhuma infraestrutura específica. Consequentemente, as organizações podem reduzir riscos de negócios utilizando o Cloudera para projetar resiliência e manter operações e conformidade consistentes, independentemente de onde os dados estejam localizados.
A plataforma Cloudera oferece suporte a alta disponibilidade e tolerância a falhas por meio de nossas soluções e serviços, incluindo:
Serviços de dados portáteis: a plataforma da Cloudera, incluindo serviços de dados nativos da nuvem e data lake, é executada de forma consistente em qualquer nuvem (AWS, Azure, Google Cloud) e localmente no Kubernetes. A liberdade em relação à infraestrutura subjacente permite que os clientes configurem uma variedade de sites disponíveis, misturando diferentes nuvens e recursos locais, para reduzir drasticamente a dependência de uma única plataforma ou fornecedor.
Dados em Movimento: Cloudera Data Flow, Cloudera Streaming Analytics e Cloudera Streams Messaging possibilitam que os clientes capturem, processem e distribuam dados em qualquer lugar em tempo real. Para cargas de trabalho críticas e em tempo real, como detecção de fraudes e monitoramento de rede, uma possível interrupção pode ter um impacto considerável nos negócios. A Cloudera garante que esses serviços permaneçam altamente disponíveis e possam ser replicados em diferentes ambientes.
Replication Manager: esse componente principal do Cloudera apresenta uma abordagem simplificada para backup e recuperação. Ele replica não apenas os dados, mas também os metadados, as políticas críticas de segurança e governança vinculadas a esses dados. Essa replicação permite fácil migração, sincronização contínua e, o mais importante, a capacidade de realizar um failover rápido, promovendo um ambiente replicado secundário junto com o ambiente operacional principal com perda mínima de dados.
Open Data Lakehouse: O lakehouse de dados abertos da Cloudera oferece gerenciamento seguro de dados e análise de dados portáteis e nativos da nuvem com uma abordagem de gravação única e execução em qualquer lugar. Isso elimina o tempo e os custos associados à refatoração de aplicativos ou cargas de trabalho movendo-se entre diversas infraestruturas.
Figura 1. A Cloudera oferece a experiência em nuvem em qualquer lugar para IA em todos os lugares.
Combinadas, essas capacidades permitem que os clientes da Cloudera executem cargas críticas de dados e IA com confiança, garantindo quase zero tempo de inatividade e perda de dados para seus processos de negócios mais importantes, mesmo durante uma queda no nível da infraestrutura.
Como o AM-BITS foi projetado para resiliência diante da instabilidade geopolítica.
Para muitas empresas, a recente interrupção foi apenas um pequeno detalhe. Mas e se a interrupção fosse um verdadeiro desastre, como uma guerra? Com sede na Ucrânia, a AM-BITS, fornecedora de soluções de TI para os setores bancário, de telecomunicações e de varejo, enfrentou uma necessidade urgente de proteger e migrar os dados de missão crítica de seus clientes depois que a interrupção geopolítica forçou as organizações a acelerar rapidamente a mudança dos sistemas locais para a nuvem. Uma migração típica para a nuvem pode levar seis meses ou mais, um cronograma que muitas empresas não podem pagar.
Para lidar com essa crise de continuidade, a AM-BITS construiu uma plataforma moderna de dados e IA multilocatária, baseada na Cloudera. Aproveitando a Cloudera Shared Data Experience (Cloudera SDX), a AM-BITS proporcionou rapidamente um "porto seguro técnico" para os ativos de dados de seus clientes, reduzindo drasticamente o tempo necessário para migrar dados de forma segura para a nuvem em 50%. Como a Cloudera opera de forma fluida em qualquer ambiente, os clientes da AM-BITS ganharam verdadeira flexibilidade: podiam migrar rapidamente para a nuvem, mas também mantinham a opção de migrar para outra nuvem ou trazer dados de volta para o local. Utilizando a Cloudera, a AM-BITS transformou a portabilidade em uma ferramenta poderosa para a continuidade dos negócios.
Próximas etapas
Interrupções e quedas relacionadas a dados podem ser causadas por falhas de hardware, problemas de software, erro humano, desastres naturais, ataques cibernéticos e muito mais. É fundamental que as organizações projetem seus sistemas levando em consideração esses pontos de falha e tenham um plano para recuperar seus sistemas de TI e dados de forma rápida e sem grandes interrupções.
Para saber mais sobre como você pode projetar resiliência com a Cloudera, confira nossa lista de verificação e recursos de recuperação de desastres, ou entre em contato com nossa equipe de serviços profissionais que pode ajudar a elaborar um plano de resiliência.