Cemig: como o Amazon Glue centralizou os dados

Com quase sete décadas de história, a Companhia Energética de Minas Gerais (Cemig) se estabeleceu como uma figura líder no cenário energético do Brasil. Seu sucesso lhe conferiu uma projeção nacional e reconhecimento em bolsas de valores internacionais.

Abrangendo 774 municípios de Minas Gerais, a Cemig fornece energia confiável a uma ampla parcela de 96% do estado. Como estatal controlada pelo Governo de Minas Gerais, sua influência se estende pela geração, transmissão, distribuição e comercialização de energia elétrica, bem como a gestão de distribuição de gás natural.

Enquanto destaque entre as principais fornecedoras de energia para clientes livres no Brasil, detendo 18% do mercado, a empresa transcende fronteiras. Com operações em 89 usinas, sua influência atinge 24 estados brasileiros e o Distrito Federal.

Desafio

A busca incessante pela excelência levou a Cemig a enfrentar desafios significativos em sua jornada de aprimoramento de dados. A complexidade de distribuir dados provenientes de várias fontes, juntamente com a demanda por consultas mais ágeis, exigia uma solução abrangente e eficiente. 

Um dos desafios mais significativos enfrentados pela empresa foi lidar com 160 operações de consulta a diferentes sistemas distribuídos. Para superar esse desafio, a Cemig implementou o Amazon Glue, uma plataforma ETL totalmente gerenciada que permite a coleta, transformação e carga de dados de diversas fontes.

Por que AWS e a dataRain

A decisão da Cemig de adotar a infraestrutura da AWS (Amazon Web Services) por meio da dataRain foi estratégica e fundamentada. A AWS é reconhecida por sua escalabilidade, confiabilidade e variedade de serviços em nuvem, qualidades cruciais para atender às necessidades de gerenciamento de dados da Cemig, garantindo consistência e continuidade em suas operações.

Por sua vez, a dataRain é altamente certificada e cumpre rigorosos padrões do setor, proporcionando à Cemig a confiança de que suas informações e operações estão em mãos seguras.

Essa parceria entre a AWS e a dataRain proporcionou à Cemig as ferramentas e a infraestrutura necessárias para enfrentar com êxito os desafios do gerenciamento de dados e alcançar a excelência na gestão de informações.

Solução

A solução foi meticulosamente planejada pela dataRain para atender às necessidades da Cemig, começando pela coleta precisa de informações de várias fontes. O Glue foi usado para extrair, transformar e carregar dados no Amazon DynamoDB, fornecendo um repositório central e de fácil acesso para os dados da empresa.

A solução incluiu os seguintes componentes:

• Coleta de dados de várias fontes
• Transformação e limpeza dos dados
• Armazenamento dos dados no Amazon S3
• Segurança e controle de acesso
• Verificações de qualidade
• Atualizações em tempo real

Serviços utilizados

A solução implementada pela Cemig foi composta pelos seguintes serviços:

• Amazon Glue: usado para extrair, transformar e carregar dados de várias fontes.
• Amazon DynamoDB: usado como repositório central de dados.
• Amazon S3: usado para armazenar dados brutos.
• AWS Cognito: usado para fornecer controle de acesso aos dados.
• DataIntelligent: usado para garantir a qualidade dos dados.

Resultados

A implantação dessas soluções gerou resultados significativos para a Cemig, conforme medido pelos seguintes indicadores-chave de desempenho (KPIs):

• Acesso eficiente aos dados: a solução resultou em um repositório centralizado e de fácil acesso, possibilitando a tomada de decisões estratégicas ágeis, o tempo de resposta para consulta foi reduzido de 5 minutos para 1 minuto.
• Eficiência operacional: a otimização no acesso aos dados impulsionou a eficiência operacional da Cemig, resultando em processos rápida. A precisão das análises foi aumentada em 20%.
• Melhoria na experiência do usuário: a velocidade de resposta para consultas foi aprimorada, com isso a satisfação do usuário foi aumentada em 15%.

Os próximos passos

O caminho da Cemig em direção à excelência nos dados está em constante evolução. Os próximos passos incluem:

• Validação em ambiente de QA: a solução está em processo de validação rigorosa em ambiente de Garantia de Qualidade (QA), para assegurar seu desempenho e confiabilidade.
• Implantação em produção: após a conclusão bem-sucedida dos testes, a solução será implantada em ambiente de produção, permitindo à Cemig colher os benefícios de uma gestão de dados eficiente.

Da fragmentação à eficiência nos dados

A trajetória da Cemig demonstra como a inovação e a eficiência na gestão de dados podem transformar desafios em oportunidades, destacando o compromisso da empresa em fornecer serviços de alta qualidade por meio do gerenciamento eficaz de informações.