Transformação de Data Lake para uma Organização Associativa

Contexto

Organização profissional histórica e de referência para médicos de obstetrícia e ginecologia (OB‑GYN). O nosso cliente defende os OB‑GYN na prestação de cuidados equitativos e baseados em evidência aos pacientes, hoje e no futuro. Antes da intervenção da Keyrus, não existia uma plataforma centralizada para ingestão e análise de dados. Os vários departamentos recorriam a diferentes fontes, desde ficheiros Excel a dashboards no Looker, apresentando níveis distintos de maturidade de dados. A organização pretendia modernizar a sua plataforma de analytics e obter insights críticos sobre campanhas de marketing e vendas de produtos que até então não estavam disponíveis.

Desafio

A organização de membros precisava de consolidar fontes de dados díspares e diferentes níveis de maturidade analítica numa única plataforma moderna e relevante. O sistema existente, com departamentos a enfrentar desafios distintos, revelou‑se difícil de gerir de forma eficaz por parte da equipa de IT. A resolução deste problema exigiu o desenvolvimento de uma solução robusta de ponta a ponta, criando ligações entre as várias plataformas de dados on‑premises e na cloud da organização, como o SQL Server e o GCP. Os dados foram integrados no AWS Redshift para permitir o processamento e a transformação eficientes através do AWS Glue, recorrendo ao Power BI para reporting interativo e visualização de dados.

Abordagem

A Keyrus implementou uma estratégia de ingestão de dados personalizada, recorrendo a uma combinação de conectores SFTP, AWS DMS, proxies e chamadas a APIs, de forma a garantir a atualização regular e fiável dos dados. Um processo ELT baseado no AWS Glue extraiu e processou registos provenientes de seis aplicações de sistemas de origem distintos, criando uma base de dados unificada. De seguida, a equipa desenhou e implementou um data warehouse abrangente no Amazon Redshift, utilizando procedimentos armazenados para transformar e estruturar os dados de forma eficiente para fins analíticos. Por fim, foram desenvolvidos dashboards operacionais automatizados para acompanhar as vendas e o inventário de produtos, monitorizar o desempenho das campanhas de marketing e medir a participação em eventos, proporcionando visibilidade em tempo real sobre os principais indicadores organizacionais.

Principais resultados

Benefícios

A solução proporcionou vários benefícios-chave, incluindo uma maior precisão e atualidade dos dados através de processamento automatizado, que eliminou erros manuais e garantiu insights em tempo real. Dashboards acionáveis disponibilizaram aos stakeholders acesso imediato aos principais indicadores de negócio, capacitando a tomada de decisão orientada por dados em todos os departamentos. Adicionalmente, a utilização do AWS Glue e do Redshift assegurou escalabilidade e elevado desempenho, permitindo ao ambiente processar grandes volumes de dados de forma eficiente e adaptar-se de forma contínua à medida que as necessidades organizacionais evoluem.

Partilhe esse caso de sucesso