Principais pormenores
Solução de Business Intelligence para análise unificada de dados de construção.
-
DesafioAnálise holística de dados a partir de múltiplas fontes isoladas e de vários formatos de dados estruturados e não estruturados
-
SoluçãoSolução de Business Intelligence para relatórios e análises inteligentes em tempo real
-
Tecnologias e ferramentasPowerBI, Azure, lago de dados, Databricks
Cliente
O cliente é uma empresa de gestão de centros de dados de renome mundial. A empresa precisava de um solução robusta de grandes volumes de dados para permitir uma análise unificada de todos os projectos de construção (em curso e históricos). A funcionalidade pressupõe a análise de dados em tempo real com visualização instantânea de KPIs e gráficos detalhados para apoiar a gestão com visibilidade multidimensional de todos os projectos de construção, histórico de preços e, em última análise, ajudar a tomar decisões baseadas em dados.
Desafio: os dados em formato não estruturado estavam isolados em toda a organização, o que impossibilitava uma análise holística em tempo real
O problema era que o armazenamento existente no cliente, bem como a abordagem para processar dados não estruturados em silos, eram ineficientes. A transformação digital era necessária para criar uma solução de inteligência empresarial com base na arquitetura sem servidor do lago de dados para recolha rápida de dados e processamento em tempo real. O âmbito do projeto pressupunha os seguintes tipos de dados: documentos de todos os departamentos em todos os projectos, documentos históricos do Google Workspaces (word, xlsx de layout complexo, pdf e SAP).
Solução: um lago de dados sem servidor baseado na plataforma Azure para análise empresarial em tempo real e relatórios inteligentes
Depois de analisar os requisitos comerciais do cliente, a nossa equipa de engenharia de grandes volumes de dados entregou o projeto em duas fases: prova de conceito e implementação de produção:
- Implementou um lago de dados centralizado em Arquitetura sem servidor do Azure
- Dados ingeridos do Google Workspace e do SAP
- Efectuou ETL de dados não estruturados utilizando o Azure Databricks
- Configurar painéis de controlo empresariais no PowerBI - para permitir uma visão holística dos preços de projectos passados e futuros, calendário, dados de fornecedores, etc.
O pipeline de dados processa e actualiza centenas de ficheiros por centro de dados e por dia.
O desenvolvimento da solução de inteligência empresarial inteligente demorou 2 semanas para o PoC e 2 meses para a produção em direto.
Analise mais detalhadamente a arquitetura da solução desenvolvida para compreender como os dados foram processados:
Durante o trabalho, ingerimos, armazenámos, processámos e visualizámos dados de várias fontes.
Resultado: relatórios em tempo real com BI
Durante o projeto, a nossa equipa de cientistas e engenheiros de dados realizou Desenvolvimento de grandes volumes de dados.
Como resultado, desenvolvemos uma solução de Business Intelligence personalizada para unificar e analisar dados históricos de projectos de construção utilizando os dados isolados da empresa do cliente. Agora, utilizando a nossa solução tecnológica, o cliente pode tomar decisões comerciais baseadas em dados, apoiadas pela análise de grandes quantidades de dados agregados de várias fontes num relatório atualizado baseado em dados relevantes.