Data intégration, l'étape clé de votre projet BI

Lors d’un projet BI nous constatons que dans les bases de données ERP, CRM, SIRH, COMPTABILITE de nombreuses tables ne sont pas nécessaires à l’analyse des KPI de pilotage de votre activité. Il est donc nécessaire de passer par une phase de préparation des données avant leur exploitation en BI, cette étape est la phase de Data intégration.

Cette étape est cruciale et son ROI est rapide car elle rend la lecture et l’utilisation des données bien meilleure et facilite donc la construction de vos rapports et tableaux de bord.

Étapes réalisées lors de l’intégration des données :

1. Création du datalake ou du datawarehouse qui accueillera les données. Son architecture est définie selon les besoins de reporting et la source des données
2. Connexion aux sources de données et cela peu importe le format des données (Csv, Excel, API Rest, API Soap, SQL, PostGre, Oracle, DB2 …)
3. Nettoyage, Transformation, Retypage, Historisation. Cette étape est la plus importante et la plus technique selon les modifications à apporter aux données. L’utilisation de scripts de développement intégrés à l’ETL peut être nécessaire pour fiabiliser les retraitements complexes.
4. Mapping et intégration des données dans le datalake.