La data est devenue un sujet stratégique avec le développement des outils permettant de dématérialiser les données et ainsi de les rendre plus facilement partageables. L’exemple le plus basique est le logiciel de bureautique qui a permis de passer de tableaux de données papier d’une expérience, à un tableau de données numériques de cette même expérience. La donnée est ainsi devenue une data : elle a été numérisée.
En une petite quinzaine d’années à peine, le développement constant d’outils informatiques permettant de numériser toutes sortes de données et l’avènement d’internet ont non seulement permis d’accélérer la numérisation des données, mais aussi leur production en masse. Ainsi l’accroissement de la quantité de données produites par les entreprises, les particuliers, les organisations, … est exponentiel. On parle désormais de big data, ou données massives, les volumes générés de data étant gigantesques.
Pour collecter, stocker, traiter et analyser ces données, le Data Engineer entre en piste.