En tant qu’Ingénieur·e Data ou Data Engineer, ta tâche principale est la préparation et manipulation des données pour en tirer des informations. Tu dois développer des pipelines de données, c’est-à-dire des procédés permettant de récupérer des données brutes issues de n’importe quelle source pour les transformer rapidement en données exploitables par les Data Scientist. Tu dois également intégrer, consolider, nettoyer et structurer les données pour qu’elles puissent être utilisées dans des applications analytiques, en machine learning ou en analyse en intelligence artificielle. 

Ton rôle est donc d’établir d’énormes réservoirs de données et de gérer des systèmes de traitement et des bases de données à grande échelle. Tu travailleras souvent en étroite collaboration avec les Data Scientist. Le machine learning consiste à entrainer les ordinateurs pour qu’ils apprennent à partir des données fournies. Tu prépares, structures ces données et les Data Scientist les analyseront pour leur donner un sens.

En résumé, ton travail consiste à apporter ton expertise en données massives/big data permettant ainsi la manipulation des données, à concevoir des plateformes permettant de traiter de gros volumes d’information, à mettre en place des bases de données et à veiller à ce que celles-ci soient sécurisées et claires pour être analysées et transformées.