Votre quotidien en tant que Data Engineer au sein de Aubay Data & AI :

Définition de la stratégie de stockage et mise en œuvre des technologie appropriées (base de données SQL, NoSQL, stockage distribué,…)
Ingestion des données (structurées, semi-structurées ou non-structurées) selon différentes fréquences : batch, micro-batch ou temps réel
Conception et mise en œuvre de pipelines de données afin de fournir des données prêtes à l’emploi aux consommateurs : uniformisation, mise en qualité, enrichissement, calcul d’indicateurs,…
Conception et développement d’API pour exposer les données auprès d’applications tierces
Appui aux Data Scientists pour industrialiser et optimiser les algorithmes de Machine Learning
Préparation et animation d’ateliers de travail avec des interlocuteurs variés : recueil/approfondissement des besoins métiers, avancement/restitution des travaux, transfert de compétences,…

Votre profil :

Vous disposez d’une formation niveau BAC+5 (Master 2 ou école d’ingénieur) spécialisée en informatique
Vous avez déjà une première expérience significative (a minima 2 ans) en Data Engineering sur des technologies Big Data ou Cloud
Les technologies telles que Hadoop, Spark ou Kafka sont vos technologies de prédilection
La programmation n’a plus de secret pour vous et vous maitrisez parfaitement un ou plusieurs langages de programmation suivants : Java, Scala et Python
Vous maîtrisez les tenants et aboutissants de la philosophie DevOps et des outils orientés CI/CD
Vous êtes soucieux de la qualité et de la performance de vos développements et vous vous intéressez à l’innovation frugale
Vous êtes un expert technique dans votre domaine sans pour autant oublier l’importance d’une communication orale et écrite de qualité et adaptée à chacun de vos interlocuteurs
Vous travaillez au quotidien en mode agile et vous en maitrisez les fondements

Data Engineer (h/f)

Company Description