
Data Engineer Aws (h/f)
Posted 12 days ago
Company Description
View moreÀ la croisée d’un cabinet de conseil, d’une agence digitale et d’une ESN, NEXTON cultive un positionnement innovant.
Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que la SNCF, Orange ou BNP Paribas dans leurs stratégies d’évolution et d’innovation digitales.
Nous intervenons sur l’ensemble de la chaîne digitale : de la conception (UX/UI), au développement (JS), jusqu’au pilotage de projets en mode agile.
Job Description
Tes missions :
En tant que Data Engineer, tes principales missions sont :
- De concevoir, développer et maintenir des pipelines de réplication et de traitement de données issues des sources hétérogènes, dans un contexte international, vers une plateforme de données centralisée sur AWS.
Tu es responsable du/de :
- Développement de pipelines ETL/ELT avec Airflow, Python, SQL
- Connexion aux bases sources (Exadata, Oracle, etc.)
- Intégration des données dans AWS (S3, Kinesis, DMS, Lambda...)
- Nettoyage, mapping, déduplication et enrichissement des données
- Collaboration avec les architectes pour appliquer les modèles cibles
- Documentation technique et référentiels
- Concevoir et mettre en œuvre les flux de réplication
- Harmoniser et transformer les données
- Automatiser les pipelines de données
- Développer des Pipelines Gitlab CI/CD
- Développer d'IaC pour des architectures sophistiquées full AWS avec Terraform, Ansible et Python.
- Contribuer au FinOps
Profil recherché :
Tu justifies d'au moins 4 ans d'expérience en tant que Data Engineer ou Ingénieur Intégration Data dans des environnements dans un environnement similaire.
Tu es dynamique, proactif, autonome, et ouvert d'esprit, bon communicant avec une grande curiosité scientifique
Tu as une très bonne maîtrise de l’écosystème AWS (S3, Kinesis, DMS, Lambda…)
Tu as une très bonne maîtrise des bases des données et des Data warehouses (Exadata, Oracle, SQL Server, Snowflake, etc.)
Tu as une maîtrise des langages : SQL, Python
Tu as une maîtrise des outils de traitement et d’orchestration (Apache Airflow, dbt, Python, SQL)
Tu as une bonne expérience en Terraform pour l’IaC
Tu as une connaissance de GitLab CI/CD pour l’automatisation des déploiements
Tu as une expérience avec des CRM
Tu as une connaissance des problématiques de data quality, modélisation, monitoring et alerting
Tu as une ou plusieurs certifications (AWS, Snwoflake, Terraform, etc.) sont fortement appréciées
Tu maîtrises l'anglais courant
