Senior Cloud Data Platform Engineer AWS H/F

Contexte de la missionDans le cadre du développement et de l'évolution d'une plateforme Data Cloud basée sur AWS, nous recherchons un Senior Cloud Data Platform Engineer capable de concevoir, industrialiser et maintenir une infrastructure Data moderne, sécurisée et évolutive.

Le consultant interviendra au sein d'équipes pluridisciplinaires composées d'Architectes Cloud, Data Engineers, DevOps Engineers et équipes Support afin de fournir une plateforme robuste permettant l'ingestion, le traitement, le stockage et l'exploitation de données à grande échelle.

Missions principales1. Conception et industrialisation de l'infrastructure CloudConcevoir et développer des composants Infrastructure as Code (IaC) réutilisables.

Créer et maintenir des templates avancés permettant le provisionnement automatisé des ressources AWS.

Définir les standards techniques et les bonnes pratiques d'architecture Cloud.

Garantir la conformité, la sécurité et la gouvernance des infrastructures déployées.

Participer aux choix d'architecture et aux revues techniques.

Livrables attendusTemplates AWS CDK et CloudFormation.

Modules d'infrastructure réutilisables.

Documentation d'architecture.

Standards de développement et de déploiement.

2. Architecture et développement de la Data PlatformConcevoir des blueprints techniques destinés aux équipes Data Engineering.

Mettre en ?uvre des architectures Data Lake et Lakehouse sur AWS.

Définir les modèles de stockage optimisés pour la performance et la scalabilité.

Concevoir des pipelines de données performants et résilients.

Accompagner les projets métier dans leur intégration à la plateforme.

Livrables attendusArchitectures de référence.

Blueprints applicatifs.

Pipelines Data industrialisés.

Guides d'intégration et d'exploitation.

3. Data Engineering & LakehouseParticiper à la conception et au déploiement des traitements de données.

Optimiser les performances des pipelines de transformation.

Mettre en ?uvre des formats de stockage analytiques performants.

Développer des solutions de gouvernance et de catalogage des données.

Garantir la qualité et la disponibilité des données.

Technologies associéesApache Iceberg

Parquet

AWS Glue

AWS Athena

AWS Lake Formation

PySpark

AWS EMR

4. Exploitation et amélioration continueAssurer le maintien en conditions opérationnelles des plateformes existantes.

Superviser les composants de la plateforme Data.

Participer à la résolution des incidents et problèmes.

Optimiser les coûts et les performances des ressources AWS.

Améliorer continuellement les processus d'industrialisation.

Outils associésAWS CloudWatch

Jenkins

SonarQube

Ruff

5. Support et accompagnement des équipesAccompagner les Data Engineers dans l'utilisation de la plateforme.

Apporter une expertise technique sur les sujets Cloud et Data.

Participer aux ateliers d'architecture.

Réaliser des formations et transferts de compétences.

Contribuer à la diffusion des bonnes pratiques au sein des équipes.

Profil candidat:

FormationBac+5 en Informatique, Data Engineering, Cloud Computing ou équivalent.

ExpérienceMinimum 8 années d'expérience dans les environnements Data et Cloud.

Expérience significative sur AWS.

Expérience démontrée dans la conception de plateformes Data industrielles.

Participation à des projets de transformation Cloud à grande échelle.

Critères différenciantsLes compétences suivantes constitueront un véritable avantage :

Architecture Lakehouse moderne.

Expertise approfondie Apache Iceberg.

Mise en ?uvre avancée d'AWS Lake Formation.

Développement de frameworks AWS CDK réutilisables.

Optimisation FinOps sur AWS.

Expérience Platform Engineering.

Mise en place de standards de gouvernance Data à l'échelle de l'entreprise.