Data Engineer H/F - Astier Francis

Vous évoluerez dans un environnement à forte dimension finance, sur des problématiques mêlant Data Engineering, Cloud GCP et intégration progressive de cas d'usage liés à l'IA.

Le poste

Vous intervenez sur la conception, le développement et l'industrialisation de pipelines de données au sein d'un environnement GCP.

Votre rôle : construire des flux de données fiables, performants et industrialisés, tout en contribuant à leur exploitation pour de nouveaux cas d'usage Data & IA.

Vos missions

Data Engineering

- Concevoir et développer des pipelines de données robustes et scalables
- Manipuler et transformer les données avec BigQuery et DBT
- Développer les traitements et automatisations en Python
- Orchestrer les workflows avec Airflow / Cloud Composer
- Gérer les flux et le stockage de données sur GCS
- Déployer et exploiter des services sur Cloud Run

Cloud & Industrialisation

- Automatiser le déploiement des infrastructures avec Terraform
- Participer à l'industrialisation des environnements Data
- Garantir la qualité, la disponibilité et la performance des pipelines
- Contribuer aux problématiques de production, monitoring et RUN
- Analyser et résoudre les incidents liés aux traitements Data

Data & IA

- Participer à l'intégration de nouveaux cas d'usage liés à l'Intelligence Artificielle
- Préparer et fiabiliser les données nécessaires aux modèles et applications IA
- Contribuer à l'industrialisation de pipelines alimentant des solutions de Machine Learning / IA
- Travailler avec les équipes Data et IA sur la mise à disposition de données exploitables à grande échelle

Environnement technique

- GCP
- BigQuery
- Airflow / Cloud Composer
- Google Cloud Storage (GCS)
- Cloud Run
- DBT
- Terraform
- Python
- CI/CD
- Data pipelines
- IA / Machine Learning

- Expérience confirmée en Data Engineering
- Très bonne maîtrise de Python et SQL
- Expérience significative sur GCP, notamment BigQuery
- Bonne maîtrise de DBT
- Expérience avec Airflow / Cloud Composer
- Maîtrise ou bonne connaissance de Terraform
- Habitude des environnements de production et des problématiques d'industrialisation
- Capacité à être rapidement autonome sur un environnement technique existant
- Une expérience sur des projets IA / Machine Learning / GenAI ou sur l'industrialisation de données à destination de modèles constitue un vrai plus

Le contexte

- Plateforme Data Cloud moderne
- Environnement à forte dimension finance
- Volumes de données importants
- Enjeux de production, fiabilité et industrialisation
- Développement de nouveaux cas d'usage autour de la Data et de l'IA
- Équipe technique avec un bon niveau d'autonomie

Dans le cadre du renforcement d'une équipe Data à Bordeaux, nous recherchons un(e) Data Engineer confirmé(e) pour intervenir sur une plateforme Cloud moderne, avec des enjeux importants d'industrialisation, de performance et de fiabilité des données.

• Python
• Intelligence artificielle
• Autonomie
• Terraform
• Machine learning
• Google cloud platform
• SQL