Data Engineer GCP (Pub/Sub, DBT)

Description du poste

Le/la consultant(e) aura pour responsabilités :

• Développement et maintenance des pipelines de transformation de données avec DBT.
• Manipulation et traitement de gros volumes de données via BigQuery et SQL avancé.
• Gestion des flux de données et intégration avec Pub/Sub.
• Automatisation des workflows data via GitLab CI/CD et Docker Compose.
• Développement de traitements batch pour l’alimentation et l’export des flux de données.
• Mise en production des IHM génériques via inserts SQL.
• Développement de scripts Shell Bash dans un environnement Linux.
• Utilisation du framework interne Carrefour (Génépi).
• Collaboration avec l’équipe Flux dans un environnement Agile.

Qualifications

Diplômé(e) d’un Bac+5 en école d’ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d’une expérience significative équivalente.

Expérience : 5 à 7 ans en Data Engineering.

Compétences requises :

• DBT, SQL avancé, BigQuery, GCP, Pub/Sub, GitLab CI/CD, Docker Compose, PostgreSQL, Linux, Shell Bash, Git, Vim, Agile Scrum.

Informations supplémentaires

Looking forward to hearing from you !