Postée il y a 15 heures
Almatek recherche pour l'un de ses client, Un Data ingénieur avec une expérience audiovisuel ou media en ligne sur IDF.
Contexte
La Direction Data a pour mission de :
Maximiser la collecte de données tout en respectant les réglementations en vigueur.
Développer la connaissance et l?expérience utilisateur.
Mettre à disposition des équipes internes des outils de pilotage et d?aide à la décision.
La prestation s?effectuera au sein de l?équipe Pilotage, qui est adossée à la plateforme data et composée actuellement d?un Product Owner et d?un Data Ingénieur. L?équipe est en charge du produit "Data4All", basé sur Google Cloud Platform (GCP), et qui centralise les données pour l?ensemble des dashboards internes.
Stack Technique
Langages & outils : SQL, Python
Orchestration : Airflow
Transformation des données : dbt
CI/CD & Infrastructure : Gitlab CI/CD, Terraform, Terragrunt
Cloud Provider : Google Cloud Platform (BigQuery, autres services GCP)
Containerisation : Docker
Profil candidat:
Missions
En tant que Data Ingénieur, vous interviendrez sur les aspects suivants :
1. Développement et maintenance du produit "Data4All
Construire de nouveaux indicateurs issus de nouvelles sources de données.
Mettre à jour et faire évoluer les indicateurs existants en fonction des évolutions des données.
Traiter et corriger les anomalies détectées.
Concevoir des modèles de données adaptés aux besoins des utilisateurs.
2. Accompagnement des utilisateurs
Aider les équipes internes à mieux exploiter les données disponibles sur Data4All.
3. Audit et cartographie des données existantes
Analyser et proposer une vision cible performante et gouvernée.
4. Mise en place du contrôle qualité des données
Assurer la fiabilité et la cohérence des données exposées.
5. Industrialisation et optimisation
Développer et maintenir les pipelines de traitement de données.
Assurer l?extraction et l?exposition des données issues de la zone Silver de la plateforme Data vers Data4All.
Collaborer avec les équipes Ops pour l?industrialisation des environnements Data4All.
Optimiser les performances et maîtriser les coûts sur GCP.
Participer aux phases de cadrage, planification et réalisation des tâches avec l?équipe.
Assurer une veille technologique continue.
Compétences Requises
Expérience : Minimum 3 ans en tant que Data Ingénieur.
Maîtrise des concepts data : structures de données, code, architecture.
Cloud : Expérience avec Google Cloud Platform (GCP), notamment BigQuery.
ETL / ELT : Expérience dans la mise en place de pipelines de traitement de données.
Outils & Frameworks :
Airflow pour l?orchestration.
dbt, avec une bonne maîtrise des tables incrémentales complexes.
Gitlab CI/CD pour l?automatisation des déploiements.
Docker pour la containerisation.
Terraform & Terragrunt pour l?industrialisation de l?infrastructure (IaC).
Langages : Excellente maîtrise de SQL et Python.
Méthodologies Agiles : Expérience avec Scrum et Kanban.
Soft skills : Bonne capacité de communication et de vulgarisation des aspects techniques.
Modalités de la Mission
Localisation : Présence sur site requise dans les locaux du client , avec un minimum de 50% du temps en présentiel.
Matériel : Le prestataire doit fournir un poste de travail performant avec un antivirus à jour et activé.