Data Engineer Python - Snowflake H/F - Citech

CITECH recrute !

Si vous souhaitez participer à la transformation d'une plateforme DATA stratégique et intervenir sur des traitements à forte volumétrie, nous avons LA mission pour vous ! Nous recherchons en effet un(e) Data Engineer Python / Snowflake (H/F)

Notre client est un acteur majeur du secteur des médias et de l'information, engagé dans une transformation DATA ambitieuse autour des technologies cloud et Snowflake.

Vous souhaitez contribuer à la migration d'une plateforme Cloudera vers Snowflake et intervenir sur des données variées (audience web/mobile, marketing digital, contenus éditoriaux, logistique, base clients) ? Cette mission est faite pour vous.

Vous aurez donc les missions principales suivantes :

Développer et maintenir des flux d'ingestion et de transformation de données

Participer à la migration des traitements Cloudera / Hive / Hadoop vers Snowflake

Concevoir et développer des traitements en Python, SQL et éventuellement PySpark

Intégrer et exploiter des données provenant de multiples sources : API, Kafka, RabbitMQ, fichiers plats et bases relationnelles

Assurer le suivi de production et intervenir sur les incidents techniques

Réaliser les analyses, diagnostics et corrections des anomalies en production

Participer aux revues de code et contribuer aux workflows Git

Garantir la qualité, la cohérence et la fiabilité des données

Rédiger la documentation technique et les procédures d'exploitation

Collaborer étroitement avec les équipes techniques et métiers dans un environnement exigeant et collaboratif

Les compétences attendues sont les suivantes :

Très bonne maîtrise de Python et SQL

Expérience significative sur des environnements ETL / ELT

Bonne connaissance des problématiques de traitement et transformation de données

Expérience en suivi de production et gestion d'incidents

Maîtrise de Git et des bonnes pratiques de versionning

Capacité à travailler en autonomie avec rigueur et esprit d'analyse

Une expérience sur Snowflake ou BigQuery est fortement appréciée

Une connaissance de Spark / PySpark est un plus

Une expérience sur les environnements Hive / Hadoop / Cloudera est appréciée

Une connaissance de Kafka, RabbitMQ, GitLab CI ou Kubernetes constitue un atout supplémentaire

Autonomie, rigueur, esprit d'équipe, capacité d'analyse et sens du service seront vos meilleurs atouts.

• Python
• Esprit d'analyse