Data Engineer Cloudera

FreelanceRadar

LinkedIn ↗

Maroc Full remote Freelance

Non précisé

Airflow Avro CDP Cloudera Data Engineering Hadoop Hive Impala Oozie ORC Parquet PySpark Spark SQL

Source : FreelanceRadar — MarocPublié Il y a 4 jours

Contexte

Mission pour un grand compte international disposant de plateformes Cloudera à grande échelle. Poste en télétravail depuis le Maroc, en freelance, en CDI ou en contrat offshore.

Missions

  • Développer et industrialiser des pipelines de données sur Cloudera avec Spark, Hive et Impala
  • Modéliser les données en couches Bronze, Silver et Gold et optimiser les traitements
  • Orchestrer les flux avec Airflow et Oozie et garantir la qualité des données
  • Contribuer aux migrations vers Cloudera Data Platform (CDP)

Profil recherché

  • Expérience en data engineering sur l'écosystème Hadoop et Cloudera, 2 ans minimum
  • Maîtrise de Spark, PySpark et SQL
  • Connaissance des formats Parquet, ORC et Avro
  • Connaissance de Cloudera CDP, Hive et Impala