Nous recherchons pour l'un de nos clients Parisien, un Ingénieur Big Data H/F.

Au programme : 

• Concevoir l’architecture technique nécessaire pour la valorisation de données.
• Développer les solutions data appropriées aux différents cas d’usage data émanant des unités métiers de l’entreprise
• Effectuer les croisements de données nécessaires ainsi que les travaux de validation, correction, qualité, nécessaires pour soutenir le travail des data scientists en aval.

Pour cette mission vous avez une :

•  Expertise sur Hadoop 3 et les composants de la stack (Hive 3, Yarn, Spark 2 et 3, ...)
• Expertise sur Airflow et la migration de Oozie vers Airflow
• Connaissance approfondie sur la migration hadoop 2.6.5 vers 3..1.1
• Compétence sur le langage Python (Airflow est en Python) et Redhat 8