Logo Izyfreelance
Nous contacter

Expert Technique Spark (F/H)

 

Durée : longue mission

Ville : Lyon (69)

 

Contexte : 

Dans le cadre d’un existant en Hadoop et HDFS, le projet recherche un profil
expert technique capable de mener et de réaliser une migration de
Cascading vers Spark.
La ressource sera intégrée à l’équipe d’expertise et devra travailler en
collaboration avec cette équipe, tout en ayant également pour objectif de
former des personnes en interne sur tous les composants techniques utilisés.

 

Missions : 

La ressource sera amenée à travailler sur :
L’architecture de la solution
Le choix d’un langage de développement (Scala / Java)
Le choix d’un format de stockage (ORC, Parquet)
La mise en place de logs et de métriques
L’industrialisation du lancement des jobs
Les bonnes pratiques à mettre en place vis-à-vis de la robustesse, de la
résilience et des performances
La mise en place de tests

Compétences techniques :

Excellente maitrise de Spark, Spark Thrift, SparkSQL
Bonne maitrise de l’écosystème Spring
Compréhension fine du fonctionnement d’un job en production et de
l’infrastructure sous-jacente
Utilisation courante de l’outillage de dev (Git, Maven, IntelliJ, )

 

Compétences fonctionnelles :

Capacité à s’intégrer au sein d’une équipe et à prendre une position de
lead
Dynamisme et capacité à faire partager son savoir
Expérience significative de travail en équipe en contexte Agile

 

 

    Je postule !