Ingénieur Big Data h/f

  • Confirmé / Senior

  • Paris

  • Français

Nous recherchons un ingénieur données (data engineer)


vous serez en charge de :



  • Participer au Design

    • Participer aux estimations de charges et aux analyses techniques des projets

    • Participer à la conception de l’architecture technique et fonctionnelle des applications : flux de données (entrants, sortants), stockage et organisation des données, spécifications des tables, etc.

    • Participer au dimensionnement et aux spécifications des clusters à déployer

    • Assurer le Build

      • Mettre en place les processus de collecte, de transformation et stockage des données au sein des clusters

      • Réaliser les développements des scripts de traitement des données, aussi bien sur la donnée brute que sur la donnée élaborée

      • Elaborer les scripts d’ordonnancement et la planification des travaux assurant l’alimentation et la production des données en mode industrialisé

      • Aider auRun

        • Superviser, éventuellement, le maintien opérationnel des applications mises en production, en collaboration avec le support informatique du client ou de ses partenaire


Vos compétences


De formation BAC+5 en informatique, vous possédez une première expérience dans le développement d’applications de traitement de la donnée. Vous maîtrisez également les méthodes et outils de développement (git par exemple).


Vous connaissez et maîtrisez l’écosystème et les outils Hadoop (shell, Pig, Hive, Sqoop, Oozie principalement) ainsi que Spark. Une connaissance des technologies front serait un plus (frameworks Javascript, CSS).

  • Hadoop