Big Data Engineer (ARCHIVE)

  • Localisation: Paris
  • Métier: Data
  • Type de contrat: CDI
  • Salaire: 40/55K
  • Type d'entreprise: Grand compte
  • Compétences: #Big Data

Description de poste

ref:  22-10

CDI – Mission au sein d’un grand groupe de transport

Le candidat doit avoir totalisé un minimum de 4 ans d’expérience professionnelles sur des sujets similaires,
pour que la candidature soit recevable. A défaut nous ne pourrons pas donner de suite positive.

Nour recherchons un Data Engineer sénior avec maîtrise sur les différences aspects aux traitement de la data et avec du recul sur le cycle de vie en grand du delivery des projets data.

Vos missions incluront également une part de veille technologique et de montée en compétences sur les thématiques liées à la Data et leur intégration dans un environnement de production mature et complexe sur le cloud.

Vous évoluerez au sein du stream IA, équipe utilisant des méthodes agiles et avec un produit à vocation à être mis en production. Pour cela, vous échangerez quotidiennement avec des Data Scientists et Data Engineers. Dans le but d’optimiser la personnalisation, le taux de conversion et les assets, Le Data Ingénieur sera capable d’intervenir sur plusieurs plusieurs domaines.

Activités détaillées :

– Définir et analyser des structures de données
– Contribuer dans les assets des différentes équipes produits pour interconnecter et collecter les données
– Mise à disposition de la data et des recommandations à des systèmes externes (apis, exports, injection de donnée)
– Être garant de la production (mise en place de monitoring et alerting et intervention si nécessaire)
– Développer et maintenir le continuous delivery (participer à l’intégration continue et à l’usine logicielle, déploiements et tests automatisés)
– Construire l’architecture cloud AWS qui hébergera notre infrastructure existante ou future
– Présenter et expliquer réalisations à des publics métiers et techniques.

Profil recherché

– De formation BAC+5 en École d’Ingénieurs ou équivalent, avec un minimum de 3 ans d’expérience dans le développement
– Connaissances en développement dans un langage de programmation (python, scala et/ou java)
– Maitrise en technologies Big Data:
– Connaissances/expérience en développement Spark
– Maitrise des outils d’extraction de la donnée (workflows Spark)
– Maitrise des outils de stockage (stockage objet / Base Relationnelle / NoSQL)
– Expériences sur le cloud public AWS
– Capacité à vulgariser des analyses complexes

Compétence :
– Traitement (développement et analyse) de la data (Spark/Python/Scala)
– Connaissance de l’environnement AWS (Glue, Lambda, S3, EMR, Kinesis)
– Maitrise de Glue ou EMR ou équivalent
– Avoir travaillé dans un contexte agile et adhérer aux principes agiles
– Expérience Devops, déploiement continu, Infra as Code
– Avoir une appétence pour la partie métier

Qualités requises :
– Autonomie
– Proactivité
– Clarté de la communication
– Rigueur et à l’écoute des autres

Compétences
AWS, Connaissance architectures environnement à hautes exigences de charge et disponibilité, Big Data