Data Engineer

Publiée le 21/09/2021 par INSYCO

Lieu : Paris
Durée : Misison de longue durée
Tarif : Tarif non renseigné
Télétravail : 25 %
Début : ASAP

Description de la mission :



Afin de répondre à un pic d'activité dans le cadre des différents projets informatiques de la DSI de notre client, nous recherchons un Data Engineer pour une mission de longue durée.

Descriptif de la mission:
Au sein de la direction DATA de la DSI, en charge principalement des activités d'analyse de la DATA, son administration, l'intégration et le traitement de nouvelles sources de données et des usages métiers, la restitution de données, notre client recherche un (e) : Data engineer

Vous serez rattaché fonctionnellement au responsable DATA Analytics au sein de la DSI du client et intègrerait une équipe de 4-5 personnes

Vos missions seront :
- Exposition des données et mise en place des usages de données
- Opérabilité des différents traitements
- Assurer l'observabilité des différentes chaines
- Description / Identification des travaux Liste des tâches
- Ingestion et traitement des sources de données
- Préparation des données (transformation fonctionnelle et technique)
- Restitution des données (Extractions, Reporting)

Les compétences techniques requises :

Framework Spark (Développement et Optimisation de cluster)
Python (Pyspark) Maitrise Spark DF et Pandas
Usage du service EMR pour le déploiement des clusters
Intégration avec les services connexes d'AWS (Lambda, Batch, ECS, )
Notebook
SQL
Gestion du format Parquet
Terraform
CTOOLS

Les soft skills attendues :

Une grande appétence pour la gestion des données
Bonne communication
Bonne autonomie / Force de proposition / Rigoureux / forte réactivité
Dynamique / Excellent état d'esprit/ Bon relationnel


Modalité de travail sur site, possibilité de travailler à distance à hauteur de 2/5 jours par semaine



Postuler à cette mission :
Si vous cherchez un CDI ou CDD, le jobboard Carriere-info est plus adapté.