Data Engineer cloud - Apache beam / flink

Publiée le 03/11/2020 par Lawrence Harvey

Lieu : Paris
Durée : 6 mois
Tarif : Tarif non renseigné
Télétravail : Non
Début : ASAP

Description de la mission :



Freelance / Mission / Consultant / Data Engineering / Apache / GCP / Flink / Beam / IDF/ France


Lawrence Harvey recherche pour le compte de son client un Consultant Data Engineer. Le rôle sera basé dans la région parisienne.


Freelance - Pas de sous-traitance, merci.

Démarrage : ASAP

Contrat : 6 mois

Localisation : IDF

TJM négociable selon expérience


Au sein de l’équipe Data Platform du pôle Industrialisation, Cloud and Data rattachée au groupe DSI. Le consultant contribuera à la mise en place d’un Plan de Reprise d’Activité (PRA) de la plate forme Data Group dans l’objectif de garantir la continuité de service en cas de dysfonctionnement de la branche principale.


Les flux data sont implémentés avec Apache Beam nous permettant ainsi la possibilité d’exécuter les flux sous différents runners.


Activités :


Implémentation d’un cluster de secours utilisant le runner Apache Flink.


Assurer la bonne exécution des flux et ainsi garantir la continuité de service


Prise de connaissance de l’architecture existante (GCP DataFlow Apache Beam)


Elaboration d’une architecture cible


Mise en place d’un cluster Apache Flink hébergé sous GCP (VM, GKE, .)


Ecrire le plan de reprise d’activité


Mise à jour du DAT


Fournir la procédure d’exploitation


S’assurer que le cluster de secours soit exploitable (backup, supervision, dashboarding, ) et sécurisé Une certification professionnelle Big Date sur AWS ou Google Cloud Platform est un plus


Compétences Requises


3 ans d’expérience minimum sur GCP flow ou environnement cloud


1 expérience significative sur l’implémentation d’un cluster de secours pour l’execution de flux et la garantie de la continuité de service.


1 expérience significative en data engineering (mep d’une architecture)




Si cette superbe opportunité vous intéresse, merci de postuler vite sur l’annonce ou de m’envoyer votre CV à o.XXXXXX@XXXXXXXXXXXXXXXXXX (Olivia Rouhet) et je vous recontacterai le plus rapidement possible si votre profil matche avec la mission.


N’hésitez pas à partager avec votre réseau si vous connaissez des personnes qui pourraient être intéressées


Lawrence Harvey is acting as an Employment Business in regards to this position. Visit our website www.lawrenceharvey.com and follow us on Twitter for all live vacancies @lawharveyjobs

Postuler à cette mission :
Si vous cherchez un CDI ou CDD, le jobboard Carriere-info est plus adapté.