Data Engineer - Integration

La Direction des Systèmes d'Information (CIO) d'OVH Cloud se compose de sept départements (Units).

CIO = {Corporate Tools, Digital Tools, Digital Core, Global Infrastructure and Services, Security, Transversal Governance, Data Office}

Ce poste de “Data engineer” spécialisé Intégration se trouve dans l'Unit “Data Office”, précisément dans l'une des trois équipes de la squad BI : l'équipe Data integration.

Data Office = {Data governance, BI, Project & Process management}.

BI = {Data integration, Data engineering, Data analyst}.

Mission :

Ayant un programme Data clairement défini pour les 2-3 ans à venir, nous ambitionnons de dérouler les projets relatifs à la data et de les réussir.

Il s'agit de finaliser nos fondations techniques (datalake Hadoop et son éco-système, data warehouse, solutions dataviz, data lab...), de créer un self-service BI et de le promouvoir.

En parallèle aux projets du programme Data, l'ingénieur data contribuera à assurer :

• le RUN applicatif (monitoring, reprise, en cas d'incident, résolution de tickets...)
• le "Business as usual" (BAU), les demandes d'évolution <= 10 jour-homme

Le tout dans une démarche ITIL et d'agilité.

Quelques exemples d'activité :

• Collecter, consolider et modéliser de gros volumes de données (Data Warehouses, Data Lakes) pour les différents environnements de prod, dev et préprod
• Développer et automatiser les flux de données dans une approche CDC et/ou batch
• Développer des templates de collecte de la donnée pour automatisation de l'intégration
• S'assurer de la scalabilité, la sécurité, la stabilité et la disponibilité des données de la plateforme.
• Mise en place de monitoring des flux

Profil :

Le (la) candidat(e) aura au minimum 3-5 années d'expérience à un poste équivalent.

Le (la) candidat(e) devra démontrer des compétences solides dans les domaines ci-dessous :

Important

• Spark, spark streaming
• Python, Scala, Yarn, Hive, Bbig data cluster, Airflow

Database:

• SQL de niveau solide (min 3/5)

RGDB (MS SQLServer, MySQL, PostgreSQL

Linux:

• Ssh, Vim ou Nano, Basic bash scripting,
• Git: cloning, branching, rebasing, pushing, pulling.

Un plus :

• Apache Airflow, Maven, Pig, Hbase, Tableau, Apache Phoenix, PySpark, Microsoft SSAS, Kafka, ETL ou solutions CDC, Tableau software ou autre outil dataviz

Etat d'esprit :

• Equipe et collaboration, bonne capacité à communiquer
• Sens du service client et des objectifs (engagement, delivery)
• Capacité d'adaptation pour travailler dans un environnement complexe
• Autonomie

Langue(s):

• Français, Anglais