Data engineer Spark

Askills est un cabinet de conseil en informatique constitué d’experts en intelligence artificielle,
science des données et technologies web.

- I.A. : Machine & Deep Learning
- Data​ : Data Science, Big Data & Data analytics
- Web : Java, Javascript, PHP, Symfony , C#, Python, Go, Kotlin
 
Chacun de nos experts techniques dispose d’une connaissance profonde des technologies
et des bonnes pratiques pour animer un projet, lui donner du sens et le mener vers le succès.

Vous travaillerez sur une plateforme d’expérimentations de nouveaux services utilisant des données froides (exploitation d’historiques de données) et la fourniture de services industriels qui pourront être exploités par les SI.

La construction de la plateforme (et du socle associé) répond à un objectif d’amélioration et du coût des services et du time-to-market depuis les phases d’idéation jusqu’à l’industrialisation. Elle met en œuvre l’exploitation de forte volumétries de données dans un écosystème hadoop.
La mission consiste à intervenir sur la partie Back-office de la plateforme (alimentation / exploitation du Datalake, exposition de données)

Dans un contexte agile, vous êtes en mesure de vous appuyer sur des connaissances solides des technologies Hadoop / Spark / Scala pour porter en Spark les traitements et alimenter une base de données métier relationnelle.

Activités
·        Conception et développement des différentes briques logicielles
·        Mise en place des tests unitaires et des tests d’intégration
·        Assurer le suivi des tâches JIRA
·        Participer à la revue de code
·        Rédaction et actualisation des documentations techniques.
·        Participer aux différents rituels agiles projet.

Compétences
Essentielles :
·        Expérience de 2 ans minimum dans le domaine de la data (BI ou data science)
·        GIT / Gitflow
·        Hadoop / Hive / Spark / Scala
·        SQL
·        Jenkins / Nexus
·        Test driven development
·        Connaissance des fondements de l’agilité.

Considérées comme un + :
·        Hbase
·        Elastic Search
·        Kafka
·        JIRA / Confluence
·        PostgreSQL
·        Oauth2/OIDC
·        Méthode scrum

Savoir être
·        Rigueur
·        Dynamisme
·        Proactivité
·        Curiosité
·        Capacité à travailler en équipe
·        Capacité à analyser un problème et à proposer des solutions