Le poste correspondant à cette offre d'emploi a été pourvu.
Data Engineer Java Spark Hadoop Junior
Ile de France, Paris (75000)
Originellement mis en ligne le 2 août 2023 - Remontée le 30 août 2023 par Marie Calvert (+ d'offres)
DGTL PerformanceType de contrat :Freelance
Métier :Développeur informatique
Expérience :4 ans minimum
Type d'entreprise :Autre type d'entreprise (client final)
Localisation :Ile de France, Paris (75000)
Télétravail :Télétravail partiel
Poste à pourvoir
- Analyser les spécifications et les besoins des métiers avec les P.O.s et B.A.s
- Designer et développer les traitements en batch et streaming via Java Spark et Kafka
- Produire de la documentation sous Confluence
- Assurer le support et la maintenance des produits déjà en production
- Participer à l'ensemble des cérémonies de sa Squad
Environnement technique :
- Développement du data processing Java/Spark/SQL (connaissances solides en Java 11 ET Spark ET Hadoop ET SQL indispensables), mais aussi HiveQL, Shell.
- Cluster on-premise Hadoop MapR, chargement des données en streaming (Kafka / MaprES) et en batch dans des bases Hive / MapR DB / Mongo DB.
- Exploitation d'outils DevOps (GitLab, Jenkins, K8S , ArgoCD , Sonar, Nexus, Maven...) pour l'intégration dans le process CI/CD.
Rôle
Développeur Data Engineer au sein d'une squad de ~8 développeurs.
Conception technique, travail avec les architectes pour la validation des solutions, travail avec les business analysts sur les EBM / Spécifications (capacités d'analyse et de vulgarisation nécessaire).
Réalisation des flux de données, Modélisation des tables intermédiaire si besoin, tests unitaires, maintenance.
Le développeur recherché sera confirmé afin d'être un interlocuteur privilégie du Tech Lead.
- Designer et développer les traitements en batch et streaming via Java Spark et Kafka
- Produire de la documentation sous Confluence
- Assurer le support et la maintenance des produits déjà en production
- Participer à l'ensemble des cérémonies de sa Squad
Environnement technique :
- Développement du data processing Java/Spark/SQL (connaissances solides en Java 11 ET Spark ET Hadoop ET SQL indispensables), mais aussi HiveQL, Shell.
- Cluster on-premise Hadoop MapR, chargement des données en streaming (Kafka / MaprES) et en batch dans des bases Hive / MapR DB / Mongo DB.
- Exploitation d'outils DevOps (GitLab, Jenkins, K8S , ArgoCD , Sonar, Nexus, Maven...) pour l'intégration dans le process CI/CD.
Rôle
Développeur Data Engineer au sein d'une squad de ~8 développeurs.
Conception technique, travail avec les architectes pour la validation des solutions, travail avec les business analysts sur les EBM / Spécifications (capacités d'analyse et de vulgarisation nécessaire).
Réalisation des flux de données, Modélisation des tables intermédiaire si besoin, tests unitaires, maintenance.
Le développeur recherché sera confirmé afin d'être un interlocuteur privilégie du Tech Lead.
Profil recherché
Les compétences indispensables pour ce poste :
- Développement en Java / Spark - 2-3 ans d'expérience minimum dans ces deux technologies
- Requêtage SQL
- Ecosystème Big Data (Hadoop, Spark, Kafka, Oozie)
- Scripting Shell
- Bases de données Hive, MapRDB (similaire HBase) et Mongo DB
- Connaissance CI/CD : Git / Gitflow / Jenkins / Nexus / Maven
- Bonne connaissance des pratiques Agiles / SAFe, utilisation de JIRA
- Connaissance des métiers de l'assurance (Assurance vie / Prévoyance)
Localisation : Paris (intra-muros) - 3 j / sem + télétravail 2 jrs / sem
Date de début de l'offre d'emploi: 16/08/2023
Date de fin de l'offre d'emploi: 31/12/2023
- Développement en Java / Spark - 2-3 ans d'expérience minimum dans ces deux technologies
- Requêtage SQL
- Ecosystème Big Data (Hadoop, Spark, Kafka, Oozie)
- Scripting Shell
- Bases de données Hive, MapRDB (similaire HBase) et Mongo DB
- Connaissance CI/CD : Git / Gitflow / Jenkins / Nexus / Maven
- Bonne connaissance des pratiques Agiles / SAFe, utilisation de JIRA
- Connaissance des métiers de l'assurance (Assurance vie / Prévoyance)
Localisation : Paris (intra-muros) - 3 j / sem + télétravail 2 jrs / sem
Date de début de l'offre d'emploi: 16/08/2023
Date de fin de l'offre d'emploi: 31/12/2023
Description de la société
DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.
Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.
Depuis 2005, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.
Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.
Depuis 2005, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.