Tech Lead Datastage H/F
Ile de France, Paris (75001)
Originellement mis en ligne le 6 mai 2024 - Remontée le 19 mai 2024 par Marie Calvert (+ d'offres)
NexorisType de contrat :Freelance
Métier :Développeur informatique
Expérience :5 ans minimum
Type d'entreprise :Autre type d'entreprise (client final)
Localisation :Ile de France, Paris (75001)
Télétravail :Pas de télétravail
Poste à pourvoir
Un grand groupe bancaire basé en France cherche à renforcer son équipe métier par l'intégration d'un ingénieur Data (H/F) spécialisé dans la technologie Datastage ayant évolué dans le secteur bancaire et risque de crédit.
Détails de la mission :
- Mettre en place la collecte et mettre celle-ci à disposition des données au sein de l'entreprise.
- Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent.
Activités:
- Mettre à disposition de la donnée aux équipes utilisatrices
- Mettre en production de modèles statistiques
- Suivre le projet de développement
- Développer le job spark
- Traiter et ingérer plusieurs formats des données
- Développer des scripts
- Développer et Implémenter les collectes de données, les jobs de traitement et Mapping de données
- Développer des moyens de restitution via génération de fichier et ou API & Dashboarding
- Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers
- Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI)
- Développer des API génériques d'ingestion et de traitement de données dans un environnement HDP
- Participer à la conception, mise en place et administration de solutions Big Data
- Participer à l'installation, administration et configuration des Hadoop clusters. Mettre en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka
- Normaliser et agréger les données afin de produire les rapports sous forme de Business View
Détails de la mission :
- Mettre en place la collecte et mettre celle-ci à disposition des données au sein de l'entreprise.
- Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent.
Activités:
- Mettre à disposition de la donnée aux équipes utilisatrices
- Mettre en production de modèles statistiques
- Suivre le projet de développement
- Développer le job spark
- Traiter et ingérer plusieurs formats des données
- Développer des scripts
- Développer et Implémenter les collectes de données, les jobs de traitement et Mapping de données
- Développer des moyens de restitution via génération de fichier et ou API & Dashboarding
- Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers
- Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI)
- Développer des API génériques d'ingestion et de traitement de données dans un environnement HDP
- Participer à la conception, mise en place et administration de solutions Big Data
- Participer à l'installation, administration et configuration des Hadoop clusters. Mettre en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka
- Normaliser et agréger les données afin de produire les rapports sous forme de Business View
Profil recherché
Expérience avérée dans le secteur bancaire et risque de crédit.
- Datastage PX (parallèle), Version 11
- Connaissance des traitements génériques et séquentiels
- Optimisation des traitements datastage
- Outils : Commandes shell, PUTTY, FileZela
- Maitrise outils de versionning XLR/XLD
- BD Oracle
- Connaissances méthodes agiles.
- Soft skills : bonne communication orale et écrite, passionné, motivé, rigoureux et curieux
Longue mission basé à Paris13e.
2 jours de TT proposés/semaine.
- Datastage PX (parallèle), Version 11
- Connaissance des traitements génériques et séquentiels
- Optimisation des traitements datastage
- Outils : Commandes shell, PUTTY, FileZela
- Maitrise outils de versionning XLR/XLD
- BD Oracle
- Connaissances méthodes agiles.
- Soft skills : bonne communication orale et écrite, passionné, motivé, rigoureux et curieux
Longue mission basé à Paris13e.
2 jours de TT proposés/semaine.
Description de la société
Nexoris est un cabinet de conseil dédié depuis 2010 aux consultants Indépendants du secteur IT & Financier intervenant dans les transformations métiers et SI de nos clients.