Le poste correspondant à cette offre d'emploi a été pourvu.
Data Engineer AWS / Outils de visualisation de données/ SQL / CLOUDWATCH / ELK /PYTHON (H/F) (IT) / Freelance
Ile de France, La Défense (92400)
Originellement mis en ligne le 5 juin 2023 - Remontée le 12 juin 2023 par Marjorie Calvert (+ d'offres)
Ilyeum
Type de contrat :Freelance
Métier :Développeur informatique
Expérience :1 an minimum
Type d'entreprise :Autre type d'entreprise (client final)
Localisation :Ile de France, La Défense (92400)
Salaire :de 80 000 €/an à 90 000 €/an
Télétravail :Pas de télétravail
Poste à pourvoir
Au sein de l'équipe de valorisation des données pour accompagner le déploiement de la plateforme de données de l'entreprise. Vous assurez son évolution à la fois fonctionnelle et technique pour garantir ses changements d'échelle et accompagner les cas d'usage résolument orientés self-service.
Vous manipulez des données diverses, provenant d'applications de type ERP ou séries temporelles.
Le périmètre est transverse et sert l'entreprise dans son intégralité, avec l'ambition de facilité les accès aux données et déployer les analyses de données
Définir, mettre en œuvre et automatiser des pipes des données et gouvernance
1. Mettre en place des projets Data Lake (ingestion de sources, pipeline de traitements de données, modélisation, tests, déploiements) dans la meilleure architecture,
2. Définir les meilleures de façon de stocker exposer les données au sein de la plateforme selon les usages attendus
3. Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats
4. Réaliser les développements en ayant intégré les besoins et pratiques des analystes et data-scientists
Run et environnements
5. Maintenir les environnements techniques et partager vos connaissances,
6. Gérer les incidents et s'assurer de leur résolution dans une logique d'amélioration continue et d'automatisation (ex : rejeu de données)
7. Assurer la supervision des traitements (technique et fonctionnelle)
Vous travaillez au quotidien en lien étroit avec les autres data engineers de l'équipe, les data architects, les PO, les analystes et les data scientists.
Vous maîtrisez la méthode agile et chercher à développer une approche dataops.
Vous manipulez des données diverses, provenant d'applications de type ERP ou séries temporelles.
Le périmètre est transverse et sert l'entreprise dans son intégralité, avec l'ambition de facilité les accès aux données et déployer les analyses de données
Définir, mettre en œuvre et automatiser des pipes des données et gouvernance
1. Mettre en place des projets Data Lake (ingestion de sources, pipeline de traitements de données, modélisation, tests, déploiements) dans la meilleure architecture,
2. Définir les meilleures de façon de stocker exposer les données au sein de la plateforme selon les usages attendus
3. Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats
4. Réaliser les développements en ayant intégré les besoins et pratiques des analystes et data-scientists
Run et environnements
5. Maintenir les environnements techniques et partager vos connaissances,
6. Gérer les incidents et s'assurer de leur résolution dans une logique d'amélioration continue et d'automatisation (ex : rejeu de données)
7. Assurer la supervision des traitements (technique et fonctionnelle)
Vous travaillez au quotidien en lien étroit avec les autres data engineers de l'équipe, les data architects, les PO, les analystes et les data scientists.
Vous maîtrisez la méthode agile et chercher à développer une approche dataops.
Profil recherché
Nous recherchons pour le compte de notre client dans l'energie, un data engineer confirmé ayant entre 3 et 5 ans d'expérience.
Compétences :
Technologiques AWS (S3, Athena, Redshift, Snowflake ) Expertise
Requêtage de données (ex : SQL) Expertise
Visualisation de données un plus (outils du marché : Tableau, Qlik , kibana)
Supervision (ex : cloudwatch, ELK) Expertise
Finops :
Mise en œuvre du finops dans toutes les phases du projet / run : Maîtrise
Architecture et gouvernance
Concevoir l'architecture des données : maîtrise
Structuration des données dans les environnements AWS (ex : gestion des buckets S3) Expertise
Maintien dictionnaire de données : Expertise
Unix, Windows : Maîtrise
Documenter les travaux réalisés (ex : programme, procédures ) Maîtrise
Python : Maîtrise
Méthode agile et devops : maîtrise
Compétences :
Technologiques AWS (S3, Athena, Redshift, Snowflake ) Expertise
Requêtage de données (ex : SQL) Expertise
Visualisation de données un plus (outils du marché : Tableau, Qlik , kibana)
Supervision (ex : cloudwatch, ELK) Expertise
Finops :
Mise en œuvre du finops dans toutes les phases du projet / run : Maîtrise
Architecture et gouvernance
Concevoir l'architecture des données : maîtrise
Structuration des données dans les environnements AWS (ex : gestion des buckets S3) Expertise
Maintien dictionnaire de données : Expertise
Unix, Windows : Maîtrise
Documenter les travaux réalisés (ex : programme, procédures ) Maîtrise
Python : Maîtrise
Méthode agile et devops : maîtrise
Description de la société
Fondée en 2010, ILYEUM est une société de services et d'ingénierie informatique, à forte valeur ajoutée, spécialisée dans la transformation digitale et le Big Data.
En s'appuyant sur notre expertise IT et notre sens de l'innovation, nous apportons à nos clients des réponses sur mesure et durables.
L'ADN de notre entreprise, c'est d'ajouter une valeur humaine au savoir-faire technique. Audit, conseil, mise en œuvre et suivi des solutions installées : avec ILYEUM, vous êtes accompagnés aussi loin que vous en avez besoin.
Nous sommes attentifs à la qualité des liens tissés, en interne comme en externe, car c'est eux qui assurent la solidité de notre entreprise et la confiance de nos clients. In fine, l'empathie collaborative augmente considérablement la performance globale (solutions, relations).
En s'appuyant sur notre expertise IT et notre sens de l'innovation, nous apportons à nos clients des réponses sur mesure et durables.
L'ADN de notre entreprise, c'est d'ajouter une valeur humaine au savoir-faire technique. Audit, conseil, mise en œuvre et suivi des solutions installées : avec ILYEUM, vous êtes accompagnés aussi loin que vous en avez besoin.
Nous sommes attentifs à la qualité des liens tissés, en interne comme en externe, car c'est eux qui assurent la solidité de notre entreprise et la confiance de nos clients. In fine, l'empathie collaborative augmente considérablement la performance globale (solutions, relations).