Le poste correspondant à cette offre d'emploi a été pourvu.
Ingénieur DevOps compétences (Snowflake/Terraform)
Provence Alpes Côte d'Azur, Marseille (13000)
Originellement mis en ligne le 19 février 2024 - Remontée le 22 février 2024 par Marie Calvert (+ d'offres)
IPepperType de contrat :CDI
Métier :Développeur informatique
Niveau d'étude requis :Aucun
Expérience :4 ans minimum
Type d'entreprise :Autre type d'entreprise (client final)
Localisation :Provence Alpes Côte d'Azur, Marseille (13000)
Télétravail :Pas de télétravail
Poste à pourvoir
La Data Platform de notre client a été mise en place en 2021 afin de rassembler de manière fiable, gouvernée, cataloguée et sécurisée les données internes et externes nécessaires à toutes les activités d'analyse de données.
Cette plateforme est composée de 2 éléments :
- « Cloud Data Platform » (CDP) qui est l'entrepôt de données sur le CloudAWS permettant de répliquer et stocker les données brutes.
- « Cloud Datamart Platform » (CDMP) basé sur la solution Snowflake et permettant l'accès contrôlé, la préparation et la transformation des données pour chacun des use case, que ce soit BI, Data Science ou projets d'analyses de données.
Ces plateformes, bien que déjà opérées en production, nécessitent la mise en place d'outillages complémentaires afin de garantir la performance opérationnelle et la coordination requise par le niveau de service attendu par les métiers du groupe.
Mission et Responsabilités:
En collaboration avec l'architecte data, les experts Snowflake, le responsable de la plateforme ainsi que
l'équipe CICD centrale, vous définirez et mettrez en place la gouvernance, les processus, règles, bonnes
pratiques et outillage permettant la meilleure gestion possible à la fois des opérations d'administration
(type infra as code) et du code de la plateforme Snowflake.
Cette gestion CICD s'appliquera à la fois à l'équipe en charge de la plateforme (admin et ingestion des flux datalake) et aux équipes utilisatrices de la plateforme (BI, Data Science, projets, régions).
Votre expérience sur Snowflake vous permettra d'adapter au mieux la gestion CICD sur ce contexte, et
vous pourrez être amené à participer à d'autres activités Snowflake comme par ex le déploiement DBT.
Vous serez amené à accompagner et guider les équipes off-shore en Inde.
Activités :
- Définir la politique de gestion de l'infra et du code sur la plateforme Snowflake
o Infra as code pour la gestion de l'administration (tables, schéma, roles, ...)
o SQL versionning avec git, aiflow et DBT. ·
- Documenter les guidelines et best practices, donner le support aux équipes off-shore et
assurer le suivi des pratiques. ·
- Mettre en place l'outillage avec le support des équipes CICD centrales. ·
- Définir la migration de l'existant, contribuer si besoin à la migration du compte EE vers BC
(à confirmer). ·
- Autres activités potentielles
o Mise en place DBT.
o Création de la politique de tagging
o Performance: support aux projets pour optimiser voire recoder certaines requêtes
o Amélioration du monitoring sécurité
Cette plateforme est composée de 2 éléments :
- « Cloud Data Platform » (CDP) qui est l'entrepôt de données sur le CloudAWS permettant de répliquer et stocker les données brutes.
- « Cloud Datamart Platform » (CDMP) basé sur la solution Snowflake et permettant l'accès contrôlé, la préparation et la transformation des données pour chacun des use case, que ce soit BI, Data Science ou projets d'analyses de données.
Ces plateformes, bien que déjà opérées en production, nécessitent la mise en place d'outillages complémentaires afin de garantir la performance opérationnelle et la coordination requise par le niveau de service attendu par les métiers du groupe.
Mission et Responsabilités:
En collaboration avec l'architecte data, les experts Snowflake, le responsable de la plateforme ainsi que
l'équipe CICD centrale, vous définirez et mettrez en place la gouvernance, les processus, règles, bonnes
pratiques et outillage permettant la meilleure gestion possible à la fois des opérations d'administration
(type infra as code) et du code de la plateforme Snowflake.
Cette gestion CICD s'appliquera à la fois à l'équipe en charge de la plateforme (admin et ingestion des flux datalake) et aux équipes utilisatrices de la plateforme (BI, Data Science, projets, régions).
Votre expérience sur Snowflake vous permettra d'adapter au mieux la gestion CICD sur ce contexte, et
vous pourrez être amené à participer à d'autres activités Snowflake comme par ex le déploiement DBT.
Vous serez amené à accompagner et guider les équipes off-shore en Inde.
Activités :
- Définir la politique de gestion de l'infra et du code sur la plateforme Snowflake
o Infra as code pour la gestion de l'administration (tables, schéma, roles, ...)
o SQL versionning avec git, aiflow et DBT. ·
- Documenter les guidelines et best practices, donner le support aux équipes off-shore et
assurer le suivi des pratiques. ·
- Mettre en place l'outillage avec le support des équipes CICD centrales. ·
- Définir la migration de l'existant, contribuer si besoin à la migration du compte EE vers BC
(à confirmer). ·
- Autres activités potentielles
o Mise en place DBT.
o Création de la politique de tagging
o Performance: support aux projets pour optimiser voire recoder certaines requêtes
o Amélioration du monitoring sécurité
Profil recherché
Compétences Requises / Required Skills:
- Très bonne maitrise et expérience de mise en place de l'outillage CICD (voir liste des
outils) ·
- Principes ETL/ELT : dbt ·
- Connaissance de l'écosystème de la gestion de données (profil Data Engineer) ·
- Bon niveau d'Anglais pour les échanges off-shore. ·
- Soft skills :
o Force de proposition
o Autonome
o Dynamisme
o Fédérateur / Communiquant (serait un plus)
Connaissance des outils suivants :
o Obligatoire : Gitlab, Terraform, Jenkins, XLDeploy
o Obligatoire : Snowflake
o Dbt
o AWS
o JIRA/Conflu
Veuillez noter qu'il est fortement conseillé de maîtriser Terraform ou à minima sur les outils suivants: Ansible, Chef, Puppet, Cloudformation.
- Très bonne maitrise et expérience de mise en place de l'outillage CICD (voir liste des
outils) ·
- Principes ETL/ELT : dbt ·
- Connaissance de l'écosystème de la gestion de données (profil Data Engineer) ·
- Bon niveau d'Anglais pour les échanges off-shore. ·
- Soft skills :
o Force de proposition
o Autonome
o Dynamisme
o Fédérateur / Communiquant (serait un plus)
Connaissance des outils suivants :
o Obligatoire : Gitlab, Terraform, Jenkins, XLDeploy
o Obligatoire : Snowflake
o Dbt
o AWS
o JIRA/Conflu
Veuillez noter qu'il est fortement conseillé de maîtriser Terraform ou à minima sur les outils suivants: Ansible, Chef, Puppet, Cloudformation.
Description de la société
Nous sommes le partenaire technologique préféré de ceux qui changent le monde !
iPepper c'est avant tout une façon de travailler ensemble : se faire du bien, faire du bien et prendre soin de ses clients, salariés et partenaires !
Coaching, Recrutement et Conseil : une palette de services autour de la protection et la valorisation de la data.
iPepper c'est avant tout une façon de travailler ensemble : se faire du bien, faire du bien et prendre soin de ses clients, salariés et partenaires !
Coaching, Recrutement et Conseil : une palette de services autour de la protection et la valorisation de la data.