Le poste correspondant à cette offre d'emploi a été pourvu.
Data Engineer Databricks (IT) / Freelance
Ile de France, Boulogne-Billancourt (92100)
Originellement mis en ligne le 27 avril 2023 - Remontée le 4 mai 2023 par Marjorie Calvert (+ d'offres)
Comet
Type de contrat :Freelance
Métier :Développeur informatique
Expérience :10 ans minimum
Type d'entreprise :Autre type d'entreprise (client final)
Localisation :Ile de France, Boulogne-Billancourt (92100)
Salaire :de 100 000 €/an à 126 000 €/an
Télétravail :Télétravail partiel
Poste à pourvoir
Mission intégrée à la direction Data du client.
L'objectif est d'utiliser le projet Open Source Databricks Migrate pour déplacer les clusters, pools, jobs, notebooks, experiments... d'un workspace vers un autre se trouvant dans un sous-réseau privé. Ceci afin d'être conforme au TF1 Security Framework, et aux préconisations de l'audit de Sécurité Bouygues 2020.
La stratégie de bascule itérative des jobs via l'orchestrateur Airflow est déjà établie et partagée auprès des équipes Data Engineering, Data Science et Analytics.
Livrables attendus:
Migrer le workspace Databricks du Digital Data Lake
Migrer le workspace Databricks du Data Hub Pub
Migrer le workspace Databricks de l'équipe BI
L'objectif est d'utiliser le projet Open Source Databricks Migrate pour déplacer les clusters, pools, jobs, notebooks, experiments... d'un workspace vers un autre se trouvant dans un sous-réseau privé. Ceci afin d'être conforme au TF1 Security Framework, et aux préconisations de l'audit de Sécurité Bouygues 2020.
La stratégie de bascule itérative des jobs via l'orchestrateur Airflow est déjà établie et partagée auprès des équipes Data Engineering, Data Science et Analytics.
Livrables attendus:
Migrer le workspace Databricks du Digital Data Lake
Migrer le workspace Databricks du Data Hub Pub
Migrer le workspace Databricks de l'équipe BI
Profil recherché
Périmètres fonctionnels de la mission :
Databricks - Confirmé - Impératif
Python - Confirmé - Impératif
Sécurité - Junior - Souhaitable
Réseau - Junior - Souhaitable
Databricks - Confirmé - Impératif
Python - Confirmé - Impératif
Sécurité - Junior - Souhaitable
Réseau - Junior - Souhaitable