Jobiglo

No results.

Ingénieur Data – Expert en pipelines Databricks & gouvernance des données

NHVR External Careers · Sydney

New
Permanent Hybrid Senior 🇬🇧 English
Python PySpark Spark SQL Databricks Delta Lake CI/CD Git Agile Scrum Data Governance Unity Catalog Data Modeling SQL Cloud Computing Data Security Pipeline Automation

Job description

En tant qu'Ingénieur Data chez NHVR External Careers, vous intégrerez une équipe Scrum à haute performance pour piloter la stratégie Data Science & Analytics de l’entreprise. Vous serez le garant de la conception, du déploiement et de l’optimisation de pipelines de données scalables sur Databricks, en utilisant Python, PySpark et Spark SQL. Vos missions principales incluront : - Analyser les besoins métiers, estimer les charges de travail, prioriser les tâches et livrer des solutions de qualité dans les délais impartis. - Concevoir, développer et maintenir des pipelines d’ingestion et de transformation basés sur un cadre métadonnées‑driven, tout en assurant la réutilisabilité des composants pour accélérer l’onboarding de nouvelles sources de données. - Gérer les notebooks et jobs Databricks, optimiser les performances et les coûts via la configuration des clusters, les politiques de clusters, ainsi que le tuning de Spark et Delta Lake. - Faire évoluer la plateforme vers des pipelines déclaratifs Lakeflow et exploiter les dernières fonctionnalités de Databricks. - Appliquer les meilleures pratiques CI/CD : contrôle de version, tests automatisés, revues de code et déploiements validés par le CAB. - Assurer la maintenance, le support et la mise à jour des workflows existants tout au long du cycle de vie applicatif. - Mettre en place et gérer la sécurité des données avec Unity Catalog : permissions, filtres de lignes, masquage de colonnes, gestion des secrets et des principals de service. - Identifier, classifier et protéger les données sensibles et personnelles (PII) en appliquant des tags de gouvernance et des politiques de conformité. - Collaborer étroitement avec les équipes Data Science, Analytics, Sécurité et les parties prenantes réglementaires pour transformer les données brutes en intelligence exploitable. Profil recherché : - Minimum 5 ans d’expérience en ingénierie de données, avec une expertise avérée sur Databricks, Spark, PySpark et Delta Lake. - Maîtrise des langages Python et SQL, ainsi que des concepts de pipelines de données, de modélisation et de gouvernance. - Expérience solide en CI/CD, Git, tests automatisés et déploiement de solutions cloud. - Connaissance approfondie des bonnes pratiques de sécurité des données (Unity Catalog, chiffrement, masquage, gestion des accès). - Capacité à travailler en mode agile, à communiquer clairement avec des interlocuteurs techniques et fonctionnels, et à gérer les risques et les dépendances. - Diplôme en informatique, ingénierie ou domaine équivalent. Nous offrons : - Un environnement de travail hybride (bureau et télétravail) au sein d’une organisation engagée dans l’innovation réglementaire. - Des projets à fort impact, avec des opportunités de développement professionnel et de formation continue. - Un package salarial compétitif et des avantages sociaux attractifs. Rejoignez-nous pour contribuer à la transformation digitale du secteur réglementaire et faire évoluer la manière dont les données sont exploitées au service de la sécurité et de la conformité.

Questions fréquentes

Le salaire n'est pas communiqué publiquement par le recruteur. Vous pouvez postuler et négocier directement avec NHVR External Careers.
Cliquez sur "Postuler maintenant" en haut de la page. Vous pouvez importer votre CV en 1 clic — Jobiglo extrait automatiquement vos informations et postule pour vous.
Le contrat proposé est un Permanent basé à Sydney.

Why are you reporting this job?

Thank you for your report. We will review this job.

Apply in 30 seconds

Enter your email to apply. An account will be created automatically.

Apply now →

By continuing, you accept our terms of use.

Already have an account? Login

A question about this job?

Ask it here: you will get the full job summary by e-mail, right away.

Published 55 minutes ago

Expires 1 month from now

4 views · 0 interested

Boost your chances

Upload your CV — we will match you with relevant openings.

Analyzing your CV...

NHVR External Careers

Sydney