Architecte Data Microsoft Fabric senior - Audit et optimisation - Freelance (H/F)

Taux journalier (TJM): 650€ / jour

Notre client dans le secteur Banque et finance recherche un/une Architecte Data Microsoft Fabric senior - Audit et optimisation H/F

Description de la mission

Contexte

Une banque indépendante dispose d'une plateforme de données en production depuis un an sur Microsoft Fabric. Elle alimente le reporting bancaire (PNB, cockpits métiers, qualité des données) et des projets réglementaires. L'équipe Data BI analytique compte 9 personnes rattachées au Head of Data : product manager, analytics engineers, data engineers et data analysts. Des key users sont présents dans chaque ligne métier. La plateforme comporte environ 180 pipelines, 600 notebooks et un package Python de fonctions partagées. Elle s'appuie notamment sur OneLake, Lakehouse, Spark / PySpark, SQL endpoint, Direct Lake et une capacité dédiée, avec une architecture médaillon Bronze / Silver / Gold. Les sources incluent le core banking SAB et Salesforce, via une couche API temps réel et DataHub Fabric. La restitution repose sur Power BI et des applications HTML interactives.

L'équipe doit assurer le run et les projets 2026-2027, tout en fiabilisant le socle avant d'y adosser Fabric IQ et des agents IA. Les enjeux principaux sont la sécurisation des accès au moindre privilège, la réduction du couplage au socle partagé et la maîtrise des formats de stockage, ainsi que l'optimisation des performances et des coûts.

Mission

Intervenir en tant qu'architecte Data Microsoft Fabric senior pour auditer, sécuriser et optimiser le socle data. La mission est réalisée au forfait, avec des livrables mesurables et directement exploitables par l'équipe Data. Elle couvre trois chantiers pouvant être engagés indépendamment : sécurité et habilitations, socle de développement, performance, coût et durabilité. Chaque chantier est cadré, mesuré avant et après, puis clôturé par des recommandations opérationnelles et un transfert structuré à l'équipe. L'approche privilégie l'échantillonnage ciblé des traitements les plus coûteux plutôt qu'une revue exhaustive des notebooks.

Principales responsabilités

*

Auditer les workspaces, rôles, permissions, groupes Entra ID, partages, RLS / OLS, paramètres de tenant, identités, secrets, permissions des shortcuts et réseau, puis évaluer l'alignement entre Fabric et RBAC Azure.

*

Définir une cible d'habilitations par profil, prioriser les écarts et proposer un plan de remédiation, un standard de nommage et une procédure de recertification des accès.

*

Étudier la centralisation et la gouvernance des accès via OneLake Catalog et OneLake Security, ainsi que l'architecture d'anonymisation des données hors production.

*

Examiner les formats de stockage par couche et définir la doctrine Delta Lake / Parquet, avec une grille de décision et un plan de convergence évaluant les impacts en performance et en coût.

*

Diagnostiquer et optimiser les alimentations quotidiennes de plus de 30 minutes, avec mesures avant et après.

*

Auditer les traitements les plus coûteux : configuration et dimensionnement Spark, autoscale, sessions haute concurrence, partitions, shuffle, AQE, petits fichiers, rétention, purge, archivage, OPTIMIZE et VACUUM.

*

Revoir le code, les tests, la documentation et les bonnes pratiques ; identifier des quick wins chiffrés et refactorer des jobs pilotes.

*

Préparer les tables pour Direct Lake et industrialiser un plan de maintenance OPTIMIZE / VACUUM.

*

Transférer la documentation et les bonnes pratiques à l'équipe, et animer un atelier de restitution à l'issue de chaque chantier.

Environnement technique

*

Plateforme data : Microsoft Fabric, OneLake, OneLake Catalog, OneLake Security, Lakehouse, Spark, PySpark, SQL endpoint, Direct Lake, pipelines, DataHub Fabric

*

Stockage et formats : Delta Lake, Parquet, Bronze / Silver / Gold

*

Sécurité et Azure : Entra ID, RBAC Azure, Key Vault, RLS, OLS, private endpoints,