Nu solliciteren

voor Microsoft Fabric Data Engineer

← Alle vacatures

Microsoft Fabric Data Engineer (Freelance kan)

Omschrijving

Let op: de tekst van deze vacature wordt niet automatisch vertaald en kan in een andere taal zijn opgesteld.

📋 TĂąches et responsabilitĂ©s

Depuis plusieurs annĂ©es, l’organisation s’appuie sur un entrepĂŽt de donnĂ©es central pour ses rapports et ses analyses. Cette plateforme est en cours de modernisation par une migration vers le cloud Microsoft Azure. Microsoft Fabric, notamment pour l’ETL, et Power BI font partie des outils adoptĂ©s dans cette Ă©volution.

Pour accompagner cette modernisation, nous recherchons un Data Engineer Microsoft Fabric.

📌 Mission :

  • Concevoir et implĂ©menter des modĂšles de donnĂ©es orientĂ©s BI selon la mĂ©thodologie Kimball et le modĂšle snowflake, Ă  partir des besoins mĂ©tier et des exigences techniques.
  • DĂ©velopper les tables de faits, les dimensions et les agrĂ©gats du DataWarehouse en respectant les prioritĂ©s et le planning.
  • DĂ©velopper les flux ETL dans Microsoft Fabric, notamment avec Dataflows Gen2, des Notebooks PySpark et des Pipelines, sur Azure Cloud.
  • Garantir la qualitĂ©, la fiabilitĂ©, le monitoring et les performances des traitements et des flux.
  • GĂ©rer le monitoring, la traçabilitĂ©, les alertes et les rejets des flux.
  • Automatiser les dĂ©ploiements au moyen de pratiques CI/CD avec Azure DevOps ou GitHub.
  • Collaborer Ă©troitement avec l’équipe ICT afin d’assurer la cohĂ©rence des systĂšmes et des solutions.
  • Se connecter Ă  diffĂ©rentes sources, notamment Oracle, SQL Server, XML et les fichiers plats, en comprendre la structure et optimiser les extractions.
  • Appliquer les standards techniques dĂ©finis en matiĂšre de nommage, de sĂ©curitĂ©, de gouvernance, de monitoring et de CI/CD.
  • Respecter les directives et les procĂ©dures internes, tant sur le plan technique qu’organisationnel.
  • Documenter les traitements et les flux.

Compétences techniques

  • Microsoft Fabric : Lakehouse, Dataflows Gen2, Pipelines et Warehouse
  • Azure : Azure Data Lake et Azure Synapse constitue un atout
  • Bases de donnĂ©es sources : excellente maĂźtrise d’Oracle et de SQL Server, notamment pour la connexion, l’extraction et l’optimisation des requĂȘtes
  • SQL : niveau avancĂ©
  • PySpark : traitement distribuĂ© de grands volumes de donnĂ©es
  • Concepts de datawarehouse
  • ModĂšles sĂ©mantiques dans Power BI
  • DAX
  • ModĂ©lisation Kimball : Star Schema, Snowflake et Slowly Changing Dimensions (SCD)
  • ETL/ELT : bonnes pratiques de sĂ©quencement et de monitoring
  • CI/CD : Azure DevOps ou GitHub Actions
  • SĂ©curitĂ© et gouvernance des donnĂ©es sur Azure
  • La connaissance de Sparx Enterprise Architect pour la documentation et la modĂ©lisation constitue un atout
  • La connaissance d’Informatica PowerCenter, ou la volontĂ© de l’apprendre, constitue un atout

📝 Votre profil

  • Bachelor en informatique ou expĂ©rience Ă©quivalente
  • Minimum 8 ans d’expĂ©rience en Data Engineering, dont au moins 3 ans avec Fabric sur Azure Cloud
  • MaĂźtrise avĂ©rĂ©e de la mĂ©thodologie Kimball appliquĂ©e Ă  la BI
  • ExpĂ©rience confirmĂ©e avec les bases de donnĂ©es Oracle et SQL Server
  • ExpĂ©rience confirmĂ©e avec les modĂšles sĂ©mantiques Power BI
  • CapacitĂ© Ă  optimiser les performances et Ă  documenter les processus
  • Aptitude Ă  travailler en Ă©quipe dans le respect de la gouvernance et des procĂ©dures internes
  • Les langues pertinentes pour la mission sont le français, le nĂ©erlandais et l’anglais. Le français et le nĂ©erlandais sont obligatoires, avec une bonne connaissance passive de l’autre langue.

📋 Taken en verantwoordelijkheden

Sinds enkele jaren steunt de organisatie voor rapportering en analyse op een centraal datawarehouse. Dit platform wordt gemoderniseerd door een migratie naar de Microsoft Azure-cloud. Microsoft Fabric, onder meer voor ETL, en Power BI maken deel uit van deze evolutie.

Om deze modernisering te ondersteunen, zoeken we een Data Engineer Microsoft Fabric.

📌 Opdracht:

  • BI-georiĂ«nteerde datamodellen ontwerpen en implementeren volgens de Kimball- en snowflake-methodologie, op basis van bedrijfsbehoeften en technische vereisten.
  • Feitentabellen, dimensies en aggregaten in het datawarehouse ontwikkelen met respect voor de prioriteiten en de planning.
  • ETL-flows ontwikkelen in Microsoft Fabric, onder meer met Dataflows Gen2, PySpark-notebooks en Pipelines, op Azure Cloud.
  • De kwaliteit, betrouwbaarheid, monitoring en prestaties van de verwerkingen en flows bewaken.
  • De monitoring en traceerbaarheid beheren, samen met de waarschuwingen en afwijzingen van flows.
  • Deployments automatiseren met CI/CD via Azure DevOps of GitHub.
  • Nauw samenwerken met het ICT-team om de samenhang tussen systemen en oplossingen te verzekeren.
  • Verbinding maken met verschillende bronnen, waaronder Oracle, SQL Server, XML en flat files, de structuur ervan begrijpen en extracties optimaliseren.
  • De technische standaarden voor naamgeving, beveiliging, governance, monitoring en CI/CD toepassen.
  • De interne richtlijnen en procedures op technisch en organisatorisch vlak naleven.
  • De verwerkingen en flows documenteren.

Technische vaardigheden

  • Microsoft Fabric: Lakehouse, Dataflows Gen2, Pipelines en Warehouse
  • Azure: Azure Data Lake; kennis van Azure Synapse is een pluspunt
  • Databronnen: uitstekende beheersing van Oracle en SQL Server, inclusief verbinding, extractie en query-optimalisatie
  • SQL: gevorderd niveau
  • PySpark: gedistribueerde verwerking van grote hoeveelheden data
  • Concepten van datawarehouses
  • Semantische modellen in Power BI
  • DAX
  • Kimball-modellering: Star Schema, Snowflake en Slowly Changing Dimensions (SCD)
  • ETL/ELT: goede kennis van sequentiebepaling en monitoring
  • CI/CD: Azure DevOps of GitHub Actions
  • Beveiliging en governance van gegevens op Azure
  • Kennis van Sparx Enterprise Architect voor documentatie en modellering is een pluspunt
  • Kennis van Informatica PowerCenter, of de bereidheid om dit te leren, is een pluspunt

📝 Jouw profiel

  • Bachelor in Computer Science of gelijkwaardige ervaring
  • Minstens 8 jaar ervaring in Data Engineering, waarvan minstens 3 jaar met Fabric op Azure Cloud
  • Bewezen beheersing van de Kimball-methodologie voor BI
  • Bewezen ervaring met Oracle- en SQL Server-databases
  • Bewezen ervaring met semantische modellen in Power BI
  • Vermogen om prestaties te optimaliseren en processen te documenteren
  • Vermogen om in teamverband te werken met respect voor governance en interne procedures
  • De relevante talen voor de opdracht zijn Nederlands, Engels en Frans. Nederlands en Frans zijn verplicht, met een goede passieve kennis van de andere taal.

đŸ’Œ Offre

Vous ferez partie d'une PME belge en pleine croissance, oĂč l’initiative et le dĂ©veloppement personnel sont encouragĂ©s. Nous vous offrirons un environnement de travail agrĂ©able, entourĂ©(e) de collĂšgues sympathiques. Ensemble, nous Ă©laborerons un plan de carriĂšre, avec une attention particuliĂšre et un budget dĂ©diĂ© Ă  la formation ou Ă  la certification complĂ©mentaire. Vous pouvez compter sur un salaire attractif, complĂ©tĂ© par des avantages extra-lĂ©gaux, y compris une voiture de sociĂ©tĂ©.
(Freelance est également possible)

Solliciteer nu