Onze klant bouwt aan een data- en informatieplatform in Databricks op een Microsoft Azure Cloud omgeving met Power BI als rapporteringstool. Diverse bronnen en applicaties worden ontsloten naar dit platform dat in verschillende data- en informatielagen wordt opgebouwd om er (advanced) analytics use cases en rapporten op te bouwen. De organisatie organiseert zich momenteel in 4 verschillende domein teams en één fundament team. Je komt terecht in het domeinteam dat zich ontfermt over de noden van directie Netbeheer. In dit traject zijn we op zoek naar een Data Engineer om:
• Verdere uitbouw van dit platform te realiseren volgens de architectuur en designprincipes van de organisatie
• De use cases inzake data-analytics en business intelligence te analyseren, te modelleren en vorm te geven met de verschillende componenten op het data-en informatieplatform
• Het data en informatieplatform te onderhouden in een operationele werking
We verwachten dus mensen uit de 'data' wereld, die een data mindset hebben, data leven en ademen, maar die toch de nodige IT skills hebben.
Context
Het Data- en informatieplatform is opgebouwd uit verschillende lagen om de data vanuit de applicaties binnen te trekken (bronze layer), om te vormen tot informatie (silver layer) en verder te transformeren tot analyseblokken ifv de analytics use cases (gold layer). De informatielaag wordt gemodelleerd als business data vault model, in de gold laag hanteren we stermodellen. De ontwikkeling en opbouw in het dataplatform gebeurt in Databricks, rapportering en visualisaties worden ontwikkeld in PowerBI. De gezochte profielen komen terecht in een team dat use cases end-to-end opbouwt in het dataplatform.
De opdracht omhelst volgende activiteiten:
- Je werkt mee aan functionele analyses/specificaties en bespreekt deze met de verschillende stakeholders (informatie-analisten, informatie stewards, sleutelgebruikers, ...)
- Op basis van de noden werk je het datamodel (in de verschillende lagen) uit conform de regels in het platform.
- Je staat in voor de technische implementatie in Databricks en maakt daarbij gebruik van het door het data fundament team voorziene framework.
- Je volgt de gangbare ontwikkelcyclus binnen het platform.
- Je assisteert bij de validatie van de opzet aan de hand van een testplan en helpt mee om de testdata ter beschikking te stellen om de testcases te kunnen uitvoeren.
- Je zorgt ervoor dat je werk binnen onze monitoring en alerting opzet past zodat alle fouten meteen zichtbaar worden opdat de afgesproken service levels kunnen behaald worden.
- Je houdt de documentatie actueel (in Confluence en Jira)
- Je assisteert power users en sleutelgebruikers in de business bij het oplossen van technische issues.
Op basis van zijn/haar expertise moet deze persoon in staat zijn om binnen de 2 weken volledig mee te draaien binnen het bestaande team. Zelforganisatie & groot leervermogen zijn hierin essentiële kwaliteiten.
- Je bent communicatievaardig, onderhoudt persoonlijke contacten en bouwt een goede relatie op met de user community.
- Je bent een echte teamplayer en neemt actief deel in de projectwerking.
- Innovatie is een van jouw sterke punten waarbij je constant op zoek gaat naar de beste oplossing.
- Je bent analytisch, werkt gestructureerd en gedocumenteerd.