BI Data Engineer Databricks Den Haag • Matchd

Vacature in het kort

Volledige vacaturetekst

Afdeling I&A 

De afdeling Informatisering & Automatisering (I&A) wordt steeds uitgedaagd door externe veranderingen en door interne behoeften en verwachtingen. I&A maakt samen met de provinciale gebruikers en partners keuzes om het gevoelige evenwicht te bewaren tussen de beschikbare middelen en het voorzien in behoeften, vernieuwen en innoveren. De provincie Zuid-Holland beschikt over een Microsoft omgeving en een gevirtualiseerde desktop omgeving.

Team BI is onderdeel van de opdracht BI, GEO en documentaire informatie wat samen met een aantal andere opdrachten Informatie & Automatisering vormt. Het team is verantwoordelijk voor het databeheer, dataontsluiting, functioneel, technisch beheer en ontwikkeling van BI-applicaties, geeft advies over bedrijfsvoeringsdata, maakt informatieproducten, en voert data-analyses uit. Het ondersteunt bij de primaire taken van de Provincie, het maken en uitvoeren van beleid.

Omschrijving van de opdracht

De Provincie Zuid-Holland is onlangs gestart met de ontwikkeling van een nieuw, integraal dataplatform op Databricks. Hiervoor zijn we op zoek naar een ervaren en slimme Data Engineer die al meerdere Databricks-implementaties succesvol heeft volbracht (en begeleid). Iemand die ons helpt om typische beginnersfouten te vermijden én het leuk vindt om kennis over te dragen aan collega's.

De focus van deze opdracht ligt op het inrichten van de data modellering en SQL binnen Databricks. Je gaat samen met collega's grote SQL-scripts omzetten naar stermodellen. Een sterke achtergrond in datamodellering is hierbij essentieel. Het opzetten van datamarts en het bouwen van stermodellen moet voor jou gesneden koek zijn. Je werkt intensief samen met onze solution architect, informatieanalisten, andere data engineers en BI-specialisten. Daarnaast denk je actief mee over de technische keuzes rondom het modelleren van data – bijvoorbeeld of we tools als dbt gaan inzetten.

Taken en verantwoordelijkheden

• Inrichten van datamodellen binnen Databricks (focus op SQL en stermodellen);
• Omzetten van grote SQL-scripts naar schaalbare en onderhoudbare datamodellen;
• Opzetten van datamarts en informatieproducten;
• Begeleiden en coachen van collega's in het gebruik van Databricks;
• Actief bijdragen aan technische keuzes (zoals dbt of andere tools);
• Terugkoppeling geven over voortgang, resultaten en deelproducten aan opdrachtgever, teamcoördinator en product owner.

6 maanden - 36 uur - 1.00 fte

Dutch native or near native

Knock-outcriteria:

• Minimaal een HBO diploma;
• Minimaal twee (2) jaar aantoonbare werkervaring met het werken in Databricks met zowel Delta Lake, notebooks, Databricks SQL, Unity Catalog en lakehouse architectuur;
• Minimaal zes(6) jaar aantoonbare werkervaring met het lezen en schrijven van SQL Queries;
• Minimaal een (1) jaar aantoonbare werkervaring met DBT;
• Minimaal vijf (5) jaar aantoonbare werkervaring met het opzetten van datamarts, stermodellen en dimensionele modellen;
• Minimaal vijf (5) jaar aantoonbare werkervaring met de Agile werkwijze;
• Vijf (5) jaar of meer aantoonbare werkervaring in de afgelopen 10 jaar met CI/CD pipelines binnen data-omgevingen via Azure DevOps;
• Vijf (5) jaar of meer aantoonbare werkervaring in de afgelopen 10 jaar met het maken van data analyses en data modellen door het schrijven van SQL queries. En met het opzetten van datamarts, stermodellen en dimensionele modellen, zowel conceptueel als de technische inrichting;
• Twee (2) jaar of meer aantoonbare werkervaring met DBT;
• Vijf (5) jaar of meer aantoonbare werkervaring in de afgelopen 10 jaar met PowerBI, Power BI service, tabular modellen en gebruik van DAX;
• Vijf (5) jaar of meer aantoonbare samenwerkingsvaardigheden en kennisdeling met multidisciplinaire teams;
• Vijf (5) jaar of meer aantoonbare werkervaring in de afgelopen 10 jaar met het optimaliseren van SQL performance;
• Meer dan drie (3) jaar aantoonbare werkervaring in de afgelopen 8 jaar met dataplatform migraties;
• Drie (3) jaar of meer aantoonbare werkervaring in de afgelopen 10 jaar binnen een gemeentelijke, provinciale of rijksinstantie in een vergelijkbare functie.