Data Engineer Amsterdam • Bright Professionals

Voor een boeiend project in het kader van de digitalisering van een grote stad, zoeken we een Data Engineer om het datateam Geo te versterken. In deze rol ben je cruciaal in het implementeren van data-oplossingen, zoals pipelines en cloudtechnologieën, om geografische informatie te verwerken en te delen. Je werkt met complexe datasets en draagt bij aan de verbetering van stedelijke diensten. Een unieke kans om bij te dragen aan innovatie in een omgeving. Neem een kijkje in de mogelijkheden die deze vacature biedt. Lees verder!

Functieomschrijving
Voor de Gemeente Amsterdam zoeken wij een Data Engineer.

De opdracht
Amsterdam is volop aan het digitaliseren. Eén van de belangrijkste opgaven is het beter en slimmer benutten van data. Jij komt te werken in het datateam Geo. Dit team voert diverse werkzaamheden uit zoals het implementeren van pipelines en cloudoplossingen om (geografische) data te verwerken en deze beschikbaar te stellen aan gemeentelijke gebruikers (bijvoorbeeld panoramabeelden en achtergrondkaarten). Adviseren over en configureren van kaarten die via een webservice (MapServer) beschikbaar worden gesteld, in samenwerking met andere datateams. Meewerken aan de inrichting van de geografische infrastructuur en het aansluiten van applicaties die door andere teams en binnen de gemeente worden gebruikt (zoals BI-tooling, GIS en gemeentelijke beheerapplicaties). Als data-engineer werk je in een Microsoft Azure cloudomgeving. Je neemt de ontwikkeling en het beheer van datapijplijnen op je die worden gedeployed in Microsoft Azure met behulp van onder andere Databricks. Je bent betrokken bij de gehele datapijplijn, van bronontsluiting tot en met het beschikbaar stellen van het uiteindelijke dataproduct en webservices. Je stelt data beschikbaar aan afnemers, afgestemd op het type gebruik, en denkt proactief mee in het ontwerpproces. Op basis hiervan maak je ontwerpkeuzes, bijvoorbeeld met betrekking tot privacywetgeving. Het gaat hierbij om geografische en complexe datasets, zoals panoramabeelden, pointclouds, raster- en InSar-data. Daarnaast werk je mee aan de ondersteuning van andere teams bij het verwerken en gebruik van geografische data.

Jouw verantwoordelijkheden

• Je bent verantwoordelijk voor het ontwerpen, ontwikkelen en testen van datasets, waaronder het modelleren van dataproducten, het schrijven van scripts (Python en SQL), en het inrichten van geautomatiseerde workflows in Databricks;
• Je bent verantwoordelijk voor het inrichten, beheren en onderhouden van de datapijplijn(en) in Azure;
• Je bent verantwoordelijk voor het logging, monitoring en optimalisatie van de datapijplijn;
• Je bent verantwoordelijk voor het beschikbaar stellen van dataproducten in samenwerking met andere datateams en het dataplatform;
• Je bent verantwoordelijk voor het ontwikkelen en beheren van de datapijplijn, en vanuit de Agile-gedachte, het coachen en begeleiden van junior engineers.

De organisatie
De gemeentelijke organisatie bestaat uit 5 clusters, een bestuurs- en concernstaf, 7 stadsdelen en 1 stadsgebied. De stadsdelen besturen samen met de gemeenteraad, burgemeester en wethouders de stad Amsterdam. De 5 clusters zijn: Ruimte en Economie, Sociaal, Stadbeheer, Bedrijfsvoering, Digitalisering, Innovatie en Informatie. De clusters hebben expertise op een specifiek terrein, zoals sport, jeugd of parkeren. Zij werken beleid uit tot stadsbrede kaders waarbinnen de stadsdelen het uitvoerende werk kunnen doen. Ook bieden zij directe ondersteuning aan bewoners die dit nodig hebben, bijvoorbeeld op het gebied van participatie of werk. De stadsdelen houden zich onder andere bezig met de inrichting van straten en pleinen, groen en parken en welzijnswerk in de buurt. Ze zorgen ervoor dat wat ze doen, past bij de behoeften in hun stadsdeel en bij het beleid voor de hele stad. Meer informatie over de gemeentelijke organisatie is te vinden op: .

De afdeling
De directie Data organiseert en regisseert alle data-activiteiten binnen hun organisatie. Directie Data zorgt voor een stevig datafundament en voor data-governance gemeentebreed en daardoor voor een sterke data- en informatiepositie voor zowel hun organisatie als de stad. De directie is verantwoordelijk voor de leverbetrouwbaarheid en schaalbaarheid van de dataproducten en voor de kwaliteitszorg op datagebruik, -beheer en -producten.
De directie heeft de missie om de gemeentedata savvy te maken, meer datagedreven te gaan laten werken en data gerelateerde kennis te bundelen binnen de organisatie en binnen de stad. De directie Data bestaat uit ongeveer 250 medewerkers, verdeeld over 9 onderdelen.

Goede beheersing van de Nederlandse taal in woord en geschrift is vereist voor deze functie.