De Douane zoekt een Senior Data Engineer met expertise in Microsoft Azure Synapse Analytics en Apache Spark. Je speelt een cruciale rol in het ontwerpen van metadata-gedreven oplossingen om data te verwerken en advies te geven aan collega's. Je werkt aan het combineren en analyseren van data om de kerntaken van de Douane te optimaliseren. Een unieke kans om bij te dragen aan een meer data-gedreven toekomst. Ben jij klaar voor een boeiende nieuwe functie? Lees verder!

Over het bedrijf

Masters in Public

Uitzendbureau

Volledige vacaturetekst

De douane is op zoek naar een Senior Data Engineer met expertise in Microsoft Azure Synapse Analytics (Dedicated SQL Pool , Apache Spark met Python en Synapse Data Factory pipelines) die ervaring heeft met het ontwerpen en inrichten van metadata-gedreven oplossingen voor het verwerken van bronnen op schaal. Ook is de Data engineer verantwoordelijk voor het geven van advies voor beheer en ondersteuning aan Data Engineers in de keten. Je doet incidenten beheer en geeft advies voor teams in de keten.

Achtergrond opdrachtDe Douane wil meer data-gedreven werken. Door data uit eigen en externe bronnen te combineren en te analyseren, kan de Douane zijn kerntaken sneller, beter en efficiënter uitvoeren. Hierbij is het snel kunnen inspringen op nieuwe wet- en regelgeving en een breed scala aan klantvragen essentieel. Om deze wendbaarheid te realiseren loopt er op dit moment een traject om de werkmethode en technologie opnieuw in te richten. Je ontsluit, importeert, koppelt en upload data zodat jouw collega’s deze optimaal kunnen gebruiken voor hun analyses en modelontwikkeling. Je zoekt voortdurend naar mogelijkheden om onze databronnen optimaal te gebruiken. Je gaat in gesprek met collega’s en onderzoekt de huidige kaders en experimenteert om jouw werk en dat van je directe collega’s efficiënter te maken. Je laat zien wat jouw technische oplossing toe kan voegen aan dataanalyses en -modellen.

Je schrijft en optimaliseert SQL queries
Je bouwt informatieoplossingen zoals datapipelines, datastreams en data-API’s
Je ontwerpt , bouwt en beheert metadata gedreven oplossingen om bronnen te ontsluiten op schaal.
Je doet zelfstandig beheer- of projectwerkzaamheden
Afstemming met diverse partijen zoals de product owner, afnemers, bron-beheerders en andere teams van de afdeling en leveranciers in de keten.

De eisen

Alleen Nederlandstalige CV’s aanbieden en kandidaten moeten perfect Nederlands kunnen spreken.

Kennis van Azure (Synapse/Azure Data Factory/Dedicated Pool).

Kennis van het inrichten/gebruik van API's in de vorm van Azure Functions

Ruime ervaring met het inrichten en onderhouden van CI/CD in Azure Devops met YAML.

Je hebt kennis van en ervaring met de Microsoft BI stack (Power BI/Power Apps).

Je bent in staat duidelijke documentatie te ontwikkelen

Je hebt ervaring met het verbeteren van data kwaliteit, bijvoorbeeld door geautomatiseerde tests en visie op de rol van metadata hierbij.

Je hebt ruime ervaring in een Agile/Scrum ontwikkelomgeving

Je hebt een afgeronde hbo- of universitaire opleiding (richting informatica informatiemanagement) (3 jaar)

De wensen

Technische Vaardigheden Databases & SQL: Geavanceerde kennis van T-SQL, query tuning, partitioning, indexing, columnstore en query parallelisme.

Cloud & Azure: Ervaring met Azure Synapse Analytics, Data Lake, Dedicated Sql Pool, Storage Accounts en Azure Functions.

ETL/ELT-processen: Ontwerpen en optimaliseren van dataloads naar een Dedicated SQL Pool.

Data & Analytics: Kennis van Apache Spark, Delta Lake, Dedicated Sql Pool en Synapse Pipelines is een plus.

Security & Governance: Implementeren van RBAC en Auditing in Synapse en Dedicated Sql Pool

CI/CD & DevOps: Ervaring met Bicep-templates, YAML Pipelines en Git voor infrastructuurbeheer

Probleemoplossend vermogen: Sterk in debuggen en optimaliseren van dataverwerking.

Samenwerken in multidisciplinaire teams: Werkt samen met Scrumteams, PowerBI-specialisten en andere teams in de dataketen.

Agile & Scrum-methodologie: Bekend met SAFe, Kanban of Scrum.

Analytisch denken: Kan complexe data-uitdagingen vertalen naar schaalbare oplossingen.

Gerelateerde zoekopdrachten

Adviseur Rotterdam Parttime Rotterdam HBO Rotterdam Vast contract Rotterdam Rotterdam Provincie Zuid-Holland Adviseur Salaris Adviseur

Vacature opslaan

Gefeliciteerd, je bent succesvol ingeschreven!

Vanaf nu ontvang je automatisch de best passende vacatures automatisch in je mailbox.

Jouw inschrijving
Emailadres:
Functie:
Plaats:
Frequentie:

Wijzig je inschrijving

Ontvang als eerste nieuwe vacatures voor Adviseur in Rotterdam

Je e-mail

Frequentie

(Uitschrijven kan altijd via elke e-mail die je ontvangt)

(Uitschrijven kan altijd via iedere app die je ontvangt)