In verband met de Wet DBA (Deregulering Beoordeling Arbeidsrelaties) is het voor deze opdracht niet mogelijk om als zzp'er te factureren. Matchd biedt diverse soorten dienstverbanden aan. We gaan hierover graag met je in gesprek om samen te kijken welk dienstverband het beste aansluit bij jouw wensen en situatie. Neem gerust contact met ons op voor meer informatie en een toelichting op de mogelijkheden.
Opdrachtomschrijving
Amsterdam is volop aan het digitaliseren. Eén van de belangrijkste opgaven is het beter en slimmer benutten van data. Jij komt te werken in het datateam Geo. Dit team voert diverse werkzaamheden uit zoals het implementeren van pipelines en cloudoplossingen om (geografische) data te verwerken en deze beschikbaar te stellen aan gemeentelijke gebruikers (bijvoorbeeld panoramabeelden en achtergrondkaarten). Adviseren over en configureren van kaarten die via een webservice (MapServer) beschikbaar worden gesteld, in samenwerking met andere datateams. Meewerken aan de inrichting van de geografische infrastructuur en het aansluiten van applicaties die door andere teams en binnen de gemeente worden gebruikt (zoals BI-tooling, GIS en gemeentelijke beheerapplicaties).
Als data-engineer werk je in een Microsoft Azure cloudomgeving. Je neemt de ontwikkeling en het beheer van datapijplijnen op je die worden gedeployed in Microsoft Azure met behulp van onder andere Databricks. Je bent betrokken bij de gehele datapijplijn, van bronontsluiting tot en met het beschikbaar stellen van het uiteindelijke dataproduct en webservices. Je stelt data beschikbaar aan afnemers, afgestemd op het type gebruik, en denkt proactief mee in het ontwerpproces. Op basis hiervan maak je ontwerpkeuzes, bijvoorbeeld met betrekking tot privacywetgeving. Het gaat hierbij om geografische en complexe datasets, zoals panoramabeelden, pointclouds, raster- en InSar-data. Daarnaast werk je mee aan de ondersteuning van andere teams bij het verwerken en gebruik van geografische data.
Werkzaamheden
- Ontwerpen, ontwikkelen en testen van datasets: waaronder het modelleren van dataproducten, het schrijven van scripts (Python en SQL), en het inrichten van geautomatiseerde workflows in Databricks;
- Inrichten, beheren en onderhouden van de datapijplijn(en) in Azure;
- Logging, monitoring en optimalisatie van de datapijplijn;
- Beschikbaar stellen van dataproducten: in samenwerking met andere datateams en het dataplatform;
- Ontwikkelen en beheren van de datapijplijn: en vanuit de Agile-gedachte, het coachen en begeleiden van junior engineers.
Dutch native or near native
Knock-outcriteria:
- Minimaal een HBO werk- en denkniveau;
- Minimaal drie jaar werkervaring als data engineer, met operationele datamanagementactiviteiten en data integratie;
- Minimaal 3 jaar kennis van en ervaring met Python, SQL, databases en ETL/ELT processen;
- Minimaal 2 jaar werkervaring met Azure DevOps, GIT (branche strategy en release management) en Databricks;
- Minimaal 1 jaar kennis van en werkervaring met geografische informatie en de daarbij behorende activiteiten als het verzamelen, verwerken en analyseren van deze informatie;
- Minimaal 1 jaar werkervaring binnen overheidsinstanties;
- Minimaal 1 jaar werkervaring met unity catalog en het beheren van geodata.