Data engineer

Amsterdam is volop aan het digitaliseren. Eén van de belangrijkste opgaven is het beter en slimmer benutten van data. De directie Data is verantwoordelijk voor het centraal ontsluiten, koppelen en leveren van gegevens.

Je komt te werken in het datateam Jeugd en Zorg. Bij Jeugd en Zorg werk je in het sociale domein aan onderwerpen als; hoog specialistische en preventieve jeugdhulp, persoonsgebonden budget, hulp bij het huishouden en de wet maatschappelijke ondersteuning (wmo).

In de functie van data engineer ga je een rol spelen in de transitie van een traditioneel datawarehouse naar een Microsoft Azure cloud omgeving. Je neemt de ontwikkeling en beheer van de datapijplijnen op je die worden gedeployed op Microsoft Azure met behulp van onder andere Databricks. Je bent betrokken bij de gehele datapijplijn, van bronontsluiting tot en met het beschikbaar stellen van het uiteindelijke dataproduct. Verder maak je samen met het datateam gestandaardiseerde en gemodelleerde datasets voor rapportages in BI-tooling.

Werkzaamheden
- Je ontwerpt, ontwikkelt en test datasets, waaronder het modelleren van informatieproducten, het schrijven van scripts en het inrichten van geautomatiseerde workflows binnen Databricks;
- Je richt de Azure-omgeving in, beheert deze en onderhoudt de datapijplijnen die daarop draaien;
- Je verzorgt logging, monitoring en optimalisatie van de datapijplijnen, en beheert en optimaliseert de bijbehorende databases;
- Je analyseert en lost bugs en issues op binnen de beheerde OTAP-omgeving (Ontwikkel, Test, Acceptatie, Productie);
- Je werkt samen met het datateam om op basis van prioritering features voor kwartaalplanningen voor te bereiden en uit te werken in user stories.

Gemeentelijke organisatie
De gemeentelijke organisatie bestaat uit 5 clusters, een bestuurs- en concernstaf, 7 stadsdelen en 1 stadsgebied. De stadsdelen besturen samen met de gemeenteraad, burgemeester en wethouders de stad Amsterdam. De 5 clusters zijn: Ruimte en Economie, Sociaal, Stadbeheer, Bedrijfsvoering, Digitalisering, Innovatie en Informatie. De clusters hebben expertise op een specifiek terrein, zoals sport, jeugd of parkeren. Zij werken beleid uit tot stadsbrede kaders waarbinnen de stadsdelen het uitvoerende werk kunnen doen. Ook bieden zij directe ondersteuning aan bewoners die dit nodig hebben, bijvoorbeeld op het gebied van participatie of werk. De stadsdelen houden zich onder andere bezig met de inrichting van straten en pleinen, groen en parken en welzijnswerk in de buurt. Ze zorgen ervoor dat wat ze doen, past bij de behoeften in hun stadsdeel en bij het beleid voor de hele stad. Meer informatie over de gemeentelijke organisatie is te vinden op: https://www.amsterdam.nl/.

De opdrachtgever(s)
We willen een goede werkgever zijn die ervoor zorgt dat alle collega’s zich gezien en gewaardeerd voelen. We koesteren verschillen tussen collega’s, al die verschillen zorgen voor betere resultaten voor onze organisatie én onze stad. We streven daarbij naar een personeelsbestand dat een afspiegeling is van de beroepsbevolking van Amsterdam. Dus wie jij ook bent: bij ons ben je van harte welkom!

De directie Data organiseert en regisseert alle data-activiteiten binnen onze organisatie.
Directie Data zorgt voor een stevig datafundament en voor data-governance gemeentebreed en daardoor voor een sterke data- en informatiepositie voor zowel onze organisatie als de stad. De directie is verantwoordelijk voor de leverbetrouwbaarheid en schaalbaarheid van de dataproducten en voor de kwaliteitszorg op datagebruik, -beheer en -producten.

De directie heeft de missie om de gemeente data savvy te maken, meer datagedreven te gaan laten werken en data gerelateerde kennis te bundelen binnen de organisatie en binnen de stad. De directie Data bestaat uit ongeveer 250 medewerkers, verdeeld over 9 onderdelen.

• De aangeboden kandidaat beschikt minimaal over een HBO werk- en denkniveau.
• De aangeboden kandidaat heeft minimaal 3 jaar werkervaring als data engineer met Azure Cloudplatform, CI/CD, data integratie en DAMA-DBOK-raamwerk.
• De aangeboden kandidaat heeft minimaal 3 jaar kennis van en ervaring met PySpark, Python, SQL, databases, ETL/ELT processen en (ster-) modelleren.
• De aangeboden kandidaat heeft minimaal 1 jaar ervaring met het aansluiten van Power BI op Databricks.
• De aangeboden kandidaat heeft minimaal 1 jaar werkervaring met Azure DevOps, GIT (branche strategy en release management) en Databricks (Databricks Asset Bundles).
• De aangeboden kandidaat gaat akkoord met detachering.

Wensen

• De aangeboden kandidaat heeft minimaal 1 jaar ervaring met het werken in een devops team.
• De aangeboden kandidaat heeft minimaal 1 jaar relevante werkervaring opgedaan bij de overheid

• Startdatum: 23-06-2025
• Einddatum: 23-01-2026
• Werklocatie: President Kennedylaan, 923, 1079MZ, AMSTERDAM
• Aantal uren per week: 32 uur - 36 uur 
• Optioneel tot verlenging: Ja, de Gemeente heeft de mogelijkheid de Overeenkomst meerdere keren te verlengen tegen dezelfde voorwaarden en condities, met dien verstande dat de totale maximale duur van de Overeenkomst de  24 maanden niet mag overschrijden.
• Planning interviews: z.s.m. na sluiting