Data Engineer

Data Engineer

Published
11-09-2019
Location
Amsterdam
Category
Job Type
Soort medewerker
Nog niet bekend
Tarief in Euro's tot max.
Zo scherp mogelijk
Start datum
Zo spoedig mogelijk
Periode tot..
12 maanden
Optie op verlenging
Ja
Inzet uren per week
36
Reageer vóór
23 september

Description

Gemeente Amsterdam vraagt een Senior Data Engineer
DataPunt

Onderzoek, Informatie en Statistiek (OIS) van de gemeente Amsterdam zoekt voor haar programma DataPunt Senior Data Engineerr. Een collega met passie voor de stad Amsterdam. Die OIS versterkt bij onze opgave om met informatie, kennis en wijsheid te helpen de stad beter te  begrijpen om gefundeerde keuzes te kunnen maken. Je zal onderdeel uitmaken van één van onze Data Squad.

Een Data Squad is een team dat integraal verantwoordelijk is voor het realiseren van een deel van het  dataplan. Het is een multidisciplinair team waarin naast OIS, ook IVE, BI én de directies meedraaien, zodat alle functionele specificaties waaraan de data moeten voldoen in samenhang met elkaar kunnen worden opgeleverd.

Het dataplan wordt ingedeeld volgens de GEMMA bedrijfsarchitectuur. Daarin wordt de gemeente ingedeeld in de volgende zes, inhoudelijk coherente delen: Bestuur, Sociaal, Ruimtelijk, Openbare orde & veiligheid, Publieksdiensten en Ondersteuning.

Een Data Squad is een team dat generieke dataproducten ontwikkelt, met een inhoudelijk specialisme dat overeenkomt met de delen van het dataplan. Dit inhoudelijk specialisme zorgt ervoor dat er expertise ontstaat over wat de data nu precies beschrijft en welke consequenties daaruit kunnen worden getrokken en  wie daar om welke reden behoefte aan heeft.

Een Data Squad voert de volgende activiteiten uit:

  • User stories vastleggen in de backlog en daaruit functionele specificaties afleiden t.b.v software t.b.v. bruikbaarheid, vindbaarheid en beschikbaarheid van de data.
  • Het managen en prioriteren van de backlog, in samenspraak met de stakeholders.
  • Een stabiele koppeling (laten) realiseren tussen de databron en datapunt.
  • Het beoordelen van de datakwaliteit en het adviseren over hoe de datakwaliteit verbeterd kan worden. Het beoordelen van de datakwaliteit vindt onder meer plaats door de data inhoudelijk te toetsen aan de in het stelsel van basis- en kernregistraties opgenomen gegevens.
  • Classificering van de data, het uitvoeren van een privacy- en -vertrouwelijkheidstoets, en op basis daarvan het bepalen van de gewenste mate van toegankelijkheid.
  • Het technisch modelleren en transformeren, onder meer in relatie tot de basis- en kernregistraties en nationale en sectorale standaarden, van de brondata en het opslaan van de data in een open formaat. Op deze wijze wordt bewerkstelligd dat nieuwe databronnen, door deze te matchen aan de hand van sleutels, aansluiting houden met basisgegevens, hetgeen de samenhang in en tussen de data versterkt.
  • De beschikbare informatiemodellen en semantische beschrijvingen van de objecten en begrippen vastleggen in de catalogus van het Dataportaal.
  • Maken en publiceren van API's en webservices op het Dataportaal, die voldoen aan de functionele eisen, de voorwaarden voor datadeling en de gewenste mate van toegankelijkheid (open, tenzij, authenticatie/autorisatie).
  • Het functioneel en technisch testen van het koppelvlak, de toegankelijkheid en de semantiek.
  • Het beheren van de koppeling met de bron, de classificering, de catalogus en het koppelvlak

Alle Data Squads maken onderdeel uit van het Programma DataPunt. DataPunt is dé smart-city-data-infrastructuur van Amsterdam. We bieden mogelijkheden voor o.a. (big) data-analyse in een beveiligde omgeving, business intelligence, beleidsonderzoek en predictive analytics. De teams van DataPunt helpen gegevens over de stad vindbaar en toegankelijk te maken voor  verdere  verwerking door medewerkers van de gemeente,  publiek  en dataprofessionals. Denk aan slimme verkeersroutes  dankzij onderzoek met behulp van tijdelijke kentekencamera's, met machine learning meldingen openbare ruimte doorgeleiden of data-analyse om de kortste afstanden tot afval containers te berekenen.

Jouw werkzaamheden:

  • Als Senior Data Engineer bij een van de Data Squads speel je in op de behoefte aan expertise op het gebied van data modellering, data engineering en datawarehousing.

Amsterdam is een unieke stad. Aantrekkelijk om te wonen, werken en studeren en toonaangevend als dynamische internationale metropool. Tegelijkertijd staat de stad voor een grote uitdaging. De snelle verandering van onze samenleving leidt tot nieuwe opgaven voor de stad. Een van die opgaven is het beter en slimmer benutten van gegevens van en over de stad. Onderzoek, Informatie en Statistiek (OIS) van de gemeente Amsterdam speelt hierin een belangrijke rol. OIS helpt de stad beter te begrijpen en verder te ontwikkelen, onder andere door het verzamelen en publiceren van statistische informatie, het uitvoeren van beleidsonderzoek en het ontsluiten, koppelen en leveren van gegevens van en over de stad. Binnen OIS komt alles samen: (Big) Data, onderzoek en innovatie. Met dashboards, benchmarks en bestandsverkenningen wordt hier de basis gelegd voor het informatie-gestuurd werken in Amsterdam.

In Amsterdam wordt sinds drie jaar gewerkt aan een nieuwe infrastructuur voor het ontsluiten en gebruiken van databronnen binnen en buiten de gemeentelijke organisatie. Deze infrastructuur is de stedelijke voorziening voor toegang tot databronnen op een gestandaardiseerde en veilige manier en draagt de naam DataPunt.
Amsterdam City Data (data.amsterdam.nl) is de zichtbare interface die gegevens die ontsloten zijn via DataPunt op een gebruiksvriendelijke wijze presenteert. Onderdeel van DataPunt is ook een uitgebreide catalogus van de beschikbare databronnen en een analyseomgeving die het mogelijk maakt om met behulp van moderne methoden onderzoek en analyse uit te voeren. Een groot aantal databronnen is ook als REST API beschikbaar. Daarnaast worden ook toepassingen ontwikkeld waarmee binnen en buiten de gemeente informatie wordt verwerkt en ingezet in operationele processen.

Wat bieden we je?

  • Een unieke werkplek binnen de overheid waar je een grote bijdrage levert aan de toegankelijkheid van (privacy gevoelige) gegevens;
  • De mogelijkheid om met grote hoeveelheden data te werken in complexe omgevingen;
  • Een open cultuur, waarin er kritisch naar eigen werk wordt gekeken. Er heerst een gezonde druk op kwaliteit en voorgang, en er is ruimte om te onderzoeken hoe 'het beter kan'.

 

Meer weten over DataPunt?
Bekijk ons werk op https://data.amsterdam.nl/ en op Github, via https://github.com/Amsterdam
Een deel van onze API's kun je vinden via https://api.data.amsterdam.nl/api/
We zijn benieuwd wat je van onze code vindt, en gaan daar bij een kennismaking graag met je over in gesprek.

Wat neem je mee?

  • CV max 5x A4
  • 2 relevante referenties
  • een HBO werk- en denkniveau, in de richting van Technische Bedrijfskunde en/of Informatica
  • HBO diploma in de richting van Technische Bedrijfskunde en/of Informatica
  • Geef in maximaal 1 pagina aan waarom u de meest geschikte kandidaat bent voor deze opdracht.
  • minimaal 5 jaar aantoonbare, recente ervaring als datawarehouse / ETL engineer, opgedaan in een grotere, complexe organisatie waarin minimaal 3 jaar volgens Agile/Scrum methode werd gewerkt.
  • minimaal 4 jaar aantoonbare ervaring met het bouwen van data pipelines,( bijvoorbeeld met ETL), en heeft praktische ervaring met het beheren en verder ontwikkelen van dataecosystemen, opgedaan in een complexe omgeving.
  • minimaal 3 jaar aantoonbare ervaring opgedaan op het gebied van data manipulation en -transformatie, en het opzetten van zowel SQL- als noSQL-databases, in een grotere, complexe organisatie waarin volgens Agile/Scrum methode werd gewerkt.
  • ervaring met meerdere BI/ETLS tools, zoals bijv. Microsoft, Informatica en Python, én heeft ervaring met tenminste 3 DB(MS)-en zoals bijv. Microsoft, Oracle en PostgreSQL.
  • zowel ervaring opgedaan in commerciële organisaties als overheidsinstanties.
  • ervaring met Ansible en/of Openstack.
  • Affiniteit met geavanceerde analyses, gegevenswetenschap.
  • affiniteit met DevOps.
Reactie formulier
Ik heb de Privacy Verklaring van Flexpertise gelezen!
Indien de contactpersoon niet de kandidaat zelf is.
Per uur ex btw en incl reiskosten woon/werk, Bruto maandsalaris
Indien van toepassing in de projectperiode
Uren of dagen per week
Datum
Ouderdag, 4x9, Payrol, Bedrijfsnaam enz...
Drop files here browse files ...

Related Jobs

Are you sure you want to delete this file?
/