Wat doet een Data Engineer?
Functieomschrijving
Als Data Engineer ben je verantwoordelijk voor het creëren en onderhouden van datastromen die waardevolle informatie genereren voor verschillende bedrijfsdoelstellingen. Je hebt een kritische rol in de energiesector, waar datagedreven beslissingen steeds belangrijker worden als onderdeel van de energietransitie. Dit houdt in dat je niet alleen technische vaardigheden nodig hebt, maar ook de capaciteit om te communiceren met diverse belanghebbenden en teams. Je werkt met moderne technologieën, voornamelijk binnen cloudomgevingen zoals Microsoft Azure, om data te transformeren en analytische oplossingen te bieden. Je zorgt ervoor dat data accuraat en actueel zijn, zodat de organisatie goed gefundeerde beslissingen kan nemen.
Salarisindicatie
De salarissen voor een Data Engineer variëren, afhankelijk van ervaring, locatie en sector. Over het algemeen kan het salaris voor een Data Engineer tussen de € 50.000 en € 80.000 per jaar liggen, maar in sommige gevallen kan dit oplopen tot € 100.000 voor zeer ervaren professionals. Voor zzp opdrachten ligt het tarief gemiddeld tussen de € 75 en € 100 per uur, afhankelijk van de complexiteit van de opdracht en de specifieke vaardigheden van de engineer. Opdrachten in de overheid kunnen ook aantrekkelijk zijn, aangezien deze vaak langer duren en stabiele werkzekerheid bieden in interim werk.
Veelvoorkomende taken
In de rol van Data Engineer omvatten jouw taken het beheren van datastreams, het ontwikkelen van data-infrastructuren en het optimaliseren van ETL-processen om datacrash te voorkomen. Je moet ook in staat zijn om integratieanalyses uit te voeren en relevante databases te beheren. Werkzaamheden kunnen ook worden uitgevoerd in de context van projectmanagement waarin je samenwerkt met verschillende teams om dataprojecten te coördineren en deadlines te halen, zoals bij het gebruik van het DAS (Data Analytics Services) model. Je zorgt ervoor dat de software-engineering best practices worden gevolgd, wat essentieel is voor de kwaliteit en snelheid van databeheer.
Specialiseren
Om een specialist te worden in de functie van Data Engineer, is het belangrijk om continue professionele ontwikkeling na te streven. Dit kan door het volgen van certificeringen in specifieke technologieën, zoals Microsoft Azure, en het werken aan diverse opdrachten, inclusief zzp opdrachten en interim werk. Veel Data Engineers beginnen met een HBO-opleiding in de richting van Informatica of Data Science, maar aanvullend leren via bootcamps, workshops en online cursussen is ook waardevol. Het opdoen van praktische ervaring in projecten met complexe datastromen zal je kennis verder verdiepen en je helpen te groeien in deze dynamische en snel veranderende sector.
Overzicht: Data Engineer
OPLEIDINGSNIVEAU:
Minimaal HBO werk- en denkniveau
SALARISINDICATIE IN LOONDIENST
€ 50.000 - € 80.000
INDICATIE UURTARIEF BIJ ZZP
€ 75 - € 100 per uur
DOORGROEIMOGELIJKHEDEN
Senior Data Engineer, Lead Data Engineer, Data Architect
COMPTENTIES & VAARDIGHEDEN
Analytisch vermogen, Communicatieve vaardigheden, Ervaring met Azure, Kennis van ETL-processen, Bekend met best practices software-engineering
GERELATEERDE FUNCTIES
Data Scientist, Data Analyst, BI Specialist
Wat doet een Data Engineer?
Functieomschrijving
Als Data Engineer ben je verantwoordelijk voor het creëren en onderhouden van datastromen die waardevolle informatie genereren voor verschillende bedrijfsdoelstellingen. Je hebt een kritische rol in de energiesector, waar datagedreven beslissingen steeds belangrijker worden als onderdeel van de energietransitie. Dit houdt in dat je niet alleen technische vaardigheden nodig hebt, maar ook de capaciteit om te communiceren met diverse belanghebbenden en teams. Je werkt met moderne technologieën, voornamelijk binnen cloudomgevingen zoals Microsoft Azure, om data te transformeren en analytische oplossingen te bieden. Je zorgt ervoor dat data accuraat en actueel zijn, zodat de organisatie goed gefundeerde beslissingen kan nemen.
Salarisindicatie
De salarissen voor een Data Engineer variëren, afhankelijk van ervaring, locatie en sector. Over het algemeen kan het salaris voor een Data Engineer tussen de € 50.000 en € 80.000 per jaar liggen, maar in sommige gevallen kan dit oplopen tot € 100.000 voor zeer ervaren professionals. Voor zzp opdrachten ligt het tarief gemiddeld tussen de € 75 en € 100 per uur, afhankelijk van de complexiteit van de opdracht en de specifieke vaardigheden van de engineer. Opdrachten in de overheid kunnen ook aantrekkelijk zijn, aangezien deze vaak langer duren en stabiele werkzekerheid bieden in interim werk.
Veelvoorkomende taken
In de rol van Data Engineer omvatten jouw taken het beheren van datastreams, het ontwikkelen van data-infrastructuren en het optimaliseren van ETL-processen om datacrash te voorkomen. Je moet ook in staat zijn om integratieanalyses uit te voeren en relevante databases te beheren. Werkzaamheden kunnen ook worden uitgevoerd in de context van projectmanagement waarin je samenwerkt met verschillende teams om dataprojecten te coördineren en deadlines te halen, zoals bij het gebruik van het DAS (Data Analytics Services) model. Je zorgt ervoor dat de software-engineering best practices worden gevolgd, wat essentieel is voor de kwaliteit en snelheid van databeheer.
Specialiseren
Om een specialist te worden in de functie van Data Engineer, is het belangrijk om continue professionele ontwikkeling na te streven. Dit kan door het volgen van certificeringen in specifieke technologieën, zoals Microsoft Azure, en het werken aan diverse opdrachten, inclusief zzp opdrachten en interim werk. Veel Data Engineers beginnen met een HBO-opleiding in de richting van Informatica of Data Science, maar aanvullend leren via bootcamps, workshops en online cursussen is ook waardevol. Het opdoen van praktische ervaring in projecten met complexe datastromen zal je kennis verder verdiepen en je helpen te groeien in deze dynamische en snel veranderende sector.
Overzicht: Data Engineer
OPLEIDINGSNIVEAU:
Minimaal HBO werk- en denkniveau
SALARISINDICATIE IN LOONDIENST
€ 50.000 - € 80.000
INDICATIE UURTARIEF BIJ ZZP
€ 75 - € 100 per uur
DOORGROEIMOGELIJKHEDEN
Senior Data Engineer, Lead Data Engineer, Data Architect
COMPTENTIES & VAARDIGHEDEN
Analytisch vermogen, Communicatieve vaardigheden, Ervaring met Azure, Kennis van ETL-processen, Bekend met best practices software-engineering
GERELATEERDE FUNCTIES
Data Scientist, Data Analyst, BI Specialist
Opdrachtomschrijving
TV-ECDAP is bezig met het migreren van alle ETL-processen voor het datalandschap vanuit SAS naar Synapse. Voor elk proces wordt beoordeeld of het nog noodzakelijk is en hoe het overgezet kan worden, eventueel in combinatie met andere processen. Elk proces krijgt een eigen Python-package waarin de benodigde ETL-werkzaamheden in Pyspark zijn opgenomen. De periodieke uitvoering van deze packages zal plaatsvinden in Synapse. De data engineer speelt een cruciale rol in het overzetten van deze processen, wat kan variëren van eenvoudig tot complex, en kan daarnaast bijdragen aan de infrastructuur van het nieuwe datalandschap.
Vereist profiel
Wij zoeken een ervaren data engineer die verantwoordelijk is voor het ontwikkelen van toegewezen processen volgens de vastgestelde formats. Je moet meedenken over de beste oplossingen in lijn met de functionele wensen van elk proces. Kennis van Python en Pyspark is essentieel, evenals ervaring met ETL-processen en datamigratie. Beschikbaarheid voor een initiële inhuurperiode van 6 maanden met mogelijke verlengingen is vereist. Houd er rekening mee dat screening en onboarding enige tijd kan vergen. De startdatum is 1 september 2025 en de locatie is Spaklerweg 4, 1096 BA Amsterdam, bij De Nederlandsche Bank N.V.
Eisen
- De kandidaat is minimaal 32 uur per week beschikbaar.
- De kandidaat is beschikbaar vanaf 1-9-2025 (of (indien beide Partijen daarmee akkoord gaan) zoveel eerder als dat de screening en administratieve handelingen afgerond zijn) tot en met 1-3-2026
- Inschrijver garandeert dat de aangeboden kandidaat beschikbaar blijft voor eventuele verlengingen van de opdracht met maximaal 12 maanden totaal (en zoals uitgewerkt in paragraaf 2.2 van de standaardvoorwaarden). DNB zal opdrachtnemer uiterlijk 4 weken vóór het invullen van opties hiervan in kennis stellen.
- Verloven dienen te allen tijde in overleg met DNB te zijn afgestemd en vooraf door DNB te worden goedgekeurd.
- De werkzaamheden worden uitgevoerd ten kantore van DNB (tenzij de manager bepaalt dat thuiswerken ook is toegestaan), en altijd in de virtuele omgeving en op laptops van DNB.
- De kandidaat is beschikbaar voor een gesprek via Teams tussen 8 en 15 juli
- De kandidaat beschikt over minimaal 3 jaar ervaring met ontwikkeling in Python: het maken van Python-packages inclusief Pytests. De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat beschikt over minimaal 3 jaar ervaring met ontwikkeling in Pyspark De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat beschikt over minimaal 2 jaar ervaring met Azure De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat beschikt over tenminste werk- en denkniveau.
- De kandidaat beschikt over uitstekende schriftelijke en mondelinge vaardigheden in de Nederlandse en Engelse taal.
- De kandidaat beschikt over de volgende competenties: Oplossingsgericht Analytisch Innovatief Leergierig Teamspeler
Wensen
- De kandidaat is 36 uur per week beschikbaar.
- De kandidaat is beschikbaar vanaf 1-8-2025 (of (indien beide Partijen daarmee akkoord gaan) zoveel eerder als dat de screening en administratieve handelingen afgerond zijn) 1-2-2026
- De kandidaat heeft ervaring met Synapse De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat heeft ervaring en kennis van DevOps De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat heeft ervaring met SQL De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
- De kandidaat heeft ervaring met Fabric en/of Databricks De ervaring van de kandidaat dient duidelijk uit het ingediende CV te blijken.
Reageer direct!
