Data Engineer

Opleidingen MBO-opleidingen HBO-opleidingen Cursussen & Trainingen Particulier onderwijs Thuisstudies Bedrijfsopleidingen Incompany trainingen Nederlandse Taal (NT2) Wetenschappelijk Onderwijs Uniformberoepen MBO-HBO routes Mijn favorieten - Data Engineer Logo Jouw rol als Data Engineer Als Data Engineer zorg je ervoor dat je collega's binnen Zeeman effectief gebruik kunnen maken van data door middel van een soepel ELT-proces. Je maakt gebruik van diverse databronnen, organiseert deze via ons Azure-datalake en zet ze om tot bruikbare data in ons Lakehouse. Je ontwikkelt scripts en algoritmes waarmee je de beschikbare data efficiënt samenbrengt en organiseert via Microsoft Synapse. Daarnaast ben je verantwoordelijk voor het implementeren van informatieproducten. Het uiteindelijke doel van deze functie is om informatieproducten op te leveren waarmee je je Zeeman-collega's helpt om de juiste beslissingen te nemen. In deze rol heb je nauw contact met stakeholders aan de businesskant. Je komt te werken in een relatief nieuw en groeiend team van data-enthousiastelingen. Jouw verantwoordelijkheden - Het bouwen en optimaliseren van 'big data'-datapijplijnen en architecturen; - Het implementeren van efficiënte opslagmethoden op ons datalake; - Het monitoren van de performance van ons datalake; - Het soepel laten verlopen van verschillende laadprocessen binnen ons datalake; - Het opbouwen van datasets binnen Synapse-workspaces. Dit breng je mee - Minimaal hbo werk- en denkniveau, bij voorkeur in een relevante studierichting; - Minimaal 3 jaar ervaring als (Big) Data Engineer; - Ervaring met PySpark en Delta Lake; - Ervaring met Synapse en Google BigQuery is een pré; - Ervaring met relationele SQL databases, waaronder SQL Server is een pré; - Ervaring met datapijplijnen en Azure release pipelijnen zoals bijvoorbeeld Data Factory, PowerShell, Azure Release Management en DevOps (Git). Dit krijg je ervoor terug - Een werkomgev...