The posting
Datacation icon Hewlett Packard Spreek een expert Datacation iconDatacation icon Amsterdam Wibautstraat 137 1097 DN Eindhoven High Tech Campus 5 P0.91 5656 AE KvK 82577102 IBAN NL25INGB0006939823 BTW NL862525330B01 Contact ons [email protected] Datacation office Functieomschrijving Als data engineer pak je een actieve rol in uitdagende data- en cloudprojecten. Je werkt niet alleen uitvoerend, maar denkt ook mee over het ontwerp van pipelines en architectuur. In samenwerking met onze senior engineers en consultants ontwikkel je je verder tot specialist. Je krijgt de ruimte om eigenaarschap te tonen binnen projecten. Je werkzaamheden bestaan onder andere uit: - Het vertalen van business uitdagingen naar schaalbare data-gedreven oplossingen. - Het zelfstandig bouwen, optimaliseren en onderhouden van data pipelines (batch en streaming) in o.a. Azure. - Werken met de moderne stack zoals Azure Databricks, PySpark, Azure Data Factory, Azure Data Lake en orchestrators. - Het ontwerpen en implementeren van Data Lake structuren zoals de medallion architecture (bronze/silver/gold). - Containerization toepassen met Docker en het opzetten of beheren van CI/CD pipelines (bijv. GitHub Actions). - Actief communiceren met de klant over de voortgang en technische keuzes. - Kennis delen en sparren met onze senior data engineers en data consultants. - Je eigen oplossingen en resultaten presenteren aan opdrachtgevers. - Het bezoeken van evenementen om je netwerk en kennis te vergroten. Wat verwachten we van jou? - Aantoonbare ervaring (minimaal 2 jaar) met data engineering, cloud en het in productie brengen van datapipelines. - Goede beheersing van Python en ervaring met libraries zoals PySpark, Pandas of NumPy. - Sterke vaardigheden in SQL en data modelling. - Ervaring met cloud tooling (bij voorkeur Azure) zoals Databricks, Data Lake, ADF of Synapse. - Ervaring met CI/CD, Git, Docker en serverless technieken. - Een MSc of...



