ETL Data Engineer (Apache NiFi, Data Pipelines, Data... in 's-Gravenhage, Nederland
WLG
ContractBepaalde tijd of freelance
's-Gravenhage, Nederland
The data exists. Your job is to get it where it needs to be, reliably.
A multinational defence organisation in The Hague needs a data engineer to design and build the
ETL processes that bring imagery and reports from sources on different networks into its systems,
and then make those flows controllable, observable and resilient. The engagement is one person,
delivered as a set of milestones over the year.
What you would be doing
Documenting, configuring and testing the ETL requirements: source-to-target mapping,
traceability and data reconciliation
Building data models, pipelines and schemas for data coming from many different sources
Putting configuration control in place: baselines, versioning, change approval and rollback
Setting up monitoring with metrics, alerts, dashboards and logging
Designing and testing resilience: backup and restore, failover, recovery time and point objectives
Troubleshooting production data flows, and handing over through a training package and
on-the-job training for the administrators
What you would bring
Hands-on experience with modern ETL tools such as Apache NiFi, Informatica, Talend or SSIS,
ideally on AWS or Azure
Data modelling and transformation from heterogeneous sources
Experience with data sharing platforms, object stores and relational, NoSQL, graph and vector
databases
Comfort on the Linux command line and a knack for fixing data anomalies
Experience delivering against fixed, deliverable-based contracts in multinational teams
Familiarity with NATO intelligence and surveillance architecture and applications, and fluent
business English
Why this one is worth a look
A clearly scoped engineering job where you own the pipelines end to end, with an option year
after the first.
... you. The Opportunity As a Data Translator / Data Engineer at Rabobank, you are the vital link in a multidisciplinary team dedicated to customer and campaign data. You won’t just be crunching numbers; you’ll be translating the "why" behind marketing requests into the "how" of technical logic, using tools like SQL, Databricks, ...
... with Software Engineers, Data Management specialists, architects and platform teams, you will contribute to the underlying data capabilities that make trusted data accessible at scale. As part of this role, you will: - Design, develop and operate data pipelines and supporting capabilities such as metadata, lineage, data ...
Over de functie Als Data Engineer binnen het Data & Analytics-team maak je data betrouwbaar, consistent en bruikbaar. Je vertaalt informatiebehoeften uit de business naar data-oplossingen en ontwerpt, bouwt en beheert de bijbehorende dataproducten en datastromen. Je werkt samen met IT, data-analisten, de data governance ...
Over de functie Als Data Engineer realiseer je modellen en ontsluit je data om inzichten te creëren voor organisaties. Jouw takenpakket bestaat uit: - Het realiseren en implementeren van modellen - Het omzetten van data in bruikbare inzichten - Het ontsluiten van data naar data warehouses via verschillende pipelines - En ...
... groei van het bedrijf zoeken ze naar een gemotiveerde Data Engineer. In deze functie ga je aan de slag met het ontwikkelen van streaming- en batchprocessen om data te verzamelen. Ook bouw je mee aan datalandschappen, cloudoplossingen en microservices. Je gaat data pipelines nog beter maken en implementeert data driven oplossingen. ...
Over de functie Voor deze rol van Data & AI Engineer zoeken we voor deze ICT-dienstverlener iemand met het volgende profiel: - Hbo-werk- en denkniveau en medior ervaring; - Ervaring met het ontwikkelen en implementeren van AI- en ML-modellen; - Solide kennis van Python, SQL en ETL-principes; - Ervaring met Azure AI en Azure ...
Bedrijfsprofiel Centrale bank in amsterdam Beschrijving functie Data Engineer Bij DNB werk je met impact op financiële stabiliteit en duurzame welvaart. DNB maakt zich sterk voor een betrouwbaar financieel stelsel. Als migratiebegeleider Databricks kun je hier een belangrijke bijdrage aan leveren! Je werkt bij de divisie ...
... Informatica, Data Engineering, Bedrijfskundige Informatica of een vergelijkbare richting. - Ervaring met het ontwerpen, bouwen en beheren van data pipelines, ETL- en ELT-processen en data-integraties. - Ervaring met databases, datamodellering en SQL. - Ervaring met Microsoft SQL Server, Azure Data Factory, datawarehousing ...
... trust and consume data. You will work across a broad technology landscape, connecting modern cloud platforms, metadata solutions and enterprise systems into a unified experience. The challenges are complex, the impact is significant and the opportunity to influence both the product and the engineering culture is substantial. ...
... Engineer ben je verantwoordelijk voor het ontwerpen en realiseren van moderne data-oplossingen binnen het Azure-ecosysteem. Je bouwt en onderhoudt schaalbare data-platformen en ontwikkelt efficiënte data-pipelines die betrouwbare inzichten mogelijk maken. Je werkt samen met data engineers, analytics specialisten en business ...