Senior Data Engineer
⚲ Oslo
Wymagania
- GitHub
- API (Application Programming Interface)
- Microsoft Platform
- Artificial Intelligence (AI)
- SQL
- Python
- Testing
- Cloud
- Microsoft Azure
- CI/CD
Opis stanowiska
BESKRIVELSE AV OPPDRAGET Dagens dataplattformer skal moderniseres ved at det etableres en ny dataplattform i skyen (Azure) i perioden 2024 til 2028. Dagens løsninger skal bygges på nytt på ny dataplattform for å ikke ta med seg teknisk- og data-gjeld. Løsningen består av om lag 100 integrasjoner og 450 datasett som i dag benyttes til økonomiske modeller og analyser. Antall brukere er om lag 200. Moderniseringen er organisert som et prosjekt med en trinnvis implementering av virksomhetsprosesser. Prosjektet vil forvalte produksjonssatte løsninger i på ny dataplattform i prosjektperioden etter prinsippet «You build it – you run it». Dagens og ny dataplattform vil leve i parallell mens dagens plattform gradvis fases ut. Det vil være behov for integrasjoner mellom ny og eksisterende løsning i denne perioden. ANSVAR OG OPPGAVER Som Data Engineer vil du ha fokus på det tekniske arbeidet “i maskinrommet”. Du vil jobbe med å • Innhente data primært fra eksterne kilder (DataFactory, Python m.m.) • Standardisere dataintegrasjoner (primært filbasert og API) • Vaske, bearbeide og klargjøre data (Python) • Tilgjengeliggjøre data i henhold til «medalion»- og lakehouse arkitektur • Sørge for teknisk kvalitet på data. • Veilede og samarbeide med brukere av dataene HOVEDKVALIFIKASJONER OG FERDIGHETER Kompetanser • Gjerne minst 5 års erfaring innen data engineering • Utviklingsmetodikk og rammeverk for data engineering. • Datamodellering - relasjonsmodeller, stjerneskjema, fakta og dimensjoner o.l. • Historisering / versjonering av data. • Database/tabell/schema administrasjon. • Erfaring med CI/CD, versjonskontroll og strukturerte utviklingsløp. • God kompetanse i Python for databehandling, integrasjoner, testing og automatisering. • Kompetanse på lakehouse-, warehouse- eller medallion-arkitektur. • Bruk av AI-verktøy i arbeidet. • Evne å omforme brukerbehov til teknisk løsninger som skaper verdi. • Erfaring med tverrfaglig samarbeid på tvers av team, roller og fagområder Ønskelige kompetanser • Skyteknologi fortrinnsvis Azure • Databricks • Behersker Python og SQL Godt • Airflow/Dagster/Prefect for orkestrering eller tilsvarende. • Azure Data Factory • AI-verktøy - Claude Code, Copilot o.l. • Azure DevOps/GitHub Utdanning • Utdanning (fortrinnsvis master) innen datateknologi eller lignende retninger Personlige egenskaper • Lagspiller • Løsningsorientert • God erfaring med tverrfaglig samarbeid på tvers av team, roller og fagområder • Bruker-/produktorientert Omfang og varighet: Oppdragets varighet er fra snarest mulig etter tildeling, og til 31.12.2026. Norges Bank forbeholder seg rett til å forlenge oppdraget med 3 måneder + 3 måneder + 3 måneder + 3 måneder. Arbeidssted: Onsite Oslo Søknadsfrist: 25.5