Find Your Next Job
Skillspark AB
Senior Dataengineer
Posted on Nov. 18, 2024
- Oslo, Norway
- 0 - 0 USD (yearly)
- Full Time
Dagens dataplattformer skal moderniseres ved at det etableres en ny dataplattform i skyen (Azure) i perioden 2024 til 2026. Dagens løsninger skal bygges på nytt på ny dataplattform for å ikke ta med seg teknisk- og data-gjeld.
Løsningen består av om lag 100 integrasjoner og 450 datasett som i dag benyttes til økonomiske modeller og analyser. Antall brukere er om lag 200.
Moderniseringen er organisert som et prosjekt med varighet på 2,5 år. Det er lagt opp til en trinnvis implementering av virksomhetsprosesser. Prosjektet vil forvalte produksjonssatte løsninger i på ny dataplattform i prosjektperioden etter prinsippet «You build it – you run it». Dagens og ny dataplattform vil leve i parallell mens dagens plattform gradvis fases ut.
Det vil være behov for integrasjoner mellom ny og eksisterende løsning i denne perioden.
I dette arbeidet er det behov for å styrke teamet med 1 Data Engineer på 100% til enheten Data Management.
Som Data Engineer vil du ha fokus på det tekniske arbeidet “i maskinrommet”.
Du vil jobbe med å
Innhente data primært fra eksterne kilder (DataFactory, Python m.m.)
Standardisere dataintegrasjoner (primært API og filbasert)
Vaske, bearbeide og klargjøre data (Python)
Tilgjengeliggjøre data i henhold til «medalion»- og lakehouse arkitektur
Sørge for teknisk kvalitet på data.
Veilede brukere av dataene
Utviklingsmetodikk og rammeverk for data engineering
Datamodellering - relasjonsmodeller, stjerneskjema, fakta og dimensjoner o.l.
Dataarkitektur og historisering / versjonering av data
Database/tabell/schema administrasjon
CI/CD og DataOps
Python biblioteker for gjenbruk
Konvertering av ulike filformater til parquet
Ønskelige kompetanser:
Skyteknologi fortrinnsvis Azure
Databricks Unity Catalog
Airflow/Dagster/Python for orkestrering
Azure Data Factory
Azure DevOps/GitHub
Utdanning:
Utdanning (fortrinnsvis master) innen datateknologi eller lignende retninger
Personlige egenskaper:
Lagspiller
Selvstendig
Løsningsorientert
Dette er et timeoppdrag hvor konsulentene underlegges styring og ledelse av Norges Bank, og leverandøren styrer ikke selv ressursinnsatsen. Det legges til grunn SSA-B for tildelingsavtale.
Oppdragets varighet er 01.01.2025 til 31.12.2025.
Norges Bank forbeholder seg rett til å forlenge oppdraget med
3 måneder + 3 måneder + 3 måneder + 3 måneder.
Customize Your Resume to Match this Job
Share with Friends!