Bakgrunn: Bakgrunnen for denne minikonkurransen er Statens vegvesens behov for bistand med videreutvikling og industrialisering av kildeintegrasjoner og datainnhenting. Bistanden gjelder en senior integrasjonsutvikler/dataingeniør. Formålet med oppdraget er å sikre at Statens vegvesen styrker sin kapasitet til å skalere kildeintegrasjoner og dataingeniørarbeidet av kildenær data i et sentralt team tilhørende IT. Bemanning av tilstøtende data-team kan være aktuelt.
Dataplattform: Vår dataplattform Saga vil være «motorveien» vår for innsamling, lagring, behandling, analyse, rapportering og deling av data, både internt og eksternt. På denne er det etablert et rådatalager og tilhørende team Dataintegrasjon med spesialister på kildeintegrasjon som tilrettelegger rådata for videre bruk på plattformen. I skrivende stund finnes Saga plattform basert på on-prem infrastruktur, men Saga plattform basert på skyteknologi er under utvikling. Denne konsulenten skal kunne arbeide på begge dataplattformer, med hovedvekt på Saga i sky (basert på Azure og Databricks teknologi).
Kort beskrivelse av bistanden og Kundens behov:
- Etablere robuste integrasjoner mot etatens ulike interne kildesystemer og gjøre tilgjengelig store mengder av rådata. Hensikten er å kunne skalere og industrialisere dataintegrasjonsarbeidet.
- Bidra til å utvikle og forvalte standardiserte metoder, rutiner og prosesser for en effektiv, bærekraftig og skalerbar DataOps-praksis.
- Delta i design og implementering av skalerbare og robuste dataarkitekturer.
- Utføre feilsøking og problemløsning ved avvik eller driftsproblemer knyttet til integrasjon av rådata.
- Det kan også være aktuelt å: Forvalte og overvåke data pipelines for pålitelig og effektiv dataflyt
- Bidra til å øke kompetansen innen integrasjoner og dataingeniør-faget og bygge en kultur for dataingeniør-arbeid i DataOps-teamene.
- Komme med forbedringsforslag og utføre testing av nye teknologier og verktøy.
- Jobbe med verdiøkning av rådata for både analytiske og operasjonelle bruksformål sammen med datadomeneteam som består av eksperter fra etatens fagområder.
- Sikre etterlevelse av personvern-, data governance- og informasjonssikkerhetsretningslinjer.
- I den utstrekning Kunden ønsker det skal Konsulenten også delta i andre relaterte aktiviteter.
Arbeidsoppgaver:
- Etablere robuste integrasjoner mot interne kildesystemer og gjøre rådata tilgjengelig i et sentralt dataøkosystem.
- Bidra til utvikling og forvaltning av standardiserte metoder og prosesser for DataOps-praksis.
- Designe og implementere skalerbare dataarkitekturer og feilsøke driftsproblemer knyttet til dataintegrasjon.
- Overvåke datapipelines og bidra til kompetansebygging i DataOps-teamene.
- Teste og vurdere nye teknologier og verktøy samt sikre etterlevelse av relevante retningslinjer.
Krav til konsulent:
Obligatorisk:
- Minimum 3-5 års relevant arbeidserfaring innen dataintegrasjoner eller dataingeniør-praksis.
- Solid programmeringskompetanse med Python og SQL.
- Kunden søker konsulent(er) som har ha god skriftlig- og muntlig fremstillingsevne på norsk
- Kunden søker konsulent(er) som har ha gode samarbeidsevner og kommunikasjonsevner
Ønsket:
- Omfattende erfaring med å lage robuste dataintegrasjoner fra kildesystemer, og håndtering av problematikk knyttet til for eksempel «schema drift», datakvalitet, sanntidsintegrasjoner og sent ankommende data, historisk backfill og reprosessering.
- Erfaring med Azure skyplattform og konkret erfaring i bruken av Databricks for å utvikle datamønstre (patterns).
- Erfaring med å lage gjenbrukbar kode og komponenter for industrialisert dataintegrasjon som gir fart for enkeltutviklere og team.
- Solid erfaring med ETL/ELT-prosesser, datamodellering og datatransformasjon med kodebaserte verktøy som f.eks. dbt.
- Erfaring med å utvikle CI/CD-pipelines og annen DataOps/DevOps-praksis.
- Kjennskap til data governance, personvern og informasjonssikkerhetsprinsipper.
- Erfaring med å bygge integrasjoner mot kilder som leverer data i nær-sanntid gjennom datastrømming (Kafka, Event Hub) eller change data capture (CDC). Java-kompetanse er en fordel.
Oppdragsdetaljer:
Oppstart: 01.03.2026
Varighet: 01.03.2026 – 01.03.2027
Arbeidssted: Oslo eller Drammen
Omfang: 100%