Evalueringskonferansen 2024

Velkommen

Karin Ibenholt, Norsk evalueringsforening/Samfunnsøkonomisk analyse 

Oppdragsgivers refleksjoner om evalueringspraksis
Hva gjør vi for å få de riktige og nyttige evalueringene? Hvordan blir egentlig beslutningene om å evaluere tatt? Er det de evalueringene det er størst behov for som blir prioritert? Hvordan blir mandatene laget? Og – hvor nyttig og brukbare er evalueringene som blir levert? I denne plenumssesjonen får vi innblikk i hvordan kunnskapsarbeidet i departement og direktorat er organisert og hvordan evalueringer blir til.
 

Sissel Lorck/Arbeids- og inkluderingsdepartementet og Anne-Cathrine Grambo/Arbeids- og velferds-direktoratet 

10:40 – Samarbeid JD og POD
Cathrine Lurås/Justis- og beredskapsdepartementet og Espen Frøyland/Politidirektoratet

11:10 – Hvordan er kunnskapsarbeidet i departement og direktorat organisert og hvordan blir evalueringer til?

Åsne Kalland Aarstad/Bufdir og Siv Sannem Inderberg/Miljødirektoratet

11:40 – Diskusjon med alle innlederne
Ledet av Margret Helgadottir, Justis- og beredskapsdepartementet
 

Oppdragstakers refleksjoner om evalueringspraksis

Hvilke råd har oppdragstaker til oppdragsgiver for å få enda bedre evaluering?
Kort innlegg ved Svein Erik Stave/Fafo, Espen Solberg/Nifu og Tom Markussen/Agenda Kaupang. Panelsamtale ledet av Margret Helgadottir
 

Hvilke råd har oppdragstaker til oppdragsgiver for å få enda bedre evaluering? Hva synes oppdragstaker om evalueringene som bestilles? Hvor godt utgangspunkt gir mandatene for å levere evalueringer som er nyttig og får betydning for styring og politikkutvikling? Hvor god forståelse har evaluator av hvordan en evaluering skal brukes? Hvor stor er avstanden mellom «forskning» og «evaluering»? Har bestiller-rollen forandret seg over tid, og hva er i så fall trenden? I denne plenumssesjonen får de som bestiller evaluering tips og triks for lage enda bedre mandater og følge opp godt i gjennomføringsfasen av evalueringsarbeidet. 

Gjennomføring av evaluering – parallell-sesjoner

I disse sesjonene får dere innblikk i samarbeidet mellom bestiller og utfører om enkelte evalueringsoppdrag. Hvilke erfaringer har de gjort seg? Hva har fungert godt og hvor har det vært utfordringer? På hvilken måte har evalueringene blitt tatt i bruk – og i hvor stor grad kan bruk og nytteverdi forklares med forarbeid og gjennomføring?

Parallell 1
  1. «Evaluering av porteføljestyring» Ida Lindkvist /Direktoratet for høyere utdanning og kompetanse
  2. «Evaluering av etablering av Norec i Førde» Sveinung Fjose/Menon og Helge Espe/Norsk evalueringsforening
  3. «Evaluering av rettsvitenskapelig forskning i Norge (JUREVAL)) – en tango for tre» Jon Holm/Norges forskningsråd og Margret Helgadottir/Justis- og beredskapsdepartementet
Parallell 2
  1. «Følgeevalueringen av prosjektet Kommunedelplan E16 Kongsvinger-E6» Erik Whist/Multiconsult Norge og Solfrid Førland/Nye Veier
  2. «Forskningsbasert føleevaluering av strukturreformen – muligheter og utfordringer» Siri Brorstad Borlaug/OsloMet/NIFU og Tord Skogedal Lindén/NORCE/Norsk evalueringsforening
  3. «Evaluering av utprøving av digital hjemmeoppfølging» Ingrid Gaarder Harsheim/Oslo Economics og Siw Helene Myhrer/Helsedirektoratet
FREDAG
 

Nye utfordringer og muligheter for evalueringspraksis
09:00 – 09:15 AI er kommet: Og hva er konsekvensene for evaluering
Steffen Bohni Nielsen/Det Nationale Forskningscenter for Arbeidsmiljø, DK

Steffen vil i sitt innlegg belyse, hvordan AI-teknologiene endrer tradisjonelle evalueringsmetoder og åpner opp for revolusjonerende tilgang til både innsamling, analyse og oppbevaring av data. – Og hvorfor det er avgjørende å forholde seg konstruktivt, ansvarlig og kritisk til AI. Steffen adresserer også de nødvendige kompetanser, som gjennomfører evalueringer må utvikle for å tilpasse seg denne nye teknologiske æraen.

09:15 – 09:45 Hvordan kan KI og nye arbeidsformer effektivisere kunnskapsarbeid?
Marie Berntsen, Digdir
Digdir har på oppdrag fra Digitaliserings- og forvaltningsdepartementet nylig gjennomført et prosjekt for å kartlegge status på innovasjonsarbeid i offentlig sektor. I prosjektet har Digdir også eksperimentert med KI-teknologiens evne til å sammenstille og effektivisere innhenting og analyse av kunnskap

09:45 – 10:15 KI og maskinlæring som metode i evaluering – muligheter og eksempler
Jan Roar Beckstrøm/Riksrevisjonen

Produkter basert på store språkmodeller som ChatGPT og Copilot har åpenbart stor nytte også for folk som driver med evaluering. Samtidig er KI og ikke minst maskinlæring mye mer enn dette. Det finnes således en rekke modeller og tilnærminger man ikke hører så mye om, men som kan være nyttige metoder for analyse. Jan Roar Beckstrøm vil således berette litt om dette, inkl. vise noen eksempler fra Riksrevisjonen på bruk av maskinlæring.

10:15 – 10:45 Utgår pga sykdom. Webinar kommer
DFØ/Kudos: Muligheter KI gir når vi samler alt kunnskap på et sted
Leo Valen og John-Olav Sæther/Direktoratet for økonomistyring

 

Evaluering i innovasjonsarbeid – hvordan evaluere raskere – tettere på?
11:15 – 11:50 Kunnskapsbasert digital produktutvikling
Gaute Eielsen/Arbeids- og velferds-direktoratet

Virker det digitale produktet? Bidrar det til å løse samfunnsoppdraget?
I stadig flere offentlige etater får tverrfaglige team ansvar for å løse problemer gjennom hyppige leveranser og kontinuerlig læring. Tilnærmingen har flere fordeler, men i Nav har det vist seg krevende for mange team å skaffe seg nødvendig problemforståelse, vurdere alternativer og lære tilstrekkelig under utvikling. Gaute vil fortelle hvordan Nav jobber for å tilføre den digitale produktutviklingen kapasitet til å utrede og evaluere, med eksempler fra pågående arbeid for å forbedre Navs innledende prioritering av arbeidssøkere.

11:50 – 12:30 Dynamisk nyttestyring og evaluering
Lars Van Marion og Hege Bogen/Capto
Verktøykassen for statlig utvikling utvikles raskt, og spesielt der det er store innslag av teknologibruk. Styringsverktøyene og bruken av evalueringer må tilpasses nye arbeidsformer og muligheter for kontinuerlig forbedring som ligger i den teknologiske utviklingen. Erfaringer viser at offentlig sektor har utfordringer med å fange opp og håndtere de nye innovasjonsmulighetene som måtte dukke opp – og spesielt mulighetene for å tenke helt nytt. I innlegget vil det gjennomgås forslag til en ny praksis som har fått navnet dynamisk nyttestyring.

12:30 – 13:00 Evalueringsprisen – foredrag

13:00-13:10 Avslutning v Liv Moberg/DFØ, EVA-forum

14:00 – 15:00 Uformell kaffesamtale om evaluering