SAMÖ 2016
Utvärdera för att lära och
utveckla
Dp Utvärdering
Sofie Ivarsson
Camilla Trané
Inga-Lill Söderkvist
Vad är utvärdering?
• En aktivitet som kännetecknas av:
systematisk och noggrann
insamling av data,
beskrivning och bedömning på
ett grundligt, systematiskt och
genomtänkt sätt och
användning.
Varför utvärdera?
•
•
•
•
”ett övergripande syfte med all utvärdering är att
främja lärande”,
”visa vilka styrkor och svagheter som finns med ett
visst handlande och hur processer kan förbättras”,
”utvärdering av offentliga verksamheter ytterst är till
för att förbättra samhället”,
”söka förklaringar till varför vissa resultat uppstår”.
Utvärderandets konst – Ove Karlsson Vestman
SAMÖ 2016
Övningar - en trygg miljö!
•
Övningar är en trygg miljö:
”ok göra fel”,
pröva olika lösningar,
utvecklas och lära.
•
Skillnad utvärdering verklig händelse och övning komma in i slutet eller vara med från början.
SAMÖ 2016
Utvecklings- och lärandeprocess hela vägen
• En bra och kvalitativ utvärdering
är beroende av planeringsprocessen.
• Utvärderingsprocessen är med hela
tiden genom planeringsprocessen.
• SAMÖ 2016 slutar när lärdomar
och erfarenheter är omhändertagna
i verksamheterna och överlämnade
till SAMÖ Fokus 2018.
SAMÖ 2016
Övergripande mål
Övande aktörer har genom SAMÖ 2016 visat förmåga till ledning,
samverkan och kommunikation vid hantering av
samhällsstörningar.
Därigenom har de visat att de agerar samordnat utifrån en
aktörsgemenensam inriktning för att värna samhällets
skyddsvärden.
Hur gick det?
•
•
•
•
Målbaserad utvärdering/måluppfyllelseanalys.
Har målen uppnåtts? I vilken grad?
Jämföra observationer av övningens resultat med
övningens mål.
Målarbetet är centralt!
Syfte med utvärderingen
Utvärderingsresultatet av SAMÖ 2016 syftar till
att utgöra ett underlag som bidrar till och
främjar fortsatt utveckling av samhällets
krisberedskap.
Erfarenhetshantering
Övningsutvärdering
Utvecklingsområden
Åtgärdsplaner
SAMÖ 2016
Den aktörsgemensamma
utvärderingen av SAMÖ 2016
Mål och
indikatorer
Metod och
DataResultat
underlag insamling
Utvecklingsområden
Åtgärdsplaner
SAMÖ 2016
Allting kretsar kring målen
•
•
Målen utgör grunden till
hela övningen.
Vilka är ”målen”?
Det övergripande målet
Aktörsgemensamma mål
med målbeskrivning
Aktörsinterna
mål
Aktörsgemensamma
indikatorer
Aktörsinterna
indikatorer
Aktörsgemensamma
bedömningsfrågor
Aktörsinterna
bedömningsfrågor
Vad är en indikator?
•
•
Att använda en indikator innebär ”att mäta
något smått som kan representera något stort”
(Ekonomistyrningsverket)
Troligen blir det en kombination av kvalitativa
och kvantitativa indikatorer.
Avgränsningar
• Projektet ansvarar för att utvärdera
de aktörsgemensamma målen,
medan den enskilda aktören ansvarar
för att utvärdera de aktörsinterna
målen.
• Aktören ansvarar även för att bistå
projektet med underlag till
utvärdering av de gemensamma
målen.
Den närmsta tiden – allt fokus på mål
Mål och indikatorer
•
•
•
April-december 2015 (Pk1 och Pk2 viktiga för målarbete).
Workshop målarbete september 2015 (tillsammans med Dp
Scenario).
Workshop kriterier för bedömning mars 2016.
Lokal utvärderare (LU)
•
•
•
Vem är LU? En person med god kännedom
om den verksamhet som ska utvärderas.
Vad ska LU göra? Utvärdera aktörsinterna
mål och bidra med material för utvärdering av
de aktörsgemensamma målen.
Var finns LU? Hos den egna aktören eller
hos en annan aktör.
Lokal utvärderare (LU) forts.
•
•
När ska LU utses? Efter Pk1 men före september. På
Pk1 kommer mer stöd kring val av LU att ges.
Vilka delar behöver LU medverka i? Två
workshopar (en i september 2015 och en i mars 2016),
Pk2 i oktober 2015, utbildning i september 2016,
ÖVNINGEN! och resultatworkshop i februari 2017.
Systemutvärderare (SU)
•
•
Stöd i bedömning av måluppfyllnad
av de aktörsgemensamma
övningsmålen.
Utses av projektet.
Allmänhetsnätverket
•
•
•
Ett slumpmässigt urval ur
befolkningen som följer och bedömer
kommunikationen under övningen.
Värdefullt bidrag till utvärderingen.
Metoden användes för första gången i
SAMÖ Fokus 2014.
Expertnätverket
•
•
•
Experter med olika inriktningar
inom samhällsskydd och
beredskap.
Referensuppdrag,
kvalitetssäkring och bollplank
längs hela processen.
Ny metod i SAMÖ 2016.
SAMÖ Fokus 2018
•
•
•
•
Utgångspunkt i utvärderingsresultaten från
SAMÖ 2016.
Ett urval av förmågor som efter SAMÖ 2016
konstaterats vara i störst behov av utveckling.
Följa upp och beskriva om en
förmågeutveckling har skett jämfört med
SAMÖ 2016.
Ställer krav på utvärdering och
erfarenhetshantering i SAMÖ 2016.
