Utvärderingar
Metamatrix utgångspunkt är att varje utvärderingssituation är unik. Därför arbetar vi situationsanpassat och inleder gärna med att tydliggöra vilka som är intressenter och vilka nyttor som förväntas av uppdraget. I dialog med kunden tittar vi på förväntningarna och målen för projektet, och vid behov så stödjer vi även arbetet med att förtydliga målen. Valet av metod för utvärderingen måste avgöras från fall till fall i diskussion med uppdragsgivaren.
De centrala frågorna är:
- Vad är syftet med utvärderingen? Är det att lära för framtiden eller att kontrollera resultaten?
- Vem kommer att använda sig av utvärderingsresultatet?
- Vad finns det för empiriska data eller vilken datainsamlingsstrategi och/eller vilka resurser är aktuella?
Formativa utvärderingar
I formativa utvärderingar (ibland kallat följeforskning) så följer vi normalt ett projekt under hela dess livslängd, och föreslår löpande förbättringar eller utveckling av nya typer av insatser. En formativ utvärdering kan leda till en kontinuerlig utveckling av organisationen och projektet och kunden får en större effekt av projektet och dess insatser.
Summativa utvärderingar
I en summativ utvärdering (slututvärdering) görs en systematisk retrospektiv värdering av processer, prestationer och utfall. Det innebär att vi i efterhand tittar på hur väl ett projekt uppfyllde sina mål, vad man i efterhand kan lära av projektets genomförande eller de processer som initierades under projektet eller insatsen.
Effektutvärderingar
Effektutvärderingar genomförs i tre faser som följer det projekt som ska utvärderas (”före, under och efter”). Tanken är att inte bara studera måluppfyllelsen med en insats eller projekt, utan samtliga effekter (både positiva och negativa, förväntade och oväntade effekter) som uppstår under projektets gång eller efteråt.
Triangulering
För att öka kvaliteten och tillförlitligheten i resultaten och för att bättre kunna fånga olika aspekter i komplexa situationer, använder vi ofta flera olika typer av metoder inom ramen för samma undersökning. Detta kallas vanligen för triangulering. Metodtriangulering syftar till att genom olika metoder undersöka en fråga, för att täcka in olika infallsvinklar och perspektiv. Datatriangulering innebär att man söker olika typer av data eller information, såväl kvantitativa som kvalitativa, som kompletterar varandra och ger en mer fullödig bild. Undersökartriangulering innebär att olika personer genomför olika delar av undersökningen för att minska effekten av undersökarens egna åsikter.
Datainsamling
Vi har stor vana av att hantera och analysera stora mängder data, och har därmed mycket kompetens kring frågor relaterade till validitet och reliabilitet avseende insamlad data och statistik. Vi har vana att arbeta både med kvantitativa och kvalitativa metoder.
Kvantitativa metoder vi arbetar med är t.ex.:
- Webbenkäter
- Pappersenkäter
- Statistiska bearbetningar av data
Kvalitativa metoder vi arbetar med är t.ex.:
- Intervjuer
- Fokusgrupper
- Workshops
- Webbaserade loggböcker
