Utvärderingsforskningens utformning:

När du utför dina uppgifter måste du ta pauser med jämna mellanrum för att avgöra hur långt du har kommit och om du behöver göra några ändringar på vägen. Detta är mycket likt det som organisationer gör när de utför utvärderingsforskning.

Utvärderingsforskningsmetoden har blivit en av de viktigaste metoderna för organisationer när de strävar efter att skapa produkter, tjänster och processer som talar till målanvändarnas behov. I den här artikeln visar vi dig hur din organisation kan genomföra framgångsrik utvärderingsforskning med hjälp av Formplus.

Vad är utvärderingsforskning?

Också känd som programutvärdering är utvärderingsforskning en vanlig forskningsdesign som innebär att man utför en strukturerad bedömning av värdet av resurser som avsatts för ett projekt eller ett specifikt mål. Ofta används sociala forskningsmetoder för att samla in och analysera användbar information om organisatoriska processer och produkter.

Som en typ av tillämpad forskning är utvärderingsforskning vanligtvis förknippad med verkliga scenarier inom organisatoriska sammanhang. Detta innebär att forskaren måste utnyttja vanliga färdigheter på arbetsplatsen, inklusive interpersonella färdigheter och lagspel, för att komma fram till objektiva forskningsresultat som kommer att vara användbara för intressenterna.

Kännetecken för utvärderingsforskning

1. Forskningsmiljö: Utvärderingsforskning bedrivs i den verkliga världen, det vill säga inom ramen för en organisation.
2. Forskningsfokus: Utvärderingsforskning handlar i första hand om att mäta resultaten av en process snarare än själva processen.
3. Research Outcome: Utvärderingsforskning används för strategiskt beslutsfattande i organisationer.
4. Forskningsmål: Målet med programutvärdering är att fastställa om en process har gett det eller de önskade resultaten.
5. Denna typ av forskning skyddar intressenterna i organisationen.
6. Den utgör ofta ett mellanting mellan ren och tillämpad forskning.
7. Utvärderingsforskning är både detaljerad och kontinuerlig. Den uppmärksammar snarare performativa processer än beskrivningar.
8. Forskningsprocessen: Denna forskningsdesign använder kvalitativa och kvantitativa forskningsmetoder för att samla in relevanta data om en produkt eller handlingsbaserad strategi. Dessa metoder omfattar observation, tester och undersökningar.

Typer av utvärderingsforskning

The Encyclopedia of Evaluation (Mathison, 2004) behandlar fyrtiotvå olika utvärderingsmetoder och modeller som sträcker sig från ”appreciative inquiry” (uppskattande undersökning) till ”connoisseurship” (kännedom) och ”transformative evaluation” (transformativ utvärdering). Vanliga typer av utvärderingsforskning är bland annat följande:

• Formativ utvärdering

Formativ utvärdering eller baslinjeundersökning är en typ av utvärderingsforskning som innebär att man bedömer användarnas eller målmarknadens behov innan man påbörjar ett projekt. Formativ utvärdering är utgångspunkten för utvärderingsforskning eftersom den anger tonen för organisationens projekt och ger användbara insikter för andra typer av utvärdering.

• Medeltidsutvärdering

Medeltidsutvärdering innebär att man bedömer hur långt ett projekt har kommit och fastställer om det ligger i linje med de uppsatta målen. Halvtidsutvärderingar gör det möjligt för organisationen att avgöra om en förändring eller modifiering av genomförandestrategin är nödvändig, och det tjänar också till att följa upp projektet.

• Summativ utvärdering

Denna typ av utvärdering kallas också för slututvärdering av projektets avslutningsutvärdering och den genomförs omedelbart efter att ett projekt avslutats. Här undersöker forskaren programmets värde och resultat inom ramen för de förväntade resultaten.

Summativ utvärdering gör det möjligt för organisationen att mäta graden av framgång för ett projekt. Sådana resultat kan delas med intressenter, målmarknader och potentiella investerare.

• Resultatutvärdering

Resultatutvärdering är i första hand målgruppsorienterad eftersom den mäter effekterna av projektet, programmet eller produkten på användarna. Denna typ av utvärdering betraktar projektets resultat genom målgruppens perspektiv och mäter ofta förändringar som kunskapsförbättring, förvärv av färdigheter och ökad arbetseffektivitet.

• Appreciative Enquiry

Appreciative inquiry är en typ av utvärderingsforskning som uppmärksammar resultatproducerande metoder. Den bygger på övertygelsen att en organisation kommer att växa i den riktning som dess intressenter ägnar den främsta uppmärksamheten åt, så om all uppmärksamhet är inriktad på problem skulle det vara lätt att identifiera dem.

I genomförandet av uppskattande undersökningar identifierar forskningen de faktorer som är direkt ansvariga för de positiva resultat som förverkligats under projektets gång, analyserar orsakerna till dessa resultat och intensifierar utnyttjandet av dessa faktorer.

Metodik för utvärderingsforskning

Det finns fyra huvudsakliga metoder för utvärderingsforskning, nämligen; outputmätning, inputmätning, konsekvensbedömning och tjänstekvalitet

• Output/prestationsmätning

Outputmätning är en metod som används inom utvärderande forskning och som visar resultaten av en aktivitet som genomförs av en organisation. Med andra ord uppmärksammar prestationsmätning de resultat som uppnås med hjälp av de resurser som investeras i en viss verksamhet eller organisatorisk process.

Mer än att investera resurser i ett projekt måste organisationer kunna spåra i vilken utsträckning dessa resurser har gett resultat, och det är här prestationsmätning kommer in. Resultatmätning gör det möjligt för organisationer att uppmärksamma effektiviteten och effekten av en process snarare än bara själva processen.

Andra nyckelindikatorer för prestationsmätning är bland annat användartillfredsställelse, organisatorisk kapacitet, marknadspenetration och anläggningsutnyttjande. När organisationer genomför prestationsmätning måste de identifiera de parametrar som är relevanta för processen i fråga, deras bransch och målmarknader.

5 exempel på forskningsfrågor för resultatutvärdering

1. Hur kostnadseffektiv är det här projektet?
2. Hur stor är projektets totala räckvidd?
3. Hur bedömer du projektets marknadspenetration?
4. Hur tillgänglig är projektet?
5. Är projektet tidseffektivt?

• Inputmätning

I utvärderingsforskning innebär inputmätning en bedömning av hur många resurser som avsätts för ett projekt eller mål i en organisation. Detta är en av de vanligaste indikatorerna i utvärderingsforskning eftersom den gör det möjligt för organisationer att spåra sina investeringar.

Den vanligaste indikatorn för inputmätning är budgeten som gör det möjligt för organisationer att utvärdera och begränsa utgifterna för ett projekt. Det är också viktigt att mäta icke-monetära investeringar som humankapital; det vill säga det antal personer som behövs för ett framgångsrikt projektgenomförande och produktionskapital.

5 exempel på forskningsfrågor om inpututvärdering

1. Vad är budgeten för det här projektet?
2. Vad är tidslinjen för den här processen?
3. Hur många anställda har tilldelats det här projektet?
4. Behövs det nya maskiner för detta projekt?
5. Hur många tredje parter är medarbetare i detta projekt?

• Inflytande/resultatbedömning

I konsekvensbedömningen fokuserar utvärderingsforskaren på hur produkten eller projektet påverkar målmarknaderna, både direkt och indirekt. Utfallsbedömning är en viss utmaning eftersom det många gånger är svårt att mäta ett projekts realtidsvärde och fördelar för användarna.

I bedömningen av effekterna av en process måste utvärderingsforskaren uppmärksamma den förbättring som registreras av användarna som ett resultat av processen eller projektet i fråga. Därför är det meningsfullt att fokusera på kognitiva och affektiva förändringar, förväntningstillfredsställelse och liknande prestationer hos användarna.

5 exempel på forskningsfrågor för effektutvärdering

1. Hur har det här projektet påverkat dig?
2. Har denna process påverkat dig positivt eller negativt?
3. Vilken roll spelade detta projekt för att förbättra din inkomstförmåga?
4. På en skala från 1-10, hur entusiastisk är du över detta projekt?
5. Hur har detta projekt förbättrat din psykiska hälsa?

• Tjänstekvalitet

Tjänstekvalitet är den utvärderingsforskningsmetod som tar hänsyn till eventuella skillnader mellan målmarknadernas förväntningar och deras intryck av det genomförda projektet. Den uppmärksammar därför den övergripande bedömning av tjänstekvaliteten som görs av användarna.

Det är inte ovanligt att organisationer bygger upp målmarknadernas förväntningar när de påbörjar specifika projekt. Utvärdering av tjänstekvalitet gör det möjligt för dessa organisationer att spåra i vilken utsträckning den faktiska produkt- eller tjänsteleveransen uppfyller förväntningarna.

5 frågor om utvärdering av tjänstekvalitet

1. På en skala från 1-10, hur nöjd är du med produkten?
2. Hur hjälpsam var vår kundtjänstrepresentant?
3. Hur nöjd är du med tjänstens kvalitet?
4. Hur lång tid tog det att lösa problemet?
5. Hur sannolikt är det att du skulle rekommendera oss till ditt nätverk?

Användningsområden för utvärderingsforskning

• Utvärderingsforskning används av organisationer för att mäta verksamhetens effektivitet och identifiera områden som behöver förbättras. Resultat från utvärderingsforskning är nyckeln till projekt- och produktframsteg och är mycket inflytelserika när det gäller att hjälpa organisationer att förverkliga sina mål på ett effektivt sätt.
• De resultat man kommer fram till genom utvärderingsforskning tjänar som bevis för effekterna av det projekt som en organisation har påbörjat. Denna information kan presenteras för intressenter, kunder och kan också hjälpa din organisation att säkra investeringar för framtida projekt.
• Utvärderingsforskning hjälper organisationer att motivera sin användning av begränsade resurser och välja de bästa alternativen.
• Den är också användbar vid pragmatisk målformulering och förverkligande.
• Utvärderingsforskning ger detaljerade insikter i projekt som en organisation inleder. I huvudsak gör den det möjligt för alla intressenter att förstå flera dimensioner av en process och att fastställa styrkor och svagheter.
• Utvärderingsforskning spelar också en viktig roll när det gäller att hjälpa organisationer att förbättra sin övergripande praxis och tjänsteutövning. Denna forskningsdesign gör det möjligt för organisationer att väga befintliga processer genom feedback från intressenterna, och detta informerar om bättre beslutsfattande.
• Utvärderingsforskning är också avgörande för hållbar kapacitetsuppbyggnad. Den hjälper dig att analysera efterfrågemönster och avgöra om din organisation behöver mer medel, uppgradering eller förbättrad verksamhet.

Tekniker för datainsamling som används i utvärderingsforskning

För att samla in användbara data för utvärderingsforskning kombinerar forskaren ofta kvantitativa och kvalitativa forskningsmetoder. Kvalitativa forskningsmetoder gör det möjligt för forskaren att samla in information om immateriella värden, t.ex. marknadens tillfredsställelse och uppfattning.

Å andra sidan används kvantitativa metoder av utvärderingsforskaren för att bedöma numeriska mönster, dvs. kvantifierbara uppgifter. Dessa metoder hjälper dig att mäta effekter och resultat; även om de kanske inte tjänar till att förstå processens sammanhang.

Kvantitativa metoder för utvärderingsforskning

• Undersökningar

En undersökning är en kvantitativ metod som gör det möjligt att samla in information om ett projekt från en viss grupp människor. Undersökningar är till stor del kontextbaserade och begränsade till målgrupper som får en uppsättning strukturerade frågor i linje med den förutbestämda kontexten.

Undersökningar består vanligtvis av slutna frågor som gör det möjligt för den utvärderande forskaren att få en inblick i flera variabler, inklusive marknadstäckning och kundpreferenser. Undersökningar kan genomföras fysiskt med hjälp av pappersformulär eller online genom datainsamlingsplattformar som Formplus.

• Frågeböcker

Ett frågeformulär är ett vanligt kvantitativt forskningsinstrument som används i utvärderingsforskning. Typiskt sett är det en samling av olika typer av frågor eller uppmaningar som hjälper forskaren att få värdefull information från respondenterna.

• Polls

En poll är en vanlig metod för opinionsundersökningar som gör det möjligt att väga allmänhetens uppfattning om frågor som påverkar dem. Det bästa sättet att uppnå noggrannhet i opinionsundersökningar är att genomföra dem online med hjälp av plattformar som Formplus.

Polls är ofta strukturerade som Likert-frågor och de alternativ som tillhandahålls tar alltid hänsyn till neutralitet eller obeslutsamhet. Genom att genomföra en enkät kan utvärderingsforskaren förstå i vilken utsträckning produkten eller tjänsten uppfyller användarnas behov.

Kvalitativa metoder för utvärderingsforskning

• Ensamintervju

En intervju är en strukturerad konversation som involverar två deltagare; vanligtvis forskaren och användaren eller en medlem av målmarknaden. En-till-en-intervjuer kan genomföras fysiskt, via telefon och via videokonferensappar som Zoom och Google Meet.

• Fokusgrupper

En fokusgrupp är en forskningsmetod som innebär att man interagerar med ett begränsat antal personer på målmarknaden, som kan ge insikter om marknadens uppfattningar och nya produkter.

• Kvalitativ observation

Kvalitativ observation är en forskningsmetod som gör det möjligt för utvärderingsforskaren att samla in användbar information från målgruppen genom olika subjektiva tillvägagångssätt. Denna metod är mer omfattande än kvantitativ observation eftersom den handlar om ett mindre urval, och den använder också induktiv analys.

• Fallstudier

En fallstudie är en forskningsmetod som hjälper forskaren att få en bättre förståelse för ett ämne eller en process. Fallstudier innebär djupgående forskning om ett visst ämne för att förstå dess funktioner och framgångar.

Hur man använder Formplus Online Form Builder för utvärderingsenkät

• Logga in på Formplus

I Formplus Builder kan du enkelt skapa din utvärderingsenkät genom att dra och släppa önskade fält i ditt formulär. För att få tillgång till Formplus-byggaren måste du skapa ett konto på Formplus.

När du har gjort detta loggar du in på ditt konto och klickar på ”Create Form ” för att börja.

• Redigera formulärets titel

Klicka på fältet för att skriva in formulärets titel, till exempel ”Evaluation Research Survey”.

• Redigera formuläret

Klicka på redigeringsknappen för att redigera formuläret.

Lägg till fält: Dra och släpp önskade formulärfält i formuläret i kolumnen för inmatningar i Formplus builder. Det finns flera fältinmatningsalternativ för enkäter i Formplus-byggaren.

Redigera fält

Klicka på ”Spara”

Se formuläret.

• Formuläranpassning

Med formuläranpassningsalternativen i formulärbyggaren kan du enkelt ändra utseendet på ditt formulär och göra det mer unikt och personligt. Med Formplus kan du ändra ditt formulärtema, lägga till bakgrundsbilder och till och med ändra teckensnittet enligt dina behov.

• Flera delningsalternativ

Formplus erbjuder flera delningsalternativ för formuläret som gör att du enkelt kan dela din utvärderingsenkät med enkätrespondenterna. Du kan använda de direkta delningsknapparna för sociala medier för att dela din formulärlänk till din organisations sidor i sociala medier.

Du kan också skicka ut ditt undersökningsformulär som e-postinbjudningar till dina undersökningspersoner. Om du vill kan du dela formulärets QR-kod eller bädda in den på din organisations webbplats för enkel åtkomst.

Slutsats

Den utvärderande forskningen gör det möjligt för organisationer att fastställa effektiviteten av sin verksamhet i olika faser. Denna typ av forskning kan utföras med hjälp av kvalitativa och kvantitativa datainsamlingsmetoder, inklusive fokusgrupper, observation, telefon- och enskilda intervjuer samt enkäter.

Onlineundersökningar som skapas och administreras via datainsamlingsplattformar som Formplus gör det lättare för dig att samla in och bearbeta information under utvärderingsforskning. Med Formplus flera alternativ för delning av formulär är det ännu enklare för dig att samla in användbar data från målmarknader.