Design evaluačního výzkumu:

Při plnění úkolů budete muset dělat občasné přestávky, abyste zjistili, jakého pokroku jste dosáhli a zda je třeba v průběhu práce provést nějaké změny. To je velmi podobné tomu, co dělají organizace, když provádějí evaluační výzkum.

Metodika evaluačního výzkumu se stala jedním z nejdůležitějších přístupů pro organizace, které se snaží vytvářet produkty, služby a procesy, jež odpovídají potřebám cílových uživatelů. V tomto článku vám ukážeme, jak může vaše organizace provádět úspěšný evaluační výzkum pomocí aplikace Formplus.

Co je evaluační výzkum?

Evaluační výzkum, známý také jako hodnocení programu, je běžný výzkumný design, který zahrnuje provedení strukturovaného posouzení hodnoty zdrojů věnovaných na projekt nebo konkrétní cíl. Často využívá metody sociálního výzkumu ke shromažďování a analýze užitečných informací o organizačních procesech a produktech.

Jako typ aplikovaného výzkumu je evaluační výzkum obvykle spojen s reálnými scénáři v rámci organizačního kontextu. To znamená, že výzkumník bude muset využít běžné pracovní dovednosti včetně interpersonálních dovedností a týmové hry, aby dospěl k objektivním výsledkům výzkumu, které budou užitečné pro zúčastněné strany.

Charakteristika evaluačního výzkumu

1. Výzkumné prostředí: Evaluační výzkum se provádí v reálném světě; to znamená v kontextu organizace.
2. Zaměření výzkumu: Evaluační výzkum se zabývá především měřením výsledků procesu, nikoliv procesem samotným.
3. Výsledek výzkumu: Evaluační výzkum se využívá pro strategické rozhodování v organizacích.
4. Cíl výzkumu: Cílem hodnocení programu je zjistit, zda proces přinesl požadované výsledky.
5. Tento typ výzkumu chrání zájmy zainteresovaných stran v organizaci.
6. Často představuje střední cestu mezi čistým a aplikovaným výzkumem.
7. Vyhodnocovací výzkum je podrobný i průběžný. Věnuje pozornost spíše performativním procesům než popisu.
8. Výzkumný proces: Tento výzkumný design využívá kvalitativní a kvantitativní výzkumné metody ke shromáždění relevantních údajů o produktu nebo strategii založené na činnosti. Mezi tyto metody patří pozorování, testy a průzkumy.

Typy evaluačního výzkumu

Encyklopedie evaluace (Mathison, 2004) pojednává o čtyřiceti dvou různých evaluačních přístupech a modelech od „oceňujícího šetření“ přes „znalectví“ až po „transformativní evaluaci“. Mezi běžné typy evaluačního výzkumu patří např:

• Formativní hodnocení

Formativní hodnocení neboli základní průzkum je typ evaluačního výzkumu, který zahrnuje posouzení potřeb uživatelů nebo cílového trhu před zahájením projektu. Formativní hodnocení je výchozím bodem evaluačního výzkumu, protože udává tón projektu organizace a poskytuje užitečné poznatky pro další typy hodnocení.

• Střednědobé hodnocení

Střednědobé hodnocení zahrnuje posouzení, jak daleko projekt dospěl, a zjištění, zda je v souladu se stanovenými cíli a úkoly. Střednědobé hodnocení umožňuje organizaci určit, zda je nutná změna nebo úprava strategie realizace, a slouží také ke sledování projektu.

• Sumativní hodnocení

Tento typ hodnocení je také známý jako hodnocení na konci období hodnocení ukončení projektu a provádí se bezprostředně po ukončení projektu. Výzkumník zde zkoumá hodnotu a výstupy programu v kontextu předpokládaných výsledků.

Sumativní hodnocení umožňuje organizaci změřit míru úspěšnosti projektu. Takové výsledky lze sdělit zúčastněným stranám, cílovým trhům a potenciálním investorům.

• Vyhodnocení výsledků

Vyhodnocení výsledků je zaměřeno především na cílovou skupinu, protože měří účinky projektu, programu nebo produktu na uživatele. Tento typ hodnocení nahlíží na výsledky projektu optikou cílové skupiny a často měří změny, jako je zlepšení znalostí, získání dovedností a zvýšení efektivity práce.

• Appreciativní šetření

Appreciativní šetření je typ evaluačního výzkumu, který věnuje pozornost přístupům vedoucím k výsledkům. Vychází z přesvědčení, že organizace se bude rozvíjet tím směrem, kterému její zainteresované strany věnují primární pozornost, takže pokud by se veškerá pozornost soustředila na problémy, jejich identifikace by byla snadná.

Při provádění oceňujícího výzkumu se identifikují faktory přímo odpovědné za pozitivní výsledky realizované v průběhu projektu, analyzují se příčiny těchto výsledků a zintenzivňuje se využití těchto faktorů.

Metodologie hodnotícího výzkumu

Existují čtyři hlavní metody hodnotícího výzkumu, a to: měření výstupů, měření vstupů, hodnocení dopadů a kvality služeb

• Měření výstupů/výkonů

Měření výstupů je metoda používaná v hodnotícím výzkumu, která ukazuje výsledky činnosti prováděné organizací. Jinými slovy, měření výkonu věnuje pozornost výsledkům, kterých bylo dosaženo díky zdrojům investovaným do určité činnosti nebo organizačního procesu.

Více než investovat zdroje do projektu musí být organizace schopny sledovat, do jaké míry tyto zdroje přinesly výsledky, a právě zde přichází na řadu měření výkonnosti. Měření výstupů umožňuje organizacím věnovat pozornost efektivitě a dopadu procesu, nikoli pouze procesu samotnému.

Dalšími klíčovými ukazateli měření výkonnosti jsou spokojenost uživatelů, kapacita organizace, pronikání na trh a využití zařízení. Při provádění měření výkonnosti musí organizace určit parametry, které jsou relevantní pro daný proces, jejich odvětví a cílové trhy.

5 Příklady výzkumných otázek pro hodnocení výkonnosti

1. Jaká je nákladová efektivita tohoto projektu?
2. Jaký je celkový dosah tohoto projektu?
3. Jak hodnotíte pronikání tohoto projektu na trh?
4. Jak je projekt dostupný?
5. Je tento projekt časově efektivní?

• Měření vstupů

V evaluačním výzkumu měření vstupů zahrnuje posouzení počtu zdrojů věnovaných na projekt nebo cíl v jakékoli organizaci. Jedná se o jeden z nejběžnějších ukazatelů v evaluačním výzkumu, protože umožňuje organizacím sledovat jejich investice.

Nejběžnějším ukazatelem měření vstupů je rozpočet, který organizacím umožňuje vyhodnotit a omezit výdaje na projekt. Důležité je také měření nepeněžních investic, jako je lidský kapitál; to je počet osob potřebných pro úspěšnou realizaci projektu a výrobní kapitál.

5 Příklady výzkumných otázek pro hodnocení vstupů

1. Jaký je rozpočet tohoto projektu?
2. Jaký je časový harmonogram tohoto procesu?
3. Kolik zaměstnanců bylo přiděleno na tento projekt?
4. Potřebujeme pro tento projekt zakoupit nové stroje?
5. Kolik třetích stran spolupracuje na tomto projektu?

• Posouzení dopadů/výsledků

Při posuzování dopadů se hodnotitel zaměřuje na to, jak produkt nebo projekt ovlivňuje cílové trhy, a to přímo i nepřímo. Hodnocení výsledků je poněkud náročnější, protože mnohdy je obtížné změřit hodnotu a přínosy projektu pro uživatele v reálném čase.

Při posuzování dopadu procesu musí výzkumník provádějící hodnocení věnovat pozornost zlepšení, které uživatelé zaznamenali v důsledku daného procesu nebo projektu. Proto má smysl zaměřit se na kognitivní a afektivní změny, uspokojení očekávání a podobné úspěchy uživatelů.

5 příkladů výzkumných otázek pro hodnocení dopadu

1. Jak vás tento projekt ovlivnil?
2. Měl na vás tento proces pozitivní nebo negativní vliv
3. Jakou roli hrál tento projekt ve zlepšení vaší výdělečné schopnosti?
4. Na stupnici od 1 do 10, jak jste nadšený/á z tohoto projektu?
5. Jak tento projekt zlepšil Vaše duševní zdraví?

• Kvalita služeb

Kvalita služeb je výzkumná metoda hodnocení, která zohledňuje případné rozdíly mezi očekáváním cílových trhů a jejich dojmem z realizovaného projektu. Proto věnuje pozornost celkovému hodnocení kvality služeb prováděnému uživateli.

Není neobvyklé, že organizace budují očekávání cílových trhů, když se pouštějí do konkrétních projektů. Hodnocení kvality služeb umožňuje těmto organizacím sledovat, do jaké míry skutečné dodání produktu nebo služby splňuje očekávání.

5 otázek k hodnocení kvality služeb

1. Na stupnici od 1 do 10, jak jste spokojeni s produktem?
2. Jak ochotný byl zástupce zákaznického servisu?
3. Jak jste spokojeni s kvalitou služeb?
4. Jak dlouho trvalo vyřešení daného problému?
5. Jaká je pravděpodobnost, že nás doporučíte svým známým?

Využití evaluačního výzkumu

• Evaluační výzkum používají organizace k měření efektivity činností a identifikaci oblastí, které je třeba zlepšit. Zjištění z evaluačního výzkumu jsou klíčová pro pokrok v projektech a produktech a mají velký vliv na efektivní realizaci cílů organizací.
• Zjištění získaná z evaluačního výzkumu slouží jako důkaz dopadu projektu, do kterého se organizace pustila. Tyto informace lze prezentovat zainteresovaným stranám, zákazníkům a mohou také pomoci organizaci zajistit investice do budoucích projektů.
• Evaluační výzkum pomáhá organizacím zdůvodnit využití omezených zdrojů a vybrat nejlepší alternativy.
• Je také užitečný při pragmatickém stanovování a realizaci cílů.
• Výzkum hodnocení poskytuje podrobný pohled na projekty, do kterých se organizace pouští. V podstatě umožňuje všem zúčastněným stranám pochopit více dimenzí procesu a určit silné a slabé stránky.
• Evaluační výzkum také hraje významnou roli při pomoci organizacím zlepšit jejich celkovou praxi a poskytování služeb. Tento výzkumný design umožňuje organizacím zvážit stávající procesy prostřednictvím zpětné vazby poskytnuté zúčastněnými stranami, a to slouží jako informace pro lepší rozhodování.
• Evaluační výzkum má také zásadní význam pro udržitelné budování kapacit. Pomáhá analyzovat vzorce poptávky a určit, zda organizace potřebuje více finančních prostředků, zvýšení kvalifikace nebo zlepšení provozu.

Techniky sběru dat používané v evaluačním výzkumu

Při sběru užitečných dat pro evaluační výzkum výzkumník často kombinuje kvantitativní a kvalitativní metody výzkumu. Kvalitativní metody výzkumu umožňují výzkumníkovi shromažďovat informace týkající se nehmotných hodnot, jako je spokojenost a vnímání trhu.

Kvantitativní metody naproti tomu používá výzkumník provádějící hodnocení k posouzení číselných vzorců, tedy kvantifikovatelných údajů. Tyto metody pomáhají měřit dopad a výsledky; nemusí však sloužit k pochopení kontextu procesu.

Kvantitativní metody evaluačního výzkumu

• Průzkumy

Průzkum je kvantitativní metoda, která vám umožňuje získat informace o projektu od určité skupiny lidí. Průzkumy jsou do značné míry založeny na kontextu a omezují se na cílové skupiny, kterým je položen soubor strukturovaných otázek v souladu s předem stanoveným kontextem.

Průzkumy se obvykle skládají z uzavřených otázek, které umožňují hodnotícímu výzkumníkovi získat přehled o několika proměnných včetně pokrytí trhu a preferencí zákazníků. Průzkumy lze provádět fyzicky pomocí papírových formulářů nebo online prostřednictvím platforem pro sběr dat, jako je Formplus.

• Dotazníky

Dotazník je běžný kvantitativní výzkumný nástroj nasazovaný v evaluačním výzkumu. Obvykle se jedná o souhrn různých typů otázek nebo podnětů, které pomáhají výzkumníkovi získat od respondentů cenné informace.

• Průzkumy veřejného mínění

Průzkum veřejného mínění je běžná metoda zjišťování veřejného mínění, která umožňuje zvážit mínění veřejnosti o otázkách, které se jí týkají. Nejlepší způsob, jak dosáhnout přesnosti průzkumů veřejného mínění, je provádět je online pomocí platforem, jako je Formplus.

Průzkumy jsou často strukturovány jako Likertovy otázky a poskytnuté možnosti vždy zohledňují neutralitu nebo nerozhodnost. Provedení ankety umožňuje výzkumníkovi provádějícímu hodnocení pochopit, do jaké míry produkt nebo služba uspokojuje potřeby uživatelů.

Kvalitativní metody evaluačního výzkumu

• Rozhovor jeden na jednoho

Rozhovor je strukturovaný rozhovor zahrnující dva účastníky; obvykle výzkumníka a uživatele nebo člena cílového trhu. Rozhovory jeden na jednoho mohou být vedeny fyzicky, telefonicky a prostřednictvím videokonferenčních aplikací, jako jsou Zoom a Google Meet.

• Fokusní skupiny

Fokusní skupina je výzkumná metoda, která zahrnuje interakci s omezeným počtem osob z cílového trhu, které mohou poskytnout informace o vnímání trhu a nových produktů.

• Kvalitativní pozorování

Kvalitativní pozorování je výzkumná metoda, která umožňuje hodnotícímu výzkumníkovi získat užitečné informace od cílové skupiny prostřednictvím různých subjektivních přístupů. Tato metoda je rozsáhlejší než kvantitativní pozorování, protože pracuje s menším vzorkem a využívá také induktivní analýzu.

• Případové studie

Případová studie je výzkumná metoda, která pomáhá výzkumníkovi lépe porozumět předmětu nebo procesu. Případové studie zahrnují hloubkový výzkum daného předmětu s cílem pochopit jeho funkčnost a úspěchy.

Jak na Formplus Online Form Builder pro evaluační průzkum

• Přihlášení do Formplus

V Formplus builderu můžete snadno vytvořit evaluační průzkum přetažením preferovaných polí do formuláře. Pro přístup k Formplus builderu si musíte vytvořit účet na Formplus.

Jakmile tak učiníte, přihlaste se ke svému účtu a začněte kliknutím na „Vytvořit formulář „.

• Upravit název formuláře

Klikněte na uvedené pole a zadejte název formuláře, například „Evaluační výzkumný průzkum“.

• Upravit formulář

Kliknutím na tlačítko upravit upravíte formulář.

Přidat pole: Přetáhněte preferovaná pole formuláře do formuláře ve sloupci Formplus builder inputs. V nástroji Formplus builder je několik možností zadávání polí pro dotazníky.

Upravit pole

Klikněte na „Uložit“

Náhled formuláře.

• Přizpůsobení formuláře

Pomocí možností přizpůsobení formuláře v sestavovači formulářů můžete snadno změnit vzhled svého formuláře a učinit jej jedinečnějším a osobnějším. Formplus umožňuje změnit motiv formuláře, přidat obrázky na pozadí a dokonce změnit písmo podle vašich potřeb.

• Více možností sdílení

Formplus nabízí více možností sdílení formuláře, které vám umožní snadno sdílet váš hodnotící průzkum s respondenty průzkumu. Pomocí tlačítek pro přímé sdílení na sociálních sítích můžete sdílet odkaz na formulář na stránkách vaší organizace na sociálních sítích.

Formulář průzkumu můžete rozeslat také jako e-mailovou pozvánku subjektům výzkumu. Pokud chcete, můžete sdílet QR kód vašeho formuláře nebo jej vložit na webové stránky vaší organizace pro snadný přístup.

Závěr

Provádění evaluačního výzkumu umožňuje organizacím zjišťovat efektivitu svých aktivit v různých fázích. Tento typ výzkumu lze provádět pomocí kvalitativních a kvantitativních metod sběru dat, včetně ohniskových skupin, pozorování, telefonických a individuálních rozhovorů a průzkumů.

On-line průzkumy vytvořené a zadávané prostřednictvím platforem pro sběr dat, jako je Formplus, vám usnadní sběr a zpracování informací během evaluačního výzkumu. Díky vícenásobným možnostem sdílení formulářů Formplus je pro vás shromažďování užitečných údajů z cílových trhů ještě snazší.