Projektowanie badań ewaluacyjnych: Examples, Methods & Types

As you engage in tasks, you will need to take intermittent breaks to determine how much progress has been made and if any changes need to be effected along the way. Jest to bardzo podobne do tego, co robią organizacje, kiedy przeprowadzają badania ewaluacyjne.

Metodologia badań ewaluacyjnych stała się jednym z najważniejszych podejść dla organizacji, które starają się tworzyć produkty, usługi i procesy, które przemawiają do potrzeb użytkowników docelowych. W tym artykule pokażemy, jak Twoja organizacja może przeprowadzić udane badania ewaluacyjne przy użyciu Formplus.

Co to są badania ewaluacyjne?

Badania ewaluacyjne, znane również jako ewaluacja programu, są powszechnym projektem badawczym, który obejmuje przeprowadzenie ustrukturyzowanej oceny wartości zasobów zaangażowanych w projekt lub określony cel. Często przyjmuje metody badań społecznych w celu zebrania i przeanalizowania przydatnych informacji na temat procesów i produktów organizacyjnych.

Jako rodzaj badań stosowanych, badania ewaluacyjne zazwyczaj związane są z rzeczywistymi scenariuszami w kontekstach organizacyjnych. Oznacza to, że badacz będzie musiał wykorzystać wspólne umiejętności pracy, w tym umiejętności interpersonalne i gry zespołowej, aby dotrzeć do obiektywnych wyników badań, które będą przydatne dla zainteresowanych stron.

Charakterystyka badań ewaluacyjnych

1. Środowisko badawcze: Badania ewaluacyjne prowadzone są w świecie rzeczywistym; to znaczy w kontekście organizacji.
2. Ukierunkowanie badań: Badania ewaluacyjne są przede wszystkim dotyczy pomiaru wyników procesu, a nie samego procesu.
3. Wyniki badań: Badania ewaluacyjne są wykorzystywane do podejmowania strategicznych decyzji w organizacjach.
4. Cel badania: Celem oceny programu jest ustalenie, czy proces przyniósł pożądany wynik (s).
5. Ten rodzaj badań chroni interesy interesariuszy w organizacji.
6. Często stanowi środek między badaniami czystymi a stosowanymi.
7. Badania ewaluacyjne są zarówno szczegółowe, jak i ciągłe. Zwracają uwagę raczej na procesy performatywne niż na opisy.
8. Proces badawczy: Ten projekt badawczy wykorzystuje jakościowe i ilościowe metody badawcze w celu zebrania odpowiednich danych na temat produktu lub strategii opartej na działaniu. Metody te obejmują obserwację, testy i ankiety.

Typy badań ewaluacyjnych

Encyklopedia ewaluacji (Mathison, 2004) traktuje o czterdziestu dwóch różnych podejściach do ewaluacji i modelach, począwszy od „doceniających dociekań” do „koneserstwa” do „ewaluacji transformacyjnej”. Typowe rodzaje badań ewaluacyjnych obejmują następujące elementy:

• Ewaluacja formatywna

Ewaluacja formatywna lub badanie bazowe to rodzaj badań ewaluacyjnych, które obejmują ocenę potrzeb użytkowników lub rynku docelowego przed przystąpieniem do realizacji projektu. Ewaluacja formatywna jest punktem wyjścia badań ewaluacyjnych, ponieważ nadaje ton projektowi organizacji i dostarcza użytecznych spostrzeżeń dla innych rodzajów ewaluacji.

• Ocena śródokresowa

Ocena śródokresowa pociąga za sobą ocenę, jak daleko zaszedł projekt i określenie, czy jest on zgodny z ustalonymi celami i zadaniami. Ocena średniookresowa pozwala organizacji określić, czy konieczna jest zmiana lub modyfikacja strategii wdrażania, a także służy do śledzenia projektu.

• Ewaluacja sumatywna

Ten rodzaj ewaluacji jest również znany jako ewaluacja końcowa ewaluacji zakończenia projektu i jest przeprowadzany bezpośrednio po zakończeniu projektu. W tym przypadku badacz analizuje wartość i rezultaty programu w kontekście przewidywanych rezultatów.

Ewaluacja sumatywna pozwala organizacji zmierzyć stopień powodzenia projektu. Takimi wynikami można się podzielić z interesariuszami, rynkami docelowymi i potencjalnymi inwestorami.

• Ocena wyniku

Ocena wyniku jest przede wszystkim zorientowana na odbiorców docelowych, ponieważ mierzy efekty projektu, programu lub produktu na użytkowników. Ten rodzaj oceny postrzega wyniki projektu przez pryzmat grupy docelowej i często mierzy zmiany, takie jak poprawa wiedzy, nabycie umiejętności i zwiększona wydajność pracy.

• Appreciative Enquiry

Appreciative inquiry jest rodzajem badań ewaluacyjnych, które zwracają uwagę na podejścia przynoszące rezultaty. Opiera się na przekonaniu, że organizacja będzie się rozwijać w dowolnym kierunku, na który jej interesariusze zwracają główną uwagę, tak więc jeśli cała uwaga jest skupiona na problemach, ich identyfikacja będzie łatwa.

W przeprowadzaniu appreciative inquiry, badanie identyfikuje czynniki bezpośrednio odpowiedzialne za pozytywne wyniki osiągnięte w trakcie realizacji projektu, analizuje przyczyny tych wyników i intensyfikuje wykorzystanie tych czynników.

Metodologia badań ewaluacyjnych

Istnieją cztery główne metody badań ewaluacyjnych, a mianowicie; pomiar produktu, pomiar wkładu, ocena wpływu i jakości usług

• Pomiar produktu/wyników

Pomiar produktu jest metodą stosowaną w badaniach ewaluacyjnych, która pokazuje wyniki działania podejmowanego przez organizację. Innymi słowy, pomiar wyników zwraca uwagę na rezultaty osiągnięte dzięki zasobom zainwestowanym w określone działanie lub proces organizacyjny.

Więcej niż inwestowanie zasobów w projekt, organizacje muszą być w stanie śledzić stopień, w jakim te zasoby przyniosły rezultaty, i tu właśnie pojawia się pomiar wyników. Pomiar wyników pozwala organizacjom zwracać uwagę na skuteczność i wpływ procesu, a nie tylko na sam proces.

Inne kluczowe wskaźniki pomiaru wydajności obejmują zadowolenie użytkowników, możliwości organizacyjne, penetrację rynku i wykorzystanie obiektów. Podczas przeprowadzania pomiaru wydajności, organizacje muszą zidentyfikować parametry, które są istotne dla danego procesu, branży i rynków docelowych.

5 pytań badawczych dotyczących oceny wydajności Przykłady

1. Jaka jest efektywność kosztowa tego projektu?
2. Jaki jest ogólny zasięg tego projektu?
3. Jak oceniłbyś penetrację rynku tego projektu?
4. Jak przystępny jest ten projekt?
5. Czy ten projekt jest efektywny czasowo?

• Pomiar nakładów

W badaniach ewaluacyjnych pomiar nakładów wiąże się z oceną liczby zasobów zaangażowanych w projekt lub cel w dowolnej organizacji. Jest to jeden z najbardziej powszechnych wskaźników w badaniach ewaluacyjnych, ponieważ pozwala organizacjom śledzić ich inwestycje.

Najczęstszym wskaźnikiem pomiaru nakładów jest budżet, który pozwala organizacjom na ocenę i ograniczenie wydatków na projekt. Ważne jest również mierzenie inwestycji niepieniężnych, takich jak kapitał ludzki, czyli liczba osób potrzebnych do pomyślnej realizacji projektu oraz kapitał produkcyjny.

5 Pytań Badawczych Oceny Wkładu Przykłady

1. Jaki jest budżet tego projektu?
2. Jaka jest oś czasu tego procesu?
3. Ilu pracowników zostało przydzielonych do tego projektu?
4. Czy musimy zakupić nowe maszyny do tego projektu?
5. Ile osób trzecich jest współpracownikami w tym projekcie?

• Ocena wpływu/wyników

W ocenie wpływu badacz koncentruje się na tym, jak produkt lub projekt wpływa na rynki docelowe, zarówno bezpośrednio, jak i pośrednio. Ocena wyników stanowi pewne wyzwanie, ponieważ często trudno jest zmierzyć wartość w czasie rzeczywistym i korzyści płynące z projektu dla użytkowników.

W ocenie wpływu procesu, badacz oceniający musi zwrócić uwagę na poprawę odnotowaną przez użytkowników w wyniku danego procesu lub projektu. Stąd zasadne jest skupienie się na zmianach poznawczych i afektywnych, spełnieniu oczekiwań i podobnych osiągnięciach użytkowników.

5 pytań badawczych dotyczących oceny wpływu Przykłady

1. Jak ten projekt wpłynął na Ciebie?
2. Czy ten proces wpłynął na Ciebie pozytywnie czy negatywnie?
3. Jaką rolę odegrał ten projekt w poprawie Twoich możliwości zarobkowych?
4. W skali od 1 do 10, jak bardzo jest Pan/Pani podekscytowany/a tym projektem?
5. Jak ten projekt wpłynął na poprawę Pana/Pani zdrowia psychicznego?

• Jakość usług

Jakość usług jest metodą badawczą ewaluacji, która uwzględnia wszelkie różnice pomiędzy oczekiwaniami rynków docelowych a ich wrażeniami z podjętego projektu. Zwraca więc uwagę na całościową ocenę jakości usług dokonywaną przez użytkowników.

Nierzadko zdarza się, że organizacje budują oczekiwania rynków docelowych w trakcie realizacji konkretnych projektów. Ocena jakości usług pozwala tym organizacjom śledzić stopień, w jakim rzeczywiste dostarczenie produktu lub usługi spełnia oczekiwania.

5 pytań dotyczących oceny jakości usług

1. W skali od 1 do 10, jak bardzo jest Pan(i) zadowolony(a) z produktu?
2. Jak bardzo pomocny był nasz przedstawiciel działu obsługi klienta?
3. Jak bardzo jest Pan(i) zadowolony(a) z jakości usług?
4. Jak długo trwało rozwiązanie problemu?
5. Jak prawdopodobne jest, że poleci nas Pan(i) swojej sieci?

Zasady badań ewaluacyjnych

• Badania ewaluacyjne są wykorzystywane przez organizacje do pomiaru skuteczności działań i identyfikacji obszarów wymagających poprawy. Wnioski z badań ewaluacyjnych są kluczowe dla postępu projektów i produktów oraz mają duży wpływ na pomoc organizacjom w skutecznym realizowaniu ich celów.
• Wyniki uzyskane z badań ewaluacyjnych służą jako dowód wpływu projektu podjętego przez organizację. Informacje te mogą być przedstawione interesariuszom, klientom, a także mogą pomóc organizacji w zabezpieczeniu inwestycji dla przyszłych projektów.
• Badania ewaluacyjne pomagają organizacjom uzasadnić wykorzystanie ograniczonych zasobów i wybrać najlepsze alternatywy.
• Jest to również przydatne w pragmatycznym ustalaniu i realizacji celów.
• Badania ewaluacyjne zapewniają szczegółowy wgląd w projekty podejmowane przez organizację. Zasadniczo, pozwala wszystkim zainteresowanym zrozumieć wiele wymiarów procesu oraz określić mocne i słabe strony.
• Badania ewaluacyjne odgrywają również ważną rolę w pomaganiu organizacjom w ulepszaniu ich ogólnej praktyki i świadczonych usług. Ten projekt badawczy pozwala organizacjom ważyć istniejące procesy poprzez informacje zwrotne dostarczone przez interesariuszy, a to informuje o lepszym podejmowaniu decyzji.
• Badania ewaluacyjne są również instrumentalne dla zrównoważonego budowania potencjału. Pomagają przeanalizować wzorce popytu i określić, czy organizacja wymaga większych funduszy, podniesienia kwalifikacji lub usprawnienia działań.

Techniki zbierania danych stosowane w badaniach ewaluacyjnych

W gromadzeniu użytecznych danych do badań ewaluacyjnych, badacz często łączy ilościowe i jakościowe metody badawcze. Jakościowe metody badawcze pozwalają badaczowi zebrać informacje odnoszące się do wartości niematerialnych, takich jak satysfakcja i percepcja rynku.

Z drugiej strony, metody ilościowe są wykorzystywane przez badacza ewaluacyjnego do oceny wzorców liczbowych, czyli danych kwantyfikowalnych. Metody te pomagają mierzyć wpływ i wyniki; choć mogą nie służyć do zrozumienia kontekstu procesu.

Metody ilościowe w badaniach ewaluacyjnych

• Sondaże

Sonda jest metodą ilościową, która pozwala zebrać informacje o projekcie od określonej grupy osób. Badania są w dużej mierze oparte na kontekście i ograniczone do grup docelowych, którym zadaje się zestaw ustrukturyzowanych pytań zgodnych z wcześniej określonym kontekstem.

Badania ankietowe zazwyczaj składają się z pytań zamkniętych, które pozwalają badaczowi oceniającemu uzyskać wgląd w kilka zmiennych, w tym zasięg rynku i preferencje klientów. Ankiety mogą być przeprowadzane fizycznie przy użyciu formularzy papierowych lub online za pośrednictwem platform gromadzenia danych, takich jak Formplus.

• Kwestionariusze

Kwestionariusz jest powszechnym ilościowym instrumentem badawczym stosowanym w badaniach ewaluacyjnych. Zazwyczaj jest to agregat różnego rodzaju pytań lub podpowiedzi, które pomagają badaczowi uzyskać wartościowe informacje od respondentów.

• Badania opinii publicznej

Badanie opinii publicznej jest powszechną metodą badania opinii publicznej, która pozwala zważyć percepcję społeczeństwa na temat kwestii, które ich dotyczą. Najlepszym sposobem na osiągnięcie dokładności w sondażach jest przeprowadzanie ich online za pomocą platform takich jak Formplus.

Sondaże są często skonstruowane jako pytania Likerta, a podane opcje zawsze uwzględniają neutralność lub niezdecydowanie. Przeprowadzenie ankiety pozwala badaczowi ewaluacyjnemu zrozumieć, w jakim stopniu produkt lub usługa zaspokaja potrzeby użytkowników.

Metody ilościowe w badaniach ewaluacyjnych

• Wywiad jeden na jeden

Wywiad to ustrukturyzowana rozmowa z udziałem dwóch uczestników; zazwyczaj badacza i użytkownika lub członka rynku docelowego. Wywiady jeden na jeden mogą być prowadzone fizycznie, przez telefon oraz za pomocą aplikacji do wideokonferencji, takich jak Zoom czy Google Meet.

• Grupy fokusowe

Grupa fokusowa to metoda badawcza, która obejmuje interakcję z ograniczoną liczbą osób z rynku docelowego, które mogą dostarczyć spostrzeżeń na temat postrzegania rynku i nowych produktów.

• Obserwacja jakościowa

Obserwacja jakościowa jest metodą badawczą, która pozwala badaczowi ewaluacyjnemu na zebranie użytecznych informacji od grupy docelowej poprzez różne subiektywne podejścia. Metoda ta jest bardziej rozbudowana niż obserwacja ilościowa, ponieważ ma do czynienia z mniejszą liczebnością próby, a także wykorzystuje analizę indukcyjną.

• Studia przypadków

Studium przypadku jest metodą badawczą, która pomaga badaczowi uzyskać lepsze zrozumienie tematu lub procesu. Studium przypadku polega na dogłębnym zbadaniu danego przedmiotu, aby zrozumieć jego funkcjonalności i sukcesy.

Jak skorzystać z kreatora formularzy online Formplus dla ankiety ewaluacyjnej

• Zaloguj się do Formplus

W kreatorze Formplus, możesz łatwo stworzyć ankietę ewaluacyjną poprzez przeciąganie i upuszczanie preferowanych pól do formularza. Aby uzyskać dostęp do kreatora Formplus, musisz utworzyć konto na Formplus.

Jak już to zrobisz, zaloguj się na swoje konto i kliknij na „Utwórz formularz”, aby rozpocząć.

• Edytuj tytuł formularza

Kliknij na pole przeznaczone do wprowadzenia tytułu formularza, na przykład, „Ankieta badań ewaluacyjnych”.

• Edytuj formularz

Kliknij na przycisk edycji, aby edytować formularz.

Dodaj pola: Przeciągnij i upuść preferowane pola formularza do swojego formularza w kolumnie Formplus builder inputs. Istnieje kilka opcji wprowadzania pól dla ankiet w konstruktorze Formplus.

Edytuj pola

Kliknij na „Zapisz”

Przeglądaj formularz.

• Dostosowywanie formularzy

Dzięki opcjom dostosowywania formularzy w konstruktorze formularzy, możesz łatwo zmienić wygląd swojego formularza i uczynić go bardziej unikalnym i spersonalizowanym. Formplus pozwala na zmianę motywu formularza, dodanie obrazów tła, a nawet zmianę czcionki zgodnie z Twoimi potrzebami.

• Multiple Sharing Options

Formplus oferuje wiele opcji udostępniania formularzy, co pozwala na łatwe dzielenie się ankietą ewaluacyjną z respondentami. Możesz użyć bezpośrednich przycisków udostępniania w mediach społecznościowych, aby udostępnić link do formularza na stronach mediów społecznościowych Twojej organizacji.

Możesz również wysłać formularz ankiety jako zaproszenie e-mail do uczestników badania. Jeśli chcesz, możesz udostępnić kod QR swojego formularza lub osadzić go na stronie internetowej Twojej organizacji, aby ułatwić dostęp do niego.

Wnioski

Prowadzenie badań ewaluacyjnych pozwala organizacjom na określenie skuteczności ich działań na różnych etapach. Tego typu badania mogą być prowadzone z wykorzystaniem jakościowych i ilościowych metod zbierania danych, w tym grup fokusowych, obserwacji, wywiadów telefonicznych i indywidualnych oraz ankiet.

Ankiety online tworzone i administrowane przez platformy gromadzenia danych, takie jak Formplus, ułatwiają zbieranie i przetwarzanie informacji podczas badań ewaluacyjnych. Dzięki wielu opcjom udostępniania formularzy Formplus, jeszcze łatwiej jest zebrać przydatne dane z rynków docelowych.