Badania ewaluacyjne

GROMADZENIE DANYCH4 ZAJĘCIA17.11.2008 R.

Nowy adres strony kursu

www.ewaluacja.wordpress.com

Zagadnienia na dzisiaj

� Wybór pytań ewaluacyjnych� Wybór narzędzi ewaluacji� Identyfikacja wskaźników ewaluacji� Tworzenie narzędzi ewaluacji� Zarządzanie zebranymi informacjami

Wybór pyta ń ewaluacyjnych

Pytania ewaluacyjne – pytania, które umoŜliwią nam odpowiedź na pytanie o wpływ, efektywność i osiągnięcia projektu

Wybór pyta ń ewaluacyjnych� Przejrzyj działania i rezultaty projektu� Zapytaj klientów ewaluacji, na jakie

pytania Twoje badanie powinno odpowiedzieć

� Określ wymagany poziom szczegółowości

� Przygotuj listę róŜnych pytań w celu określenia wartość i waŜności róŜnych aspektów projektu

Wybór pyta ń ewaluacyjnych� Dla kaŜdego pytania określ, w jakim

stopniu odnosi się ono do:� Procedur w ramach projektu

� Rezultatów projektu� Beneficjentów projektu

� Otoczenia projektu

� Wybierz te pytania, które sąbezpośrednio związane z przynajmniej jednym celem projektu

� Wybierz te pytania, które są związane z przyszłością projektu

Przykłady pyta ń ewaluacyjnych związanych z działaniami

� Czy działania prowadzone są zgodnie z harmonogramem?

� Czy projekt dociera do zakładanej grupy beneficjentów?

� Czy beneficjenci są zadowoleni z udziału w projekcie?

� W jaki sposób moŜna udoskonalić działania?

Przykłady pyta ń ewaluacyjnych związanych z rezultatami krótkoterminowymi� Czy projekt obejmuje odpowiednią liczbę

beneficjentów?� Czy projekt zapewnia wszystkie

zaplanowane usługi?� Czy działania prowadzą do planowanych

rezultatów?� Czy są jakieś niepoŜądane rezultaty?

Przykłady pyta ń ewaluacyjnych związanych z rezultatami długoterminowymi� Czy beneficjenci rozwinęli swoją wiedzę,

umiejętności, postawy, zachowania?� Jakich zmian oczekiwano, a jakie zaszły?� Jaki jest wpływ projektu na instytucję?� Które oczekiwania instytucjonalne zostały

spełnione, a które nie?

Przykłady pyta ń ewaluacyjnych związanych z rekomendacjami na przyszło ść� Co w projekcie mogło być zrobione lepiej,

co mogło zapewnić większe powodzenie?� Jakich zmian naleŜałoby dokonać?

Przykład „Fostering Youth Activity in Charitable and Nonprofit Organizational Culture”

CE

LEP

RO

JEK

T UP

YT

AN

IAE

WA

LUA

CY

JNE

PILOTAśOWE NAWIĄZANIE

WSPÓŁPRACY Z DWOMA ORGANIZACJAMI W CELU OPISANIA ICH KULTURY

ORGANIZACYJNEJ

CZY PROCES WYBORU DWÓCH PILOTAśOWYCH

ORGANIZACJI BYŁODPOWIEDNI?

OPRACOWANIE PROJEKTU WŁ ĄCZENIA

MŁODYCH BENEFICJENTÓW W

DZIAŁANIA ORGANIZACJI

CZY ODPOWIEDNI BYŁSPOSÓB WŁĄCZENIA

MŁODYCH BENEFICJENTÓW W

DZIAŁANIA ORGANIZACJI?

Przykład: „Fostering Youth Activity in Charitable and Nonprofit Organizational Culture”

CE

LEP

RO

JEK

T UP

YT

AN

IAE

WA

LUA

CY

JNE

WŁĄCZENIE W PROCESY DWÓCH PILOTAśOWYCH ORGANIZACJI MŁODYCH

BENEFICJENTÓW

CZY POZNANO DOBRZE UWARUNKOWANIA I

OKOLICZNOŚCI WŁĄCZENIA MŁODYCH

BENEFICJENTÓW W PROCESY ORGANIZACJI?

OPRACOWANIE, NA BAZIE DOŚWIADCZEŃ,

PROCEDUR I NARZĘDZI DO ZASTOSOWANIA W

SZERSZYM ŚRODOWISKU

W JAKI SPOSÓB PROJEKT WPŁYNĄŁ NA KULTUR Ę

ORGANIZACYJN ĄPILOTAśOWYCH ORGANIZACJI?

Wybór narz ędzi ewaluacji� Narzędzia ewaluacji słuŜą do pozyskania

informacji umoŜliwiających odpowiedź na pytania ewaluacyjne

� Narzędzia ewaluacji róŜnią się od narzędzi realizacji działań projektu

Narzędzia ilo ściowe i jako ścioweU

ST

RU

KT

UR

YZ

OW

AN

EN

IEU

ST

RU

KT

UR

YZ

OW

AN

E

Przykład: Enhancing Volunteer Capacity through Support and Recruitment Initiatives

Matryca Narz ędzi Ewaluacji

AN

KIE

TA

WY

WIA

D

TE

ST

WIE

DZ

Y/

UM

IEJĘ

TN

OŚ

CI

ZO

GN

ISK

OW

AN

Y

WY

WIA

D G

RU

PO

WY

KW

ES

TIO

NA

RIU

SZ

O

CE

NY

DZ

IEN

NIC

ZE

K

WIZ

YT

AC

JE

RE

JE

ST

R P

RA

CY

NO

TA

TK

I Z

O

BS

ER

WA

CJI

DO

KU

ME

NT

AC

JA

OP

OW

IEŚ

CI

CZ

Y M

Oś

NA

Uś

YĆ

N

AR

ZĘ

DZ

IA?

Identyfikacja wska źników ewaluacji� Wskaźniki – mierzalne czynniki bądź oznaki świadczące o stanie postępu projektu, jego powodzeniu, osiągnięciach

Jak zidentyfikować wskaźniki?

1. Przejrzyj cele projektu i zastanów się, jakiej informacji będziesz potrzebował, by określić, czy zostały osiągnięte

2. Przejrzyj pytania ewaluacyjne i zastanów się, jakiej informacji będziesz potrzebował, by na nie odpowiedzieć

3. Przejrzyj działania projektu i spróbuj znaleźćmierzalne czynniki wskazujące na stan zaawansowania działań

Jak zidentyfikować wskaźniki?

4. Przejrzyj przewidywane rezultaty projektu i zastanów się, jakiej informacji potrzebujesz aby stwierdzić, Ŝe określony rezultat został osiągnięty

5. Przejrzyj cele ilościowe projektu i zastanów się, czy mogą one świadczyć o stanie zaawansowania projektu i jego osiągnięciach

Przykłady wska źników ilo ściowych� Reakcja na reklamę, ogłoszenie, itp.� Liczba wizyt na stronie www� Liczba zapytań, wniosków, skarg itp.� Poziom satysfakcji beneficjentów (np. w skali 1-6)� Częstotliwość komunikacji� Ilość zuŜytych zasobów� Procentowa struktura korzystania z róŜnych usług� Średni wiek lub poziom wykształcenia

beneficjentów� Wyniki testów wiedzy lub umiejętności

Przykłady wska źników jako ściowych

� Rodzaje reakcji na ogłoszenie, reklamę itp.� Rodzaje zapytań, skarg itp.� Opinie o efektywności usług, korzyściach z

projektu, jakości materiałów, cateringu etc.� Obserwowalne zmiany postaw, zachowań,

umiejętności, wiedzy itp.

Rezultaty jako wska źniki

� Ilość przeprowadzonych warsztatów� Ilość przeszkolonych beneficjentów� Ilość instytucji zaangaŜowanych w projekt� Opublikowana ksiąŜka, czasopismo, biuletyn� Strona internetowa

Zarządzanie gromadzeniem informacji

� Jak uczynić gromadzenie danych wykonalnym?

� Jak uczynić gromadzenie danych adekwatnym?

TWORZENIE NARZĘDZI EWALUACJI I GROMADZENIE

DANYCH ABSORBUJĄ NAJWIĘKSZĄ CZĘŚĆ ZASOBÓW

Jak uczynić gromadzenie danych wykonalnym?

Jak uczyni ć gromadzenie danych adekwatnym?� WyposaŜ osoby gromadzące informacje w

odpowiednią wiedzę i umiejętności i bądź z nimi w stałym kontakcie

� Jeśli więcej niŜ jedna osoba gromadzi dane uŜywając tego samego narzędzia upewnij się, Ŝe robią to w podobny sposób

� Jeśli dane gromadzone są na taśmiach (audio lub wideo), zadbaj o odpowiednią jakośćtranskrypcji