badania ewaluacyjne

Question 0

Jaka jest róznica między ewaluacją formatywną a podsumowująca?

Answer 0

Jedna służy poprawie jakości wykonania, a druga ogranicza się do podsumowania tego, jak program czy projekt funkcjonuje

Question 1

Wskaż cztery typy triangulacji przydatnych w ewaluacji (za Pattonem)

Answer 1

1) triangulacja metodologiczna
2) triangulacja żródeł informacji
3) triangulacja analityczna
4) triangulacja teoretyczna

Question 2

Na czym polega triangulacja analityczna?

Answer 2

Zwiększenie ilości osób analizujących dane

Question 3

Na czym polega triangulacja metodologiczna?

Answer 3

Polega na kontrolowaniu spójności wniosków formułowanych przy wykorzestaniu różnych metod gromadzenia danych

Question 4

Z jakich elementów składa się konceptualizacja ewaluacji?

Answer 4

1) określenie potrzeb
2) możliwości realizacji
3) sposobów wykorzestania wyników
4) wyznaczeniu potencjalnych obszarów ryzyka
5) określeniu politycznych implikacji

Question 5

Na czym polega operacjonalizacja ewaluacji?

Answer 5

• Określenie wizji ewaluacji

- Oszacowanie niezbędnych zasobów

Question 6

Wymień 5 najważniejszych i najczęściej spotykanych kryteriów ewaluacyjnych:

Answer 6

Do najczęściej stosowanych kryteriów należą:

1. Trafność
2. Skuteczność
3. Efektywność
4. Użyteczność
5. Trwałość

Question 7

Jaką rolę pełnią relacje spol. między ewaluatorem a uczestnikami projektu w głównych nurtach ewaluacji?

Answer 7

.teoria pospozytywistyczna - relacje jako żródło błedu.

.pragmatyzm - trzeba nimi zarządzić

.krytyczna teoria partycypacji - muszą ulec zmianie

.Interpretatywna - relacje stanowią sedno relacji

Question 8

Jaka jest różnica między planowaniem a projektowaniem ewaluazji?

Answer 8

Planowania to faza konceptualizacji

Projektowanie to faza operacjonalizacji

Question 9

W jaki sposób ewaluacja przyczynia się do wspierania uczenia się?

Answer 9

Poprzez:
.wyjaśnianie czynników i procesów warunkujących działania, ich sukces lub porażkę (w tym także czynników ubocznych);

.weryfikowanie teorii leżących u podstaw danych polityk, programów projektów;

.wyciąganie wniosków dla innych programów i projektów, promowanie dobrych wzorców;

.budowanie zdolności ewaluacyjnych (building capacity).

Question 10

Jak można opisać relacje między ewaluacja nieformalną i formalną?

Answer 10

.Jedna wzmacnia drugą

.są względem siebie komplementarne

.stanowią interaktywne formy wiedzy.

Question 11

Jakie typy ewaluacje możemy wyróżnić ze względu na podmiot ją przeprowadzający ewaluację?

Answer 11

.Ewaluacja wewnętrzna - realizowana przez podmiot znajdujący się w stukturach organizacyjnych instytucji prowadzącej projekt.

.Autoewaluacja - realizowana przez członków zespołu projektowego np. specjalista ds. ewaluacji, który wykonuje również inne obowiązki w projekcie.

.Ewaluacja zewnętrzna - realizowana przez niezależny podmiot, zewnętrzny wobec realizatora projektu.

Question 12

Jaka jest różnica między planowaniem a projektowaniem ewaluacji?

Answer 12

Planowanie to faza konceptualizacji

Projektowanie to faza operacjonalizacji

Question 13

Co to jest ewaluacja ex-post?

Answer 13

Stanowi ona systematyczną i obiektywną ocenę zakończonego projektu, programu lub polityki w kontekście ich zaplanowania, wdrożenia i osiągniętych rezultatów.

Question 14

Jakie są 2 zasadnicze etapy planowania ewaluacji?

Answer 14

.Konceptualizacja

.Operacjonalizacja

Question 15

Jakie są fazy realizacji badania ewaluacyjnego?

Answer 15

1) strukturyzacja
2) Obserwacja
3) Analiza
4) Ocena
5) Raportowanie wyników
6) Upublicznienie

Question 16

Jakie funkcje pełni ewaluacja?

Answer 16

.Konkluzywna

.Formatywna

.Rozliczeniowa

Question 17

Jak zdefiniować kryterium użyteczności?

Answer 17

Użyteczność to ocena stopnia w jakim stopniu zaspokojone
są potrzeby beneficjantów oraz to, w jakiej mierze
interwencja spełniła ich oczekiwania.

Question 18

Co powinno się znaleść w raporcie z ewaluacji?

Answer 18

1. Streszczenie,
2. Spis treści,
3. Wprowadzenie
4. Opis zastosowanej metodologii i żródeł informacji
5. Opis wyników ewaluacji
6. Wnioski i rekomendacje
7. Aneksy

Question 19

Wyniki, wnioski, rekomendacje - jaka to różnica?

Answer 19

Podstawowa różnica pomiędzy wynikami, wnioskami i rekomendacjami to funckja którą spełniają.

.Wyniki są stwierdzeniem wystąpienia pewnych faktów,

.Wnioski - oceną tych faktów pod kątem kryteriów, które założyliśmy na początku procesu ewaluacji,

.Rekomendacje - zaleceniami do zastosowania w przyszłości

Question 20

Jak zdefiniować kryterium trwałości?

Answer 20

Odnosi się do możliwość kontynuacji działań lub utrzymania jego efektów już po zakończeniu wsparcia otrzymywanego w ramach projektu.

Question 21

Jaka jest różnica między audytorem a ewaluacją?

Answer 21

Audyt jest narzędziem kontroli zew. służącej skontrolowaniu wykorzestania środków, a nie służącym poprawie jakości wykonania.

Question 22

Co to są rekomendacje operacyjne?

Answer 22

Dotyczące bieżącą realizacji projektu/strategii oraz usprawień w ich obrębie często o charakterze technicznym (ich wdrożenie nie determinuje w sposób bardzo istotny skutecznej i efektywnej realizacji projektu/strategi)

Question 23

Jak dzielimy definicje ewaluacji?

Answer 23

.Def. oparte o funkcje,

.Def. oparte o cel,

.Def. oparte o metody ewaluacji

Question 24

Jakie typy rekomendacji wyróżniamy (3 typy)?

Answer 24

1. Rekomendacje operacyjne
2. Rekomendacje kluczowe
3. Rekomendacje strategiczne

Question 25

Jakie 3 kryteria wg Reibena, powinna spełniać ewaluacja by uznać ją za ew. partycypatywną?

Answer 25

1. Interesariusze muszą pełnić aktywną rolę jako podmioty w procesie ewaluacji.
2. Jako, że praktycznie nie jest możliwe aktywne włączenie wszystkich interesariuszy w proces ewaluacji, w procesie realizacji powinni uczestniczyć przynajmniej przedstawiciele beneficjantów, terenowi pracownicy projektu, zarządnicy i donator.
3. Interesariusze winni uczestniczyć przynajmniej w trzech fazach procesu ewaluacji: określeniu zadań, interpretacji danych oraz wykorzestaniu informacji pozyskanych w jej trakcie.

Question 26

Cele ewaluacji ex-ante

Answer 26

.podniesienie jakości dokumentów programowych, tj. strategii lub projektu;

.zwiększenie trafności i skuteczności przyszłych działań;

.ocena zgodności zaplanowanych działań ze zdiagnozowanymi
potrzebami;

.ocena wewnętrznej spójności zaprojektowanej interwencji;

.identyfikacja możliwych zagrożeń i trudności w realizowaniu działań;

.identyfikacja / ocena potrzeb beneficjentów.

Question 27

Cele ewaluacji mid-term

Answer 27

.ocena wstępnych wyników podjętych działań (stopień osiągniętych celów, wykorzystanie środków finansowych, system wdrażania i monitorowania);

.podniesienie jakości i trafności projektu/strategii poprzez możliwość wprowadzania modyfikacji;

.identyfikacja pojawiających się problemów.

Question 28

Cele ewaluacji ex-post

Answer 28

.ocena efektów działań i ich stopnia zgodności z założonymi
planami (celami, rezultatami, oddziaływaniem);

.ocena skuteczności, trwałości, efektywności podjętych działań;

.identyfikacja nieprzewidzianych skutków działań;

.wskazanie kierunków rozwoju.

Question 29

Trafność (odpowiedniość, adekwatnosć)

Answer 29

zgodność z potrzebami, pozwalająca ocenić, w jakim stopniu cel projektu/cele strategii odpowiadają zdiagnozowanym potrzebom 
i problemom (np. czy osoby długotrwale bezrobotne potrzebują wsparcia w formie treningów umiejętności społecznych? czy jest zapotrzebowanie w gminie na osoby z kursem baristy? czy mieszkańcy danej gminy potrzebują mieszkań czynszowych?}. Warto zaznaczyć, że potrzeby te z jednej strony mogą być określane przez ekspertów np. na podstawie danych zastanych (np. braki pracowników z określonymi kwalifikacjami na lokalnym rynku pracy5} oraz przez przyszłych beneficjentów działań (np. braki w spotecznej infrastrukturze lokalnej utrudniającej integrację społeczną).

Question 30

Skuteczność

Answer 30

ocena, w jakim stopniu są realizowane cele projektu i czy to, co osiągnięto, jest zgodne z zamierzeniami (np. ile osób uczestniczących w projekcie zwiększyło swoje umiejętności społeczne, zawodowe pozwalające im na znalezienie pracy?)

Question 31

Efektywność (wydajność)

Answer 31

określenie poziomu „ekonomiczności” podejmowanych
dziatań, czyli stosunek poniesionych nakładów do uzyskanych wyników i rezultatów; np. porównanie kosztów poniesionych na osobę uczestniczącą w projekcie i osobę nie uczestniczącą w projekcie w określonym czasie np. dwóch lat (wartość udzielonego wsparcia, tj. zasiłki, koszty szkoleń) lub porównanie dwóch alternatyw rozwiązania
tego samego problemu (np. opłacenia w ramach zasiłków celowych kosztów wynajmu mieszkań dla rodzin, którym gmina Jest zobowiązana zapewnić schronienie i wybudowanie i utrzymanie mieszkań socjalnych). Obok kosztów rozwiązania danego problemu należy brać również pod uwagę tzw. „koszty zaniechania”.

Question 32

Planowanie ewaluacji

Answer 32

Planowanie ewaluacji polega na podjęciu decyzji co do:

.celu,

.zakresu,

.metod,

.kosztów,

.harmonogramu

.sposobu wykorzystania wyników ewaluacji.