Ocena ewaluacji

Ocena ewaluacji (EA) to badanie jakościowe przeprowadzane przed oceną programu .

Opis

Oceny ewaluacji (EA) dostarczają informacji o tym, czy program może zostać oceniony, czy nie. Służą one również do opisu celów, logiki i działań programu w celu zbadania jego wiarygodności , wykonalności, trwałości i akceptowalności. EA dotyczą prawdopodobieństwa osiągnięcia przez program oczekiwanych rezultatów , wymaganych zmian potrzebnych do optymalnego zarządzania, tego, czy ewaluacja może poprawić wyniki programu oraz identyfikacji interesów interesariuszy w ewaluacji i sposobu wykorzystania wyników. Według Junga i Schuberta (1983) EA musi zająć się tymi specyficznymi aspektami programu:

Uzyskanie perspektywy wszystkich osób zaangażowanych w program, np. pracowników programu i interesariuszy
Celem badania programów jest określenie metod pomiaru, czy zostały one osiągnięte
Dostarczanie informacji o tym, jak program faktycznie funkcjonuje
Identyfikacja sposobów ulepszenia programu
Przekazywanie ważnych informacji o programie

Procedura

Asesorzy ewaluacji tworzą grupę roboczą, która składa się z przedstawiciela ewaluacji i członka zarządzającego programem. Grupa robocza bada oficjalne zapisy i dokumentację programu. Ponadto przeprowadzane są wywiady i obserwacje , aby zrozumieć i opisać, w jaki sposób program jest postrzegany przez personel programu i odpowiednich interesariuszy. Grupa robocza jest nadzorowana przez grupę ds. polityki, która nadzoruje decyzje zarządcze dotyczące zbliżającej się oceny programu. Jung i Schubert (1983) podają sześć obszarów, które powinny być uwzględnione w EA. Obejmują one:

Określenie celów programu
Określenie zamierzonych działań, aby osiągnąć cele programu
Identyfikacja niezgodności między celami programu a zamierzonymi działaniami
Badanie operacji terenowych
Porównanie rzeczywistych działań w terenie z planowanymi działaniami programu
Zapewnienie opcji zarządzania i oceny

Potencjalne ograniczenia

Skuteczna EA wymaga, aby grupy robocze i grupy polityczne współpracowały z personelem programu i zainteresowanymi stronami. Może to być problematyczne, gdy pojawiają się różnice lub napięcia między personelem programu a zainteresowanymi stronami, co stanowi wyzwanie dla EA. Thurston, Graham i Hatfield (2003) stwierdzają, że EA są korzystne, ponieważ ułatwiają rewizje programów. Często okazuje się, że po EA programy wymagają pewnych modyfikacji, ponieważ mogą występować niespójności z modelem logicznym lub problemy z implementacją.

Napięcie może powstać, gdy pojawią się pozytywne niezamierzone wyniki, które pojawiają się, gdy program jest źle zaprojektowany. W jaki sposób osoby oceniające, pracownicy programu i interesariusze radzą sobie z tą trudnością? Czy dopuszczalne jest dopuszczenie do działania problematycznego programu ze względu na płynące z niego korzyści, czy też program należy zawiesić i przeformułować, co spowoduje koniec pozytywnych niezamierzonych rezultatów?

Wniosek

EA są złożone i wymagają współpracy odpowiednich osób zaangażowanych w program. Są to subiektywne oceny wiarygodności programu. Pomimo swoich ograniczeń EA są cennymi narzędziami do szybkiego rozwiązywania problemów pojawiających się w programie. Jeśli EA jest skutecznie prowadzona na źle zaprojektowanym programie, może potencjalnie zaoszczędzić personel programowy i interesariuszy czas i zasoby finansowe, które w przeciwnym razie zostałyby zmarnowane, gdyby program miał nadal działać bez zmian.