Ocena dydaktyczna i ocena z wyników - Jakość Kształcenia

Kraków, 01 października 2012 r.
Ocena z ankiety dydaktycznej
Ocena zajęć dydaktycznych realizowana jest w formie elektronicznej ankiety udostępnianej studentom za pośrednictwem
USOSweb pod koniec każdego semestru. Zasady organizacji badania, sposoby analizy uzyskanych danych i podstawowe definicje
określa Zarządzenie nr 22 Rektora UJ z 12 kwietnia 2010 roku w sprawie wprowadzenia Regulaminu ankietowego systemu oceny
zajęć dydaktycznych. Poniżej przedstawiono krótką charakterystykę danych wykorzystywanych w formularzu oceny okresowej
pracownika.
Do oceny zajęć prowadzonych przez pracownika upoważnieni są wszyscy studenci, którzy w nich uczestniczyli (zgodnie z wpisami
w systemie USOS). Kwestionariusz oceny zajęć składa się z pytań ogólnouniwersyteckich, pytań do typów zajęć oraz pytań
specyficznych dla jednostki. Podstawą wyliczania wyniku pracownika jest pula pytań ogólnych. W załączniku do Regulaminu
zamieszczono algorytm, za pomocą którego odpowiedzi na poszczególne pytania przeliczone zostają do wyniku zbiorczego
mieszczącego się w przedziale od 0 do 100 punktów. Wartość uzyskana przez pracownika po uwzględnieniu wszystkich zajęć
przeprowadzonych przez niego w roku akademickim stanowi średni wynik punktowy dla tego roku, który powinien zostać
wpisany do odpowiadającej mu rubryki formularza.
Kategorie przeliczone dla średniej
ważonej punktów z lat 0811
Uzyskany przez pojedynczego pracownika wynik nie dostarcza bezpośredniej informacji o tym, jak studenci oceniają jego sposób
prowadzenia zajęć w odniesieniu do zajęć prowadzonych przez innych dydaktyków. Aby umożliwić takie porównanie, przeliczono
wyniki punktowe do postaci dziesięciostopniowej skali stenowej, tworzącej ocenę grupową. Powstaje ona poprzez
uporządkowanie wyników wszystkich pracowników UJ od najniższego do najwyższego, a następnie podzielenie zbiorczej puli
zgodnie z częstością występowania poszczególnych ocen. Najczęściej występujące, środkowe wyniki wchodzą w obręb stenu 5 i 6.
Osoby ocenione znacząco niżej niż większość pracowników lokują się w stenach dolnych, zaś osoby ocenione znacząco wyżej niż
większość pracowników w stenach górnych. Punkty stenowe są podstawą dla przyporządkowania pracowników do
poszczególnych kategorii porównawczych. Poniższa tabela ilustruje zależności pomiędzy punktami, stenami i kategoriami
porównawczymi łącznie dla lat 2008/09, 2009/10 i 2010/11. Dodatkowe informacje dotyczące kategoryzacji odnaleźć można pod
adresem: http://www.jakosc.uj.edu.pl/web/jakosc-ksztalcenia/pomysly-nowosci-propozycje.
Punkty
Steny
0 – 39
40 – 55
56 – 64
65 – 72
73 – 79
80 – 84
85 – 89
90 – 93
94 – 98
99 - 100
1
2
3
4
5
6
7
8
9
10
Kategorie
znacznie poniżej normy
poniżej normy
w normie
powyżej normy
znacznie powyżej normy
Niezwykle istotnym kryterium oceny jest liczba ocen oraz odsetek oceniających pracownika w poszczególnych latach. Pierwsza
z wartości to suma ankiet, w oparciu o które wyliczony został wynik punktowy w danym roku akademickim. Druga wartość to
stosunek liczby ankiet wypełnionych do liczby ankiet możliwych do wypełnienia. Im wyższe są obie wartości, tym bardziej
prawdopodobne jest, że uzyskany w ankietach wynik prawidłowo odzwierciedla sposób prowadzenia zajęć przez dydaktyka.
Sporządził: Piotr Ciesielski
Zespół ds. analiz jakości kształcenia, Dział Nauczania UJ
Ocena z wyników działalności naukowej
Zgodnie z Pismem Okólnym nr 2 z 2009 roku oraz Statutem Uniwersytetu (rozdział 5) coroczną ankietą wyników działalności
naukowej są objęci wszyscy pracownicy naukowi i naukowo-dydaktyczni wszystkich jednostek organizacyjnych UJ. Ocena
Nauczyciela Akademickiego (dalej w skrócie „ocena NA”) uwzględnia m.in. średnią ważoną z 3 ankiet działalności naukowej
1
pracownika (za lata 2009-11). Wagą dla średniej jest mediana wydziału na dany rok . Mediana jest rozumiana jako wartość
środkowa, która dzieli populację na dwie równe grupy.
Liczba możliwych do uzyskania punktów nie jest ograniczona, w związku z tym problemem jest wyznaczenie takiej ilości punktów,
którą można uznać za zadawalającą i świadczącą o wystarczającej aktywności naukowej pracownika w danym roku. Przyjęto
2
w związku z tym, że poziom ten będzie wyznaczany w odniesieniu do wyników pracowników danego wydziału . Aby uniknąć
sytuacji, gdzie punktem porównania byłaby średnia wydziału (z powodu wyników skrajnych, które zawyżają średnią oraz braku
górnej granicy możliwych do zdobycia punktów), wprowadzono zasadę „normy” rozumianej jako skumulowanie wyników
najczęściej występujących. Wyniki pracowników podzielono na 10 grup (tzw. stenów), gdzie każdy sten odpowiada miejscu
w szeregu uporządkowanych wyników.
procent
procent
pracowników
sten
pracowników
w
kategoria
w stenie
poszczególnych
kategoriach
1
2%
znacznie poniżej
7%
normy
2
5%
3
9%
4
15%
5
19%
6
19%
7
15%
8
9%
9
5%
10
2%
ocena końcowa
na formularzu
oceny NA niesamodzielni
ocena końcowa na
formularzu oceny
NA - samodzielni
D
C
24%
poniżej normy
C
38%
w normie
B
B
24%
powyżej normy
A
A
7%
znacznie
powyżej normy
Średnie ważone z 3 lat uszeregowano od najniższego do najwyższego wyniku, a następnie przydzielono sten zgodnie z powyższą
tabelą ( np. w 1 stenie jest 2% najniższych wyników, w 2 stenie – 5% itd., w kategorii znacznie poniżej normy, która obejmuje sten
1 i 2 razem jest 7 % pracowników z najniższymi wynikami). Do obliczenia stenu są brane pod uwagę wyniki wyłącznie tych
pracowników, którzy byli zobowiązani do oddania wszystkich trzech ankiet. Przykładowo sten nie jest wyliczany, gdy pracownik
podlegał obowiązkowi ankiety tylko w ostatnim roku. Pracownicy zwolnieni z wypełniania którejś z ankiet mają przypisany sten 0,
który oznacza pracowników nieklasyfikowanych (zgodnie z zasadą, żeby na podstawie jednego czy dwóch wyników nie
porównywać wyniku pracownika z danymi dotyczącymi 3 lat). Pracownicy z wynikiem średniej ważonej równym 0 zostali
automatycznie przypisani do stenu 1. Ma to na celu uniknięcie sytuacji, w której większość pracowników danego wydziału
z brakiem osiągnieć stanowiłaby normę (co byłoby równoznaczne z przypisaniem ich wyniku do stenu 5).
Kategorie stenowe mają swoje przełożenie w ocenach na Formularzu Oceny NA (kategorie A, B, C,D). Powyżej podano również ich
możliwą interpretację (kolumna kategoria).
Przygotowała: Monika Bińczycka
Sam. Ref. Adm. Ds. Analizy i Przetwarzania Danych, Biuro Rektora
1
2
Średnia ważona z 3 ankiet= [(wynik 2009/mediana wydziału 2009)+ (wynik 2010/mediana wydziału 2010)+ (wynik 2011/mediana wydziału 2011)]/3*100
Wyjątek stanowi tu Wydział Polonistyki oraz Biologii i Nauk o Ziemi, gdzie pracownicy porównywani są w obrębie swoich podgrup