Moduł warsztaty - Portal UW

Moduł Warsztaty
Jest to jeden z najbardziej skomplikowanych modułów systemu Moodle. Podobnie jak Zadanie,
pozwala uczestnikom zajęd przesyład prac na platformę, w przeciwieostwie do modułu Zadanie,
moduł Warsztaty pozwala na ocenianie przesłanych prac nie tylko przez prowadzącego, lecz także
przez innych studentów uczestniczących w warsztatach.
Ocena zadao otwartych nie jest prostą sprawą. Ponieważ przesyłane prace mogą byd oceniane przez
studentów, duży nacisk jest tu położony na jasne i przejrzyste definiowanie kryteriów oceny.
Dodatkowo, prowadzący może załadowad kilka testowych prac wraz z przykładowymi ocenami – w
ten sposób studenci mogą przedwiczyd ocenianie na przykładach zanim przejdą do oceny prac swoich
kolegów.
Tworzenie warsztatów składa się z trzech kroków:
1. Utworzenie modułu Warsztaty na kursie,
2. Określenie kryteriów oceny,
3. Załadowanie przykładowych prac i ocen.
1. Utworzenie modułu Warsztaty
Ustawienia modułu Warsztaty przedstawione są na Rys. 1. W Warsztatach oceniane są zarówno
prace studentów (opcja: stopieo za pracę) jak i sposób w jaki ocenili inne prace (opcja: stopieo za
wystawione oceny).
Ocena jaką student otrzyma z Warsztatów zależy od stopnia za pracę i stopnia za wystawione
oceny. To w jaki sposób będą one przeliczane na ocenę koocową zależy od zdefiniowanej strategii
oceniania.
Stopieo za wystawione oceny: Jest maksymalny stopieo jaki można dad studentom za oceny
wystawione innym lub ich własnym pracom. Konkretny stopieo jaki dostanie dany student jest
wyliczany na podstawie wszystkich ocen danej pracy: im ocena studenta „bliższa” średniej ważonej
wszystkich ocen, tym wyższy stopieo, przy czym:
Sposób obliczania „bliskości” oceny studenta do średniej ważonej ocen można definiowad w
ustawieniu Sposób porównywania oceniania.
Średnia ważona ocen obliczana jest na podstawie wszystkich ocen jakie zostały wystawione
dla danej pracy, wliczając w to ocenę wystawioną przez prowadzącego. Ocena prowadzącego
ma przypisaną domyślną wagę 1 (jest równoważna ocenom studentów). Wagę tę można
zmienid w ustawieniu Waga oceny nauczyciela.
© COME, Uniwersytet Warszawski
Ta wartośd może byd zmieniana w każdej chwili i ma bezpośredni wpływ na stopnie widziane przez
studentów (i prowadzących).
Stopieo za pracę: Jest to maksymalny stopieo jaki może byd przyznany za przesłaną przez studenta
pracę.
Ta wartośd może byd zmieniana w każdej chwili i ma bezpośredni wpływ na stopnie widziane przez
studentów (i prowadzących).
Rys. 1. Ustawienia modułu Warsztaty
Strategia oceniania: Możliwe są następujące strategie oceniania:
Nie oceniane – oceny nie są wystawiane. Studenci i prowadzący jedynie komentują prace.
Sumacyjna – w tym przypadku prace oceniane są na podstawie sumy ocen za tzw. składowe
zadania. Każda składowa dotyczy innego aspektu zadania, definiuje się je w kolejnym kroku
tworzenia warsztatów. Ich ilośd określa wartośd opcji ilośd komentarzy, składowych zadania,
kryteriów albo kategorii a suma punktów określa ocenę.
© COME, Uniwersytet Warszawski
Zależna od ilości błędów – w tym wypadku prace są oceniane metodą zerojedynkową
(tak/nie). Na przykład, jeżeli kryterium oceny pracy (elementem oceny) jest to, czy autor
dobrze wyraził jakąś myśl, to ocena koocowa będzie zależed od ilości „Tak” i „Nie” w ocenach
studentów.
Kryterium – prowadzący tworzy zbiór kryteriów. Każde kryterium ma przyporządkowany
określony stopieo.
Rubryka – podobne do strategii Kryterium z tą różnicą, że może byd wiele zbiorów kryteriów
(kategorii). Każdy z tych zbiorów może zawierad do pięciu kryteriów i mied
przyporządkowaną wagę. Ocena koocowa jest sumą ważoną ocen za każde z kryteriów.
Strategia oceniania nie może byd zmieniana po przesłaniu przez studentów zadao.
Ilośd komentarzy, składowych zadania, kryteriów albo kategorii: to ustawienie odnosi się do
Strategii oceniania i określa ile ma byd elementów uwzględnianych w obliczaniu stopni. W zależności
od wybranej Strategii, są to komentarze, składowe zadania, elementy oceny, kryteria lub ich
kategorie. Ta opcja nie może byd zmieniana po rozpoczęciu warsztatów.
Ilośd załączników w pracy: określa ile okienek ‘prześlij plik’ jest wyświetlanych przy wysyłaniu pracy.
Można wybrad zero – wtedy wysyłanie załączników do pracy nie będzie możliwe. Inny numer określa
ilośd spodziewanych załączników, nie wymaganych. Maksymalna liczba spodziewanych załączników
to pięd. Jeżeli wybrano np. trzy załączniki, to student będzie mógł np. wysład dwa i nie zostanie
wyświetlone żadne ostrzeżenie.
Zezwól na wielokrotne przesyłanie rozwiązania: Domyślnie studenci nie mogą przesyład ponownie
już raz przesłanych rozwiązao. Jeśli opcja ta jest włączona, to studenci będą mogli wysład więcej niż
jedno rozwiązanie zadania. Może to byd przydatne, jeśli prowadzący chce zachęcid studentów do
cyklicznego ulepszania swojej pracy.
Gdy obliczana jest koocowa ocena studenta, brana jest pod uwagę najwyżej oceniona z jego prac.
"Najwyżej" oznacza tu średnią ważoną z oceny prowadzącego, oraz z oceny współuczestników kursu,
jeśli obie te oceny są uwzględniane w ocenie koocowej.
Ilośd ocen przykładów przesłanych przez prowadzącego: Ta liczba określa czy studenci będą proszeni
o ocenienie prac przykładowych przesłanych przez nauczyciela, a jeśli tak, to ile takich przykładów
będą musieli ocenid. Student musi osiągnąd na tym etapie określony pułap, zanim będzie mógł
przesład własną pracę. Oznacza to, iż prowadzący musi ocenid każdą z ocen przykładów
wystawionych przez studenta. Student będzie mógł obejrzed zarówno komentarze nauczyciela, jak i
wystawioną przez niego ocenę.
Sposób porównywania oceniania: Prace studentów mogą byd oceniane zarówno przez
prowadzącego jak i pozostałych studentów. Na ocenę koocową pracy studenta może składad się
ocena pracy oraz ocena tego w jaki student oceniał prace innych studentów. Ta ‘ocena oceniania’
zależy od tego jak bardzo zgodne są oceny studenta z ocenami prowadzącego. Jeżeli nie ma ocen
prowadzącego, to średnia ocen wystawionych przez studentów jest brana jako za wzór.
Sposób obliczania stopnia zgodności między oceną ucznia może zależy od wybranej opcji. Dostępne
wybory to: „Bardzo luźny”, „Luźny”, „Odpowiedni”, „Surowy”, „Bardzo surowy”.
© COME, Uniwersytet Warszawski
Żeby zrozumied jak działa ta opcja, weźmy pod uwagę (bardzo prosty) przypadek oceniania 10 pytao
Tak/Nie. Dla przykładu mogą tam wystąpid pytania takie jak: "Czy ten druk jest wypełniony
poprawnie?", "Czy obliczony zysk wynosi $106,66?" itd.
Jeśli wybrane zostało ustawienie "Bardzo luźny" – idealne podobieostwo w ocenach ucznia i
nauczyciela da wynik 100%, jeśli tylko jedno pytanie się nie pokrywa – otrzymamy wynik 90%, dwie
niezgodności dadzą 80%, trzy niezgodności 70% itp. Załóżmy teraz, że odpowiedzi studenta były
losowe. Przeciętnie daje to pięd poprawnych odpowiedzi na dziesięd, czyli ocena wyniesie aż 50%!
W ustawieniu „Luźny” progi wynoszą 16% – idealne podobieostwo w ocenach ucznia i nauczyciela da
wynik 100%, jeśli tylko jedno pytanie się nie pokrywa – otrzymamy wynik 84%, dwie niezgodności
dadzą 68%, trzy niezgodności 52% itp. Losowe odpowiedzi dadzą 20% punktów.
W ustawieniu „Odpowiedni” progi wynoszą 25% – idealne podobieostwo w ocenach ucznia i
nauczyciela da wynik 100%, jeśli tylko jedno pytanie się nie pokrywa – otrzymamy wynik 75%, dwie
niezgodności dadzą 50%, trzy niezgodności 20% itp. Losowe odpowiedzi dadzą 0% punktów.
W ustawieniu „Surowy” progi wynoszą 30% – idealne podobieostwo w ocenach ucznia i nauczyciela
da wynik 100%, jeśli tylko jedno pytanie się nie pokrywa – otrzymamy wynik 70%, dwie niezgodności
dadzą 40%, trzy niezgodności 10% itp.
W ustawieniu „Bardzo surowy” próg wynosi ok. 35% – idealne podobieostwo w ocenach ucznia i
nauczyciela da wynik 100%, jeśli tylko jedno pytanie się nie pokrywa – otrzymamy wynik 65%, dwie
niezgodności dadzą 35%, itp.
Podczas warsztatów nauczyciel może zmienid ustawienia tej opcji i przeszacowad oceny uczniowskie.
Przeszacowanie uzyskuje się poprzez kliknięcie linku "Oceo ponownie oceny studentów" który
znajduje się na stronie administracji Warsztatów. Ustawienie to może byd zmieniane w każdym
momencie warsztatów, więc najlepiej zacząd od ustawienia „Sprawiedliwy” i potem, już w trakcie
trwania warsztatów dostosowywad sposób porównywania ocen do zachowania studentów.
Ilośd ocen prac współuczestników kursu: Ta liczba determinuje to, czy studenci są proszeni o
dokonanie oceny prac współuczestników kursu. Jeśli liczba ta jest różna od zera, każdy ze studentów
otrzymuje do oceny dokładnie tyle prac od innych studentów. Po wystawieniu oceny autor pracy
może się zapoznad z komentarzami i ewentualnie z oceną wystawioną przez współuczestnika kursu.
Proces uzgadniania oceny może byd wielostopniowy, jeśli wybrano opcję "uzgadnianie oceny".
Prowadzący może ocenid oceny wystawione przez studentów, a jego ocena może byd uwzględniona
przy wyznaczaniu oceny koocowej. Student może obejrzed komentarze i ocenę wystawioną przez
prowadzącego dla każdej z przesłanych przez siebie prac.
Waga oceny nauczyciela: Określa wagę oceny pracy studenta wystawionej przez nauczyciela, w
stosunku do ocen wystawionych tej pracy przez studentów. Ta opcja może byd użyta do "wyłączenia"
oceny nauczyciela, do zrównania wagi oceny nauczyciela z ocenami uczniów albo do jej zwiększenia
(w stosunku do ocen studentów). Domyślna wartością jest 1 – wtedy ocena nauczyciela ma taką
samą wagę jak oceny studentów.
W pewnych sytuacjach może pojawid się podejrzenie, że uczniowie nagminnie "podwyższają" oceny i
oceniają się nawzajem zbyt pobłażliwie. Może się również zdarzyd sytuacja, gdy rówieśnicy oceniają
© COME, Uniwersytet Warszawski
się zbyt surowo (zdarza się to jednak rzadziej). Nieprecyzyjne ocenianie przez uczniów może byd
zrekompensowane przez podniesienie wagi oceny wprowadzonej w tej opcji. Na przykład jeżeli w
warsztatach uczestniczy pięciu studentów, ustawiając tę opcję na 5, powodujemy iż ważnośd oceny
owych pięciu studentów jest równorzędna z ważnością oceny nauczyciela.
Ta opcja może byd dowolnie zmieniana w czasie trwania zadania.
Przepełnienie: Ten parametr określa czy wszyscy studenci będą mieli równą ilośd prac do oceny. Gdy
Parametr płynności oceniania jest ustawiony na zero, wszystkie oddane prace są przypisywane tyle
samo razy. Jeśli parametr ten jest ustawiony na 1 wówczas pewne prace mogą zostad przypisane
jeden raz więcej (i co za tym idzie, inne jeden raz mniej). Podobnie, gdy poziom ten zostanie
ustawiony na 2 wówczas jeszcze większa dysproporcja jest dozwolona.
Domyślnie, parametr ten ustawiony jest na zero. Może się jednak zdarzyd, że niektórzy studenci nie
będą mieli żadnej pracy do oceny do czasy gdy wszyscy oddadzą swoje prace. W takiej sytuacji
parametr ten można ustawid na 1. Wtedy większośd studentów otrzyma pełną liczbę swoich prac do
oceny i nie będą musieli czekad na spóźnione prace. Problem wynikający z czekania na spóźnione
prace powinien byd jeszcze mniej widoczny gdy parametr ten ustawiony jest na 2. Tak więc gdy
parametr ocen współuczestników jest ustawiony na 5, wtedy ocenianie będzie bardziej płynne gdyż
niektóre prace będą ocenione 4 razy, niektóre 5 razy, a inne 6 razy. Ustawienie tego parametru na
wartośd inną niż jeden uelastycznia proces oceniania
Samoocena: Zadania przydzielone na warsztatach mogą podlegad samoocenie. Oznacza to, że jeśli
jest pięciu uczestników kursu oceniających pracę, to każdy z nich będzie poproszony o ocenienie
sześciu prac, w tym swojej.
Jeśli ilośd prac do oceny jest ustawiona na zero, a opcja samooceny jest włączona to zadanie staje się
zadaniem do samooceny. Może ono uwzględniad ocenę prowadzącego, ale nie musi. Zależy to od
tego czy opcja oceny przez prowadzącego jest włączona.
Ocena musi byd uzgodniona: Ocena wystawiona za zadanie może być uzgadniana na jeden z
dwóch poniższych sposobów :
1. W fazie przesyłania rozwiązań i oceny studenci widzą oceny wystawione ich pracom
przez pozostałych studentów. Student oceniany nie odpowiada a żaden sposób
studentowi oceniającemu go. Informacje zwrotne mogą być jedynie umieszczane
przez prowadzącego, jeśli ten zdecyduje się oceniać oceny wystawione przez
studentów.
2. W fazie przesyłania rozwiązań i oceny studenci widzą oceny wystawione ich pracom
przez pozostałych studentów student. Student oceniany może komentować ocenę
wystawioną mu przez współuczestnika kursu. Może się zgodzić z wystawioną oceną
lub nie. Jeśli dojdą do porozumienia, to wystawiona ocena jest akceptowana i
wykorzystana później do wystawienia oceny końcowej. W przeciwnym wypadku
student oceniający będzie miał możliwość zmiany wystawionego komentarza/oceny.
Taka pętla: ponowna ocena - brak zgody – ponowna ocena – brak zgody... może
trwać aż porozumienie zostanie osiągnięte lub nadejdzie termin oddawania prac.
© COME, Uniwersytet Warszawski
Ocena, która jest wciąż dyskutowana, gdy mija termin składania prac nie jest
uwzględniana przy wyznaczaniu oceny końcowej.
Jeśli obowiązuje ta druga metoda istnieje opcja wyłączenia wyświetlania ocen. Jeśli opcja
ta jest włączona student oceniany może poznać jedynie komentarze do swojej oceny.
Ocena zostaje wyświetlona dopiero wtedy gdy osiągnięte zostanie porozumienie (na temat
samych komentarzy).
Ukryj stopnie przed osiągnięciem porozumienia: Opcja ta może byd wykorzystana na warsztatach w
których studenci muszą dojśd do porozumienia w sprawie ocen. Domyślnie student, którego praca
jest oceniana będzie mógł zobaczyd zarówno komentarz, jak i wystawiony mu przez współuczestnika
kursu stopieo. Może to prowadzid do dłuższych dyskusji, niż w przypadku ujawniania jedynie
komentarza studentom ocenianym.
Jeśli zadecydowano, aby stopnie były ukrywane przed ocenianym studentem, są one ujawniane w
momencie dojścia do porozumienia. To porozumienie jest osiągane oczywiście tylko na podstawie
komentarzy. Jeśli komentarze nie przekładają się na otrzymany stopieo, student może odwoład się do
prowadzącego.
‘Tabela ligowa’ nadesłanych prac: Tabela ta przedstawia najlepsze prace nadesłane na dany temat.
Ilośd wpisów w tabeli może byd ustalona na 0, liczbę pomiędzy 1 i 20, 50 lub "Wszystkie". Jeśli
wybrany zostanie parametr 0 wówczas tabela ta nie zostanie wyświetlona. Wybranie określonej
liczby nakaże wyświetlenie systemowi danej liczby najlepszych prac. Można oczywiście nakazad
wyświetlenie wszystkich prac.
Oceny wystawiane anonimowo: Praca oceniana przez współuczestników kursu może byd oceniana
anonimowo. W tym wypadku ani imiona (ani zdjęcia) oceniających studentów nie są pokazywane.
Jedynie nazwy plików przesłanych przez studentów są wykorzystywane w celu identyfikacji
ocenianych prac.
Jeśli prace nie są oceniane anonimowo, to razem z każdymi przesłanymi materiałami zamieszczane
jest imię i zdjęcie studenta je umieszczającego. Może to prowadzid do tego, że studenci będą
wystawiad oceny w sposób nieobiektywny.
Uwaga: Jeśli oceny prowadzącego są pokazywane studentom, to nigdy nie są one anonimowe
2. Określenie kryteriów oceny
Kryteria oceny, czyli ilośd, rodzaj i typ składowych zadania zależą m.in. od przyjętej strategii
oceniania. W zależności od przyjętych kryteriów zmieniad się będzie formularz oceny zadania
wyświetlany osobie oceniającej pracę. Określanie kryteriów oceny zadania sprowadza się do
zdefiniowania wyglądu tego formularza i dostępnych w nim opcji (np. skal ocen).
© COME, Uniwersytet Warszawski
1.1 Kryteria oceny sumacyjnej
Prowadzący definiuje odpowiednią liczbę składowych zadania (zgodnie z liczbą wybraną w
ustawieniu Ilośd komentarzy, składowych zadania, elementów oceny, kryteriów albo kategorii).
Każda składowa może byd oceniona zgodnie z jedną z 10 skal (Rys. 2)
Rys. 2. Edycja składowych zadania przy strategii sumacyjnej
1.2 Kryteria oceny zależnej od ilości błędów
Prowadzący definiuje odpowiednią liczbę składowych zadania (zgodnie z liczbą wybraną w
ustawieniu Ilośd komentarzy, składowych zadania, elementów oceny, kryteriów albo kategorii).
Składowe są oceniane w skali ‘Poprawne/Niepoprawne’, a ocena uzależniona jest od ilości błędów.
Na Rys. 3 przedstawiono sytuację, gdy zdefiniowano dwie składowe zadania, a za ocenę zadania
można otrzymad maksimum 50 punktów. Dwie składowe oznaczają, że student może zrobid 0, 1 lub 2
błędy. Każdej z tych sytuacji należy przydzielid liczbę punktów – od zera do 50 (bo 50 to maksymalna
liczba punktów za pracę; została wybrana w opcji stopieo za pracę).
Rys. 3. Edycja składowych zadania przy strategii oceniania zależnej od ilości błędów
© COME, Uniwersytet Warszawski
1.3 Kryteria oceny typu ‘Kryterium’
Prowadzący definiuje odpowiednią liczbę składowych zadania (zgodnie z liczbą wybraną w
ustawieniu Ilośd komentarzy, składowych zadania, elementów oceny, kryteriów albo kategorii) i
maksymalny stopieo (liczbę punktów) jaką student może uzyskad za spełnienie danego kryterium
(Rys. 4). Kryteriów może byd dowolna ilośd, każde oceniane w skali 0-100.
Rys. 4. Edycja składowych zadania przy strategii oceniania typu ‘Kryterium’
1.4 Kryteria oceny typu ‘Rubryka’
Prowadzący definiuje odpowiednią liczbę składowych zadania (zgodnie z liczbą wybraną w
ustawieniu Ilośd komentarzy, składowych zadania, elementów oceny, kryteriów albo kategorii).
Każda ze składowych (kategorii) może mied do pięciu stopni (Rys. 5).
Rys. 5. Edycja składowych zadania przy strategii typu ‘Rubryka’
© COME, Uniwersytet Warszawski
3. Załadowanie przykładowych prac i ocen
Jeżeli w opcji ilośd ocen przykładów przesłanych przez prowadzącego wprowadzono liczbę inną niż
0, to po określeniu kryteriów oceny pojawi się strona zawierająca, m.in. opcje przesłania
przykładowych rozwiązao ( Rys. 6).
Rys. 6. Wysyłanie przykładowych prac i ocen
Literatura
Dokumentacja modułu Warsztaty, http://docs.moodle.org/en/Workshops
Using Moodle, Chapter 6: Workshops,
http://download.moodle.org/docs/en/using_moodle/ch6_workshops.pdf
Moodle Workshop Guide by Laura M. Christensen © 2007,
http://www2.oakland.edu/elis/traindocs/Moodle/Workshop/index.html
Najnowsza wersja tego dokumentu jest dostępna pod adresem:
http://www.come.uw.edu.pl/dokumenty
© COME, Uniwersytet Warszawski