Projekt zmian w ocenie parametrycznej i kategoryzacji

Projekt zmian w ocenie
parametrycznej i kategoryzacji
jednostek naukowych
w 2017 roku
Konferencja MNiSW i KEJN
Warszawa, 18 lutego 2015 r.
Projekt został opracowany przez KEJN po licznych
konsultacjach m.in. na posiedzeniach KRASP, Prezydium
PAN, KRUP, KRAUM, RGIB oraz kierownictwa MNiSW i
dokumentach KPN, Wydziałów PAN i in. a także ankiety
przeprowadzonej wśród JN.
Powszechnie uznano, że parametryzacja 2017 powinna być
kontynuacją poprzedniej, ale że wymaga ona zmian,
uzupełnień i dopracowania wielu szczegółów i rozwiązań.
Ocena ma charakter parametryczny z elementami
eksperckimi, co najsilniej jest wyrażone w ocenie według
kryterium 4 oraz w wyborze JN do kategorii A+.
Szczególny nacisk położono na następujące zagadnienia:
•  Umiędzynarodowienie badań naukowych
•  Promowania interdyscyplinarności, określenie heterogenności JN i tworzenie GWO
•  Wprowadzenie nowych zasad punktacji monografii,
•  Wprowadzenie systemu popierania projektów badawczych międzynarodowych i
innowacyjnych
•  Uproszczenie i doprecyzowanie zasady porównania parami
•  Uszczegółowienie oceny kryterium 4 „Pozostałe efekty działalności naukowej”
•  Szersze uwzględnienie innowacyjności, w tym zmiana Karty Aplikacji i Wdrożeń
•  Doprecyzowanie zasad punktacji przychodów jednostki w ramach kryt. 3
•  Ustalenie nowych zasad typowania jednostek do Kategorii A+
•  Uściślenie punktacji dorobku artystycznego w kryt.1 „Osiągnięcia naukowe i twórcze”
•  Zmiany w zakresie oceny kryt. 2 „Potencjał Naukowy”
•  Inne, w tym dotyczące liczby No, wag, uproszczeń i podniesienia rangi patentów.
Zmiany systemowe
- Uproszczenie algorytmu porównywania parami
- Modyfikacja zasad tworzenia Grup Wspólnej Oceny (GWO)
- Nowe zasady ustalania ocen jednostek referencyjnych dla
jednostek naukowych niejednorodnych (NJN)
- Modyfikacja zasad wyłaniania JN kategorii A+
- Efekty wdrożeniowe i aplikacyjne działalności naukowej
we wszystkich rodzajach JN, bez względu na grupę nauk.
- Umiędzynarodowienie badań naukowych
Zasady tworzenia i przypisania
jednostek naukowych do GWO
Grupy Wspólnej Oceny (GWO) tworzone są z uwzględnieniem zasady podobieństwa
JN w oparciu o:
•  profil działalności naukowo-badawczej publikacji ustalany m.in. w porozumieniu
z Zespołem ds. Czasopism),
•  uprawnienia jednostek do nadawania stopni naukowych,
•  strukturę potencjału naukowego (dyscypliny naukowe, w których pracownicy
uzyskali stopnie lub tytuł naukowy),
•  podobieństwo w innych aspektach działalności badawczej jednostek (np.
wdrożenia, efekty materialne etc.).
Dla Niejednorodnej Jednostki Naukowej (NJN), której dorobek naukowy
wykracza poza dziedzinę nauk – nowa zasada wyznaczania JRef
Propozycja zmian stymulujących zwiększenie
umiędzynarodowienia badań naukowych
•  Szczególne
docenienie pozyskiwania środków na realizację projektów
badawczych ze źródeł międzynarodowych, w tym głównie ze środków UE.
•  Odpowiednie punktowanie udziału w międzynarodowych przedsięwzięciach
badawczych, a także nagród i wyróżnień o charakterze międzynarodowym
•  Docenienie tzw. „międzynarodowej widoczności” jednostki naukowej i jej
wpływu na naukę światową
•  Doprecyzowanie znaczenia pozycji międzynarodowej przy ustalaniu wartości
ocen Jednostek Referencyjnych
•  Zwiększenie punktacji za uzyskane patenty międzynarodowe.
•  Rekomendujemy utrzymanie wysokiej punktacji i systemu wag za publikacje
w czasopismach znajdujących się w obiegu międzynarodowym (Lista A)
Kategoria naukowa A+
•  może zostać przyznana JN, która jest zaliczona do kategorii A
•  kategoria A+ jest przyznawana na podstawie opinii eksperckiej, biorąc
pod uwagę następujące kryteria w zależności od charakteru GWO:
- waga osiągnięć dotyczących nauki, kultury, sztuki i dziedzictwa narodowego.
- rola w inicjowaniu życia naukowego na terenie dyscypliny
- waga osiągnięć dotyczących rozwoju gospodarczego kraju
- średnia wartość punktowa 25% najwyżej punktowanego dorobku JN
- wartość zmodyfikowanego indeksu Hirsha
- wartość zmodyfikowanej liczby cytowa
- opublikowanie wysoko cytowanych prac, w których JN jest podmiotem wiodącym
•  liczba jednostek z kategorią A+ w danej dyscyplinie nauki zależy od jej
pozycji międzynarodowej.
Kryterium I „Osiągnięcia naukowe i twórcze”
- Doprecyzowanie definicji monografii
- Wprowadzenie kategorii monografii wybitnych
- Rezygnacja z różnicowania punktacji za monografie
w zależności od języka
- Modyfikacja zasad przyznawania punktów za monografie wieloautorskie
- Zmiana definicji parametrów dorobku artystycznego,
w tym wprowadzenie kategorii dzieł wybitnych
-
- Podwyższenie punktacji za patenty
Nowe zasady oceny monografii naukowych
•  Doprecyzowanie definicji i wykluczeń
•  Rezygnacja z wyróżniania języków obcych oraz kategorii języka
podstawowego - wszystkie po 25 pkt
•  Wprowadza się kategorię „monografii wybitnych” - 50 pkt
Kryterium I W Grupie Nauk o Sztuce i Twórczości
Artystycznej zmiany zmierzają w kierunku
- Zwiększenia dopuszczalnego udziału dorobku artystycznego
w kryterium I
- Uściślenia zasad punktacji dorobku artystycznego,
w tym wprowadzenia kategorii „dzieło wybitne”
- Podwyższenia wagi eksperckiej oceny w kryterium IV
Kryterium I Kryterium II „Potencjał naukowy”
- Stymulowanie zaangażowania w prowadzeniu międzynarodowych i
krajowych projektów badawczych oraz innowacyjnych projektów
finansowanych przez przedsiębiorców
- Znacznie zmniejszenie liczby nisko punktowanych podkryteriów,
- Dodatkowe punkty za posiadanie certyfikowanej bazy badawczej
Aktywność JN w pozyskiwaniu, koordynowaniu
i realizacji projektów międzynarodowych
Określenie punktacji projektu na podstawie:
•  rodzaju projektu – 5 klas programów ze względu na wagę i znaczenie
•  roli JN w hierarchii zarządzania projektem - 3 poziomy
•  wysokość finansowania
•  wyliczenie punktacji projektu z ograniczeniem punktowym
i włączenie do kryterium 2 „potencjał naukowy”.
Kryterium II Kryterium III
„Efekty materialne działalności naukowej”
- Doprecyzowanie zasad punktacji przychodów jednostki
- Nowy wzór KARTY APLIKACJI LUB WDROŻENIA PRODUKTU
Doprecyzowanie zasad punktacji przychodów jednostki
w ramach kryterium 3 „Efekty materialne działalności
naukowej”
Punktowane będą:
Udokumentowane koszty realizacji prac naukowych lub rozwojowych poniesione
przez jednostkę naukową w okresie oceny i pokryte z uzyskanych środków
finansowych w wyniku postępowań konkursowych krajowych i zagranicznych
– 2 pkt. za każde 50 tys. zł.*
z wyłączeniem środków 1) przyznanych na finansowanie działalności statutowej; 2) uzyskanych wyłącznie
na rozwój infrastruktury badawczej; 3) pozyskanych na działalność dydaktyczną; 4) uzyskanych ze świadczenia
usług nie będących pracami naukowymi lub rozwojowymi, a w szczególności ze świadczenia usług
dydaktycznych oraz usług medycznych finansowanych przez NFZ
*
Kryterium III Innowacyjność oraz Karta Aplikacji lub Wdrożenia Produktu
Zaproponowano, że innowacyjność badań naukowych i prac rozwojowych będzie
mierzona zakresem zastosowania tj. aplikacji (bez wymiernych korzyści
materialnych ocenianej na podstawie zasięgu oddziaływania) lub wdrożenia
(ocenianego wysokością przychodu). Do tego celu opracowano nową Kartę
Aplikacji lub Wdrożenia Produktu oraz sposób naliczania punktów.
Proponowane wartości punktowe odnośnie do zasięgu oddziaływania lub wysokości przychodu
Zasięg oddziaływania - aplikacji Punkty
(wagi) Przychody z wdrożenia [zł] w grupie nauk: NŻ, HS, S-TA SI lokalny (zasięg nie przekraczający
jednego województwa) 2 10 tys. < P ≤ 100 tys. 100 tys.< P ≤ 1 mln krajowy (zasięg większy niż
jednego województwa) 4 100 tys. < P ≤ 1 mln 1 mln < P ≤ 5 mln międzynarodowy (zasięg większy
niż na terenie jednego państwa) 8 P > 1 mln P > 5 mln Kryterium III Kryterium IV „Inne osiągnięcia działalności naukowej”
-­‐ Zmodyfikowano tą ocenę wprowadzając cztery parametry podzielone
na 2 grupy
- Doprecyzowano ocenę innych efektów działalności naukowej JN,
a zwłaszcza zwiekszono punktację za:
1) efekty badań naukowych o znaczeniu międzynarodowym,
2) udokumentowane zastosowania wyników badań naukowych
lub prac rozwojowych o dużym znaczeniu społecznym
(ochrony zdrowia, środowiska, bezpieczeństwo),
3) pozycję międzynarodową jednostki na tle GWO, ze
szczególnym uwzględnieniem udziału w realizacji projektów
międzynarodowych, a w naukach HS i TA także jej
oddziaływanie na rozwój społeczeństwa w dłuższym
horyzoncie czasowym
Pozostałe zasady i parametry wymagające zmian
•  N0 – liczba pracowników zaliczanych do liczby N, którzy byli zatrudnieni
przez okres co najmniej 3 lat
•  Zmiany niektórych wag kryteriów
•  Patenty – zwiększenie punktacji za udzielony patent krajowy - 30 pkt.
i międzynarodowy - 35 pkt., a za wdrożenie patentu - 30 pkt.
•  Zrezygnować z punktowania zgłoszeń patentowych.
•  Ujednolicić sposób podawania środków finansowych w ankiecie JN
•  Podniesiono wartość punktową publikacji (dotyczy pełnych publikacji, a nie streszczeń)
w Materiałach Konferencyjnych uwzględnianych w WoS do najniższej wartości
punktowej czasopisma naukowego na liście A
Podsumowanie projektu zmian
Systemowe – porównanie parami, GWO i NJN, Kategoria A+,
wdrożenia i innowacyjność, umiędzynarodowienie
Kryterium 1 – monografie, patenty, działalność artystyczna
Kryterium 2 – wyeliminowanie wielu drobnych informacji,
baza laboratoryjna, zaangażowanie
w projektach badawczych
Kryterium 3 – koszty poniesione na działalność naukową,
karta aplikacji i wdrożeń
Kryterium 4 – sprecyzowanie osiągnięć
Uwagi i wątpliwości Kierownictwa MNiSW i KPN
- Kategoria A+ (podkryteria, wartości brzegowe i in.)
- Zmniejszenie zbieranych i analizowanych danych ,
w tym zmniejszenie liczby ocenianych publikacji z 3N do 1N
- Punktacja czasopism naukowych i monografii
- Mobilność pracowników i „sztuczne” zatrudnianie
- Wagi kryteriów i relacje punktowe podkryteriów
- Charakter list parametrów; otwarte, czy zamknięte,
np. programów międzynarodowych, nagród itp.
- Inne szczegóły dotyczące definicji elementów oceny,
ich dokumentowanie, ograniczenia punktowe itp.