Naukometria w ocenie parametrycznej o ocenie wniosków NCN

Naukometria
w ocenie parametrycznej oraz ocenie projektów NCN
Marek Świtoński
Ocena dorobku naukowego
Ekspercka
- ocena wartości naukowej osiągnięcia na tle osiągnięć nauki z
danego obszaru, wykonana przez kompetentnych
specjalistów
Naukometryczna
- prestiż czasopism (IF)
- pozycja w gronie współautorów (pierwszy, korespondencyjny)
- cytowania ( w tym bez autocytowań)
- wskaźnik Hirscha
Czy ocena naukometryczna wiarygodnie
opisuje dorobek naukowy?
tak i nie
Tak:
-Pokazuje wkład badacza do dyskursu naukowego w wymiarze
światowym (prestiż czasopisma - IF, cytowania itp.)
- Informuje o percepcji opublikowanego osiągnięcia przez
światowe środowisko naukowe
Nie:
- Nie odzwierciedla rzeczywistej wartości naukowej osiągnięcia
Dlaczego naukometria jest szeroko stosowana?
- Uniwersalne, proste i powszechnie dostępne parametry (IF,
punkty MNiSzW, liczba cytowań, wskaźnik H)
- Łatwa „obróbka” statystyczna – szczególnie przy analizie
porównawczej (np. ocena parametryczna)
- Przydatne w porównaniach wewnątrz- i międzydyscyplinowych
(np. punktacja MNiSzW)
Ocena parametryczna oparta jest o
wskaźniki naukometryczne
Ocena projektów NCN oparta jest o
wskaźniki naukometryczne i ocenę
ekspercką
Główne kryteria oceny projektów w NCN
- Dorobek naukowy kierownika projektu (40% oceny)!!!
- publikacje z ostatnich 5 lat (IF czasopism, cytowania)
- całkowity dorobek: suma cytowań (bez autocytowań!),
wskaźnik Hirscha
- rozliczenie zakończonych projektów (publikacje i ich
cytowania, IF czasopism, przypisywanie
finansowania badań do więcej niż 1. projektu)
- Wartość naukowa projektu, z punktu widzenia nauk
podstawowych (40% oceny)
- hipoteza badawcza (oryginalna/nowatorska?, czy
replikująca wcześniejsze badania?)
- adekwatność metod badawczych i materiału
badawczego
- przygotowanie merytoryczne i infrastrukturalne do
przeprowadzenia badań
System zastosowany przez NCN ogranicza
możliwość uzyskania finansowania projektów
badawczych przez wnioskodawców
legitymujących się słabym (pod względem
naukometrycznym) dorobkiem naukowym
Dlaczego wielu wnioskodawców ma słaby lub
dość słaby dorobek naukowy, mierzony
wskaźnikami naukometrycznymi (cytowania, H) ?
Publikowanie prac w czasopismach o niskim IF, daje niewielkie
szanse na ich wejście do międzynarodowego obiegu naukowego.
Konsekwencja:
a) Niewiele lub brak cytowań
b) Niski wskaźnik Hirscha
c) Autocytowania nie rozwiązują problemu
Jak to zmienić?
a) publikować mniej prac, ale o kompleksowym spojrzeniu i w
lepszych czasopismach (z wyższym IF, np. >1,0)
b) unikać czasopism o lokalnym zasięgu i bardzo niskich liczbach
cytowań (np. African ….., Turkish ….. itd)
Liczba czasopism w bazie JCR oraz ich wartości
IF, w poszczególnych dyscyplinach, mieszczą się
w silnie różniących się zakresach:
- Maksimum i minimum
- Mediana
- Zakres IF dla 10% najlepszych czasopism
Journal Citation Reports – wybrane dyscypliny „nauk o życiu”
Dyscyplina
Liczba
czasopism
IF - mediana
Zakres IF dla 10% najlepszych
czasopism
Nr 1
10% (nr kolejny)
Agriculture, Dairy and Animal Science
55
0,698 (nr 28)
2,885
1,918 (nr 6)
Agronomy
Biochemistry and Molecular Biology
80
290
1,000 (nr 40)
2,857 (nr 145)
5,204
34,317
2,733 (nr 8)
7,655 (nr 29)
Biology
Biotechnology and Applied Microbiology
85
158
1,540 (nr 43)
2,168 (nr 76)
11,452
29,008
4,954 (nr 9)
5,442 (nr 16)
Cell Biology
Ecology
Endocrinology and Meatbolism
181
134
122
3,263 (nr 91)
1,829 (nr 67)
2,480 (nr 61)
39,123
17,557
19,929
9,424 (nr 18)
5,145 (nr 13)
6,741 (nr 12)
Entomology
Food Science and Technology
86
128
0,881 (nr 43)
1,179 (nr 64)
11,455
4,789
2,236 (nr 9)
2,999 (nr 13)
Forestry
Genetics and Heredity
59
158
0,868 (nr 30)
2, 556 (nr 79)
3,389
38,075
2,231 (nr 6)
6,373 (nr 16)
Horticulture
Microbiology
Ornithology
Physiology
Plant Sciences
Reproductive Biology
32
114
21
79
190
28
0,750 (nr 16)
2,403 (nr 57)
0,783 (nr 11)
2,119 (nr 40)
1,377 (nr 95)
2,44 (nr 14)
3,297
21,182
2,430
26,866
25,962
9,234
2,797 (nr 3)
7,910 (nr 11)
2,280 (nr 2)
4,746 (nr 8)
4,030 (nr 19)
4,009 (nr 3)
Veterinary Sciences
Zoology
145
146
0,812 (nr 73)
1,064 (nr 73)
4,060
5,333
1,992 (nr 15)
2,447 (nr 15)
Niestety czasopisma z zakresu „Animal Science” mają
niskie wskaźniki naukometryczne (IF, wskaźnik Hirscha)
Większość polskich czasopism z obszaru Animal Science
jest „na dorobku”, czyli od niedawna są indeksowane w
bazie JCR
W bazie JCR jest 126 polskich czasopism , ale ich IF-y są niskie
Polskie czasopisma z IF - cd
Ile jest w bazie Web of Science (WoS) cytowań
publikacji, które ukazały się w polskich czasopismach
uwzględnionych w bazie JCR ?
Czasopisma różnią się liczbami cytowań i wskaźnikiem Hirscha
Czasopismo
IF’2011
Cytow. w 2012
Wskaźnik H
Niektóre polskie czasopisma z nauk o życiu w JCR
Journal of Physiology and Pharmacology
2,267
2489
43
Reproductive Biology
1,921
134
11
Journal of Applied Genetics
1,664
546
19
Journal of Apicultural Science
0,674
42
5
Folia Biologica (Kraków)
0,657
254
17
Journal of Animal and Feed Sciences
0,636
190
20
Polish Journal of Veterinary Sciences
0,565
250
10
Animal Science Papers and Reports
0,553
160
7
Bulletin of the Veterinary Inst in Pulawy
0,414
420
11
Annals of Animal Science
0,389
54
4
Przykładowe czasopisma zagraniczne w JCR, z obszaru „Animal Sciences”
Animal
1,744
1700
26
Livestock Science
1,506
2300
26
Journal of Animal Breeding and Genetics
1,455
840
26
Czy dorobek publikacyjny i wskaźniki naukometryczne
(cytowania bez autocytowań, wskaźnik Hirscha)
można szybko poprawić?
Niestety , NIE!
Zmiany zachodzą powoli, a ich przyspieszenie jest
możliwe poprzez podniesienie kryteriów awansu
naukowego (dr hab., prof.) przez rady
wydziałów/instytutów, w zakresie zwiększenia wymagań
jakościowych dotyczących dorobku publikacyjnego
Dziękuję za uwagę