Naukometria w ocenie parametrycznej o ocenie wniosków NCN
Transkrypt
Naukometria w ocenie parametrycznej o ocenie wniosków NCN
Naukometria w ocenie parametrycznej oraz ocenie projektów NCN Marek Świtoński Ocena dorobku naukowego Ekspercka - ocena wartości naukowej osiągnięcia na tle osiągnięć nauki z danego obszaru, wykonana przez kompetentnych specjalistów Naukometryczna - prestiż czasopism (IF) - pozycja w gronie współautorów (pierwszy, korespondencyjny) - cytowania ( w tym bez autocytowań) - wskaźnik Hirscha Czy ocena naukometryczna wiarygodnie opisuje dorobek naukowy? tak i nie Tak: -Pokazuje wkład badacza do dyskursu naukowego w wymiarze światowym (prestiż czasopisma - IF, cytowania itp.) - Informuje o percepcji opublikowanego osiągnięcia przez światowe środowisko naukowe Nie: - Nie odzwierciedla rzeczywistej wartości naukowej osiągnięcia Dlaczego naukometria jest szeroko stosowana? - Uniwersalne, proste i powszechnie dostępne parametry (IF, punkty MNiSzW, liczba cytowań, wskaźnik H) - Łatwa „obróbka” statystyczna – szczególnie przy analizie porównawczej (np. ocena parametryczna) - Przydatne w porównaniach wewnątrz- i międzydyscyplinowych (np. punktacja MNiSzW) Ocena parametryczna oparta jest o wskaźniki naukometryczne Ocena projektów NCN oparta jest o wskaźniki naukometryczne i ocenę ekspercką Główne kryteria oceny projektów w NCN - Dorobek naukowy kierownika projektu (40% oceny)!!! - publikacje z ostatnich 5 lat (IF czasopism, cytowania) - całkowity dorobek: suma cytowań (bez autocytowań!), wskaźnik Hirscha - rozliczenie zakończonych projektów (publikacje i ich cytowania, IF czasopism, przypisywanie finansowania badań do więcej niż 1. projektu) - Wartość naukowa projektu, z punktu widzenia nauk podstawowych (40% oceny) - hipoteza badawcza (oryginalna/nowatorska?, czy replikująca wcześniejsze badania?) - adekwatność metod badawczych i materiału badawczego - przygotowanie merytoryczne i infrastrukturalne do przeprowadzenia badań System zastosowany przez NCN ogranicza możliwość uzyskania finansowania projektów badawczych przez wnioskodawców legitymujących się słabym (pod względem naukometrycznym) dorobkiem naukowym Dlaczego wielu wnioskodawców ma słaby lub dość słaby dorobek naukowy, mierzony wskaźnikami naukometrycznymi (cytowania, H) ? Publikowanie prac w czasopismach o niskim IF, daje niewielkie szanse na ich wejście do międzynarodowego obiegu naukowego. Konsekwencja: a) Niewiele lub brak cytowań b) Niski wskaźnik Hirscha c) Autocytowania nie rozwiązują problemu Jak to zmienić? a) publikować mniej prac, ale o kompleksowym spojrzeniu i w lepszych czasopismach (z wyższym IF, np. >1,0) b) unikać czasopism o lokalnym zasięgu i bardzo niskich liczbach cytowań (np. African ….., Turkish ….. itd) Liczba czasopism w bazie JCR oraz ich wartości IF, w poszczególnych dyscyplinach, mieszczą się w silnie różniących się zakresach: - Maksimum i minimum - Mediana - Zakres IF dla 10% najlepszych czasopism Journal Citation Reports – wybrane dyscypliny „nauk o życiu” Dyscyplina Liczba czasopism IF - mediana Zakres IF dla 10% najlepszych czasopism Nr 1 10% (nr kolejny) Agriculture, Dairy and Animal Science 55 0,698 (nr 28) 2,885 1,918 (nr 6) Agronomy Biochemistry and Molecular Biology 80 290 1,000 (nr 40) 2,857 (nr 145) 5,204 34,317 2,733 (nr 8) 7,655 (nr 29) Biology Biotechnology and Applied Microbiology 85 158 1,540 (nr 43) 2,168 (nr 76) 11,452 29,008 4,954 (nr 9) 5,442 (nr 16) Cell Biology Ecology Endocrinology and Meatbolism 181 134 122 3,263 (nr 91) 1,829 (nr 67) 2,480 (nr 61) 39,123 17,557 19,929 9,424 (nr 18) 5,145 (nr 13) 6,741 (nr 12) Entomology Food Science and Technology 86 128 0,881 (nr 43) 1,179 (nr 64) 11,455 4,789 2,236 (nr 9) 2,999 (nr 13) Forestry Genetics and Heredity 59 158 0,868 (nr 30) 2, 556 (nr 79) 3,389 38,075 2,231 (nr 6) 6,373 (nr 16) Horticulture Microbiology Ornithology Physiology Plant Sciences Reproductive Biology 32 114 21 79 190 28 0,750 (nr 16) 2,403 (nr 57) 0,783 (nr 11) 2,119 (nr 40) 1,377 (nr 95) 2,44 (nr 14) 3,297 21,182 2,430 26,866 25,962 9,234 2,797 (nr 3) 7,910 (nr 11) 2,280 (nr 2) 4,746 (nr 8) 4,030 (nr 19) 4,009 (nr 3) Veterinary Sciences Zoology 145 146 0,812 (nr 73) 1,064 (nr 73) 4,060 5,333 1,992 (nr 15) 2,447 (nr 15) Niestety czasopisma z zakresu „Animal Science” mają niskie wskaźniki naukometryczne (IF, wskaźnik Hirscha) Większość polskich czasopism z obszaru Animal Science jest „na dorobku”, czyli od niedawna są indeksowane w bazie JCR W bazie JCR jest 126 polskich czasopism , ale ich IF-y są niskie Polskie czasopisma z IF - cd Ile jest w bazie Web of Science (WoS) cytowań publikacji, które ukazały się w polskich czasopismach uwzględnionych w bazie JCR ? Czasopisma różnią się liczbami cytowań i wskaźnikiem Hirscha Czasopismo IF’2011 Cytow. w 2012 Wskaźnik H Niektóre polskie czasopisma z nauk o życiu w JCR Journal of Physiology and Pharmacology 2,267 2489 43 Reproductive Biology 1,921 134 11 Journal of Applied Genetics 1,664 546 19 Journal of Apicultural Science 0,674 42 5 Folia Biologica (Kraków) 0,657 254 17 Journal of Animal and Feed Sciences 0,636 190 20 Polish Journal of Veterinary Sciences 0,565 250 10 Animal Science Papers and Reports 0,553 160 7 Bulletin of the Veterinary Inst in Pulawy 0,414 420 11 Annals of Animal Science 0,389 54 4 Przykładowe czasopisma zagraniczne w JCR, z obszaru „Animal Sciences” Animal 1,744 1700 26 Livestock Science 1,506 2300 26 Journal of Animal Breeding and Genetics 1,455 840 26 Czy dorobek publikacyjny i wskaźniki naukometryczne (cytowania bez autocytowań, wskaźnik Hirscha) można szybko poprawić? Niestety , NIE! Zmiany zachodzą powoli, a ich przyspieszenie jest możliwe poprzez podniesienie kryteriów awansu naukowego (dr hab., prof.) przez rady wydziałów/instytutów, w zakresie zwiększenia wymagań jakościowych dotyczących dorobku publikacyjnego Dziękuję za uwagę