zasady oceny parametrycznej jednostek naukowych 2017 · zasady oceny parametrycznej jednostek...

26
Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 1 Zasady oceny parametrycznej jednostek naukowych 2017 (dot. oceny dorobku 2013-2016) Komitet Ewaluacji Jednostek Naukowych Kategorie (bez zmian) A+ - poziom wiodący w skali kraju, A – poziom bardzo dobry, B - poziom akceptowalny z rekomendacją wzmocnienia działalności naukowej, C - poziom niezadowalający.

Upload: nguyendan

Post on 28-Feb-2019

269 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

1

Zasady oceny parametrycznej jednostek naukowych 2017

(dot. oceny dorobku 2013-2016)

Komitet Ewaluacji Jednostek Naukowych

Kategorie (bez zmian)

• A+ - poziom wiodący w skali kraju,

• A – poziom bardzo dobry,

• B - poziom akceptowalny z rekomendacją wzmocnienia działalności naukowej,

• C - poziom niezadowalający.

Page 2: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

2

Rozporządzenie 2015• Rozporządzenie przygotowane przez MNiSW na

podstawie propozycji KEJN, uwzględniających – doświadczenia KEJN i zespołów ekspertów z oceny

parametrycznej 2013,– konsultacje

• kierownictwo MNiSW, KRASP, KRAUM, Prezydium PAN, RGNiSW, RGIB, KPN, wydziały PAN,

• badanie ankietowe wśród kierowników jednostek naukowych.

• Podstawowe założenie: parametryzacja 2017 winna być kontynuacją poprzedniej, z uwzględnieniem zmian i uzupełnień w niektórych obszarach

Badanie ankietowe kierowników JN• Wyniki parametryzacji zostały stosunkowo dobrze, choć nie bezkrytycznie

przyjęte przez kierowników jednostek naukowych, którzy deklarowali zrozumienie dla zasad parametryzacji.– podział na dwie wyraźne grupy zadowolonych i niezadowolonych z procesu oceny

parametrycznej (silnie korelowany z zadowoleniem z otrzymanej kategorii naukowej)

• Najwięcej kontrowersji wzbudziła ekspercka ocena czwartego kryterium– wskazywano zbyt dużą dowolność ekspertów w ocenie, którym towarzyszyły

jednocześnie nazbyt lakoniczne uzasadnienia

• Jako największy problem oceny parametrycznej wskazywano niejednorodność grup wspólnej oceny– 39,1% badanych deklarowało, że jednostki w ich GWO są niepodobne, a więc

nieporównywalne, a porównywanie odmiennych jednostek naukowych zasadniczo podważa legitymizację oceny parametrycznej

• Kierownicy w przytłaczającej większości (85,4%) wskazywali na konieczność większego udostępnienia informacji o dorobku jednostek naukowych dla wszystkich zainteresowanych w środowisku naukowym

• Paradoks:– słabe strony oceny parametrycznej: konieczność sprawozdawania zbyt dużej liczby

zdarzeń ewaluacyjnych, które nie mają prawie żadnego wpływu na końcową ocenę– z drugiej strony: sugestie uwzględnienia kolejnych specyficznych dla danego obszaru

szczegółowych zdarzeń ewaluacyjnych

Page 3: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

3

Zaangażowani w proces ewaluacji:• KEJN - 30 specjalistów ze wszystkich dziedzin • ZE - 180 ekspertów • 6 pracowników obsługi (MNiSW)

Ocenie podlegało prawie 1.000 JN, w tym- uczelniane JN – ok. 750 - Instytuty PAN - 76- Instytuty Badawcze – ok. 120- inne - ok. 20

ok. 100.000 pracowników ok. 1.000.000 zdarzeń,

w tym ponad 700.000 publikacji naukowych

Ewaluacja 2013

Charakter oceny

• Ocena ma charakter parametryczny z elementami oceny eksperckiej

Stopień parametryzacji

System ekspercki

System parametryczny

• IV kryterium• jednostki A+• monografie

wybitne

• I-III kryterium: zdefiniowane parametry

System mieszany

Page 4: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

4

Etapy procesu oceny JN

1. Klasyfikacja JN– przypisanie do GWO

2. Parametryzacja – ocena działalności JN na podstawie przyjętych

kryteriów charakteryzujących daną grupę nauk– dokonania za lata 2013-16

3. Kategoryzacja– propozycje KEJN– przyznanie przez MNiSW kategorii naukowej

4. Ew. odwołania

Grupy Wspólnej Oceny

• Dotychczas:– odrębna ocena wg typów jednostek:

• JN uczelni, PAN, IB, inne

– przyporządkowanie do jednej GWO, wg dominującej dziedziny nauki

Konieczność uwzględnienia interdyscyplinarności => • Nowe zasady:

– odrębna ocena wg typów jednostek: • JN uczelni, PAN, IB, inne (bz)

– przyporządkowanie do jednej GWO, wg dziedziny nauki, analiza (nie)jednorodności:

• działalność naukowo-badawcza pracowników (profil publikacyjny)• uprawnienia do nadawania stopni naukowych• profil kadry naukowej (stopnie i tytuły)

– wyodrębnienie jednostek niejednorodnych• osobne GWO w każdej z grup nauk (HS, SI, NZ, TA)

Page 5: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

5

Grupy Wspólnej Oceny

• GWO są tworzone dla: – dziedzin (np. jednostki reprezentujące dziedzinę nauk

ekonomicznych) lub

– grup dziedzin bądź dyscyplin naukowych (np. GWOobejmująca jednostki z dyscypliny filozofia oraz dziedziny nauk teologicznych),

osobno dla poszczególnych typów jednostek

– podstawowych jednostek naukowych uczelni, instytutów naukowych PAN, instytutów badawczych i innych jednostek

Obszar: Nauki Humanistyczne i Społeczne (HS)

Dziedziny: EK FB FT HS SP PRTypy JN:

JN uczelni

JN PAN

IB

inne

HS1EK

HS2EK HS2FB

HS4EK

HS1FB HS2HS HS1SP

HS2HS

HS3HS HS3SPHS3EK

HS1SP

HS4SP

HS1PR

HS1PRHS2FT

HS1FTHS1EK

Page 6: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

6

Niejednorodne jednostki naukowe

• NJN– niejednorodność ustalana na podstawie profilu działalności naukowej /

badawczo-rozwojowej pracowników– niejednorodność – działalność pracowników JN prowadzona w różnych

obszarach wiedzy– próg dla zakwalifikowania jako NJN:

• Komitet uznaje jednostkę naukową za NJN, jeżeli stopień niejednorodności określony jako udział pracowników prowadzących działalność naukową lub badawczo-rozwojową w obszarze wiedzy innym niż obszar wiedzy wiodący dla danej jednostki naukowej w ogólnej liczbie pracowników N, wynosi co najmniej 25%

– próg dla oceny poszczególnych obszarów • odrębną ocenę przeprowadza się w zakresie tych obszarów wiedzy, dla

których udział procentowy pracowników prowadzących działalność naukową lub badawczo-rozwojową w danym obszarze wiedzy w stosunku do ogólnej liczby pracowników jednostki naukowej wynosi co najmniej 10%.

Niejednorodne jednostki naukowe

jednostka jednorodna

jednostka niejednorodna

Page 7: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

7

Ocena NJN• Ocena niejednorodnych jednostek naukowych dokonywana jest

podobnie jak w przypadku pozostałych jednostek – w porównaniu z jednostkami referencyjnymi A i B– wartości ocen jednostek referencyjnych są wyznaczane jako średnie

ważone ocen jednostek referencyjnych zatwierdzonych dla GWOutworzonych z jednostek naukowych tego samego rodzaju co oceniana NJN i prowadzących działalność w obszarach wiedzy właściwych dla działalności naukowej danej NJN

• wagami są udziały procentowe pracowników prowadzących działalność naukową lub badawczo-rozwojową w danym obszarze wiedzy w stosunku do ogólnej liczby pracowników jednostki naukowej

– W parametrach jednostek referencyjnych uwzględnia się jedynie te obszary wiedzy, dla których udział procentowy pracowników prowadzących działalność naukową lub badawczo-rozwojową w danym obszarze, w stosunku do ogólnej liczby pracowników jednostki naukowej, wynosi co najmniej 10%.

Dziedziny: Z SP EK ?x

NZ1Z HS1SP HS1EK

np.: 55% 30% 10% 5%

• Jednostka referencyjna wyznaczana na podstawie obszarów nauki reprezentowanych w JN

Ocena NJN

Obszary: N. przyrodn. N. społeczne N. …X

X1x

Page 8: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

8

Kryteria oceny JN

I. Osiągnięcia naukowe i twórcze

II. Potencjał naukowy

III. Praktyczne efekty działalności naukowej i artystycznej

IV. Pozostałe efekty działalności naukowej i artystycznej

• Publikacje (w czasopismach), monografie, patenty, działalność artystyczna

• Uprawnienia, stopnie i tytuły, baza laboratoryjna, zaangażowanie w projektach badawczych

• Koszty poniesione na działalność naukową, pozyskane środki, aplikacje i wdrożenia

• Najważniejsze osiągnięcia jednostki

Ocena parametryczna

H-S TA N. Ścisłe + Inżynierskie Nauki o życiu

U PAN IB U PAN IB

1. Osiągnięcia naukowe i twórcze 65 65

(60)65 65 40

(35)65(70)

70(75)

60

2. Potencjał naukowy 15 15(20)

10 10 10 10(5)

10(5)

10(5)

3. Praktyczne efekty działalności naukowej i art. 5 5 15 15 40

(45)15 10 20

(25)

4. Pozostałe efekty działalności naukowej i art.

15 15 10 10 10 10 10 10

• Wagi przypisane poszczególnym kryteriom:

Page 9: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

9

Ocena parametryczna• Postulowane wagi (badanie kwestionariuszowe)

0%

10%

20%

30%

40%

50%

60%

kyterium I kryterium II kryterium III kryterium IV

humanistyczne społeczne o zyciu ścisłe artystyczne

Kryterium I

Ocena osiągnięć naukowych i twórczych jednostki naukowej H-S S i I Ż S TA

1) publikacje w czasopismach naukowych wymienionych w części A wykazu ministra x x x x

2) publikacje w czasopismach naukowych wymienionych w części B wykazu ministra x x x x

3) publikacje w czasopismach naukowych wymienionych w części C wykazu ministra x x x x

4) publikacje w innych czasopismach zagranicznych (min. 0,5 arkusza wyd.) x x x x

5) publikacje w recenzowanych materiałach z konferencji międzynarodowych uwzględnionych

w uznanej bazie publikacji o zasięgu międzynarodowym (np. Web of Science)x x x x

6) monografie naukowe, redakcja monografii, rozdziały w monografiach x x x x

7) patenty na wynalazki, prawa ochronne na wzory użytkowe i znaki towarowe, prawa z

rejestracji wzorów przemysłowych lub topografii układu scalonego oraz zgłoszenia

wynalazków

(x) x x x

8) wyłączne prawa do odmiany roślin x

9) wykorzystane autorskie prawa majątkowe do utworu z zakresu architektury i urbanistyki

lub sztuk projektowych(x) (x) -

10) dzieła architektoniczne lub wzornicze (x) (x)

11) dzieła artystyczne x

Page 10: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

10

Kryterium I

• Istotna AFILIACJA

Kryterium I

• Publikacje w czasopismach

– punktacja czasopism

• listy A, B, C

• ocena dokonywana nie rzadziej niż co dwa lata

• kryteria, tryb oceny czasopism naukowych oraz sposób ustalania liczby punktów za zamieszczone w nich publikacje -> załącznik 4

• ocena dokonywana przez Zespół specjalistyczny do

oceny czasopism naukowych

Page 11: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

11

Kryterium I

• Publikacje w czasopismach

Kryterium I

• Publikacje w czasopismach

Page 12: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

12

• Monografie

• Monografie wybitne

• Potrzeba docenienia najbardziej wartościowych monografii

=> podwójna punktacja

Page 13: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

13

Liczba uwzględnianych osiągnięć • ważona liczba publikacji i innych osiągnięć naukowych i twórczych

nie może przekroczyć 3N-2N0– N – liczba pracowników zatrudnionych w jednostce naukowej przy

realizacji badań naukowych lub prac rozwojowych • liczba N wyliczana na podstawie informacji przekazywanych przez JN we wnioskach o

dotację statutową jako średnią z lat, w których JN występowała o dotacje w okresie podlegającym ocenie:

– średnia arytmetyczna z okresu objętego ankietą– pracownicy w przeliczeniu na pełen etat– na podstawie składanych corocznie oświadczeń – uczelniane JN: pracownicy naukowo-dydaktyczni, pracownicy naukowi, oraz pracownicy

naukowo-techniczni i inżynieryjno-techniczni, zatrudnieni w celu wykonywania prac pomocniczych w badaniach naukowych lub pracach rozwojowych

– N0 - liczba pracowników (w przeliczeniu na pełen etat), uwzględnianych w N, którzy byli zatrudnieni w jednostce naukowej przez co najmniej 3 lata i nie byli autorami lub współautorami osiągnięć naukowych

• liczba N0 nie obejmuje pracowników inżynieryjno- technicznych oraz inżynieryjnych i technicznych

• Liczba N0 nie obejmuje pracowników, którzy w ocenianym okresie przebywali na urlopie macierzyńskim, urlopie na warunkach urlopu macierzyńskiego, dodatkowym urlopie macierzyńskim, dodatkowym urlopie na warunkach urlopu macierzyńskiego, urlopie ojcowskim, urlopie rodzicielskim lub urlopie wychowawczym, albo pobierali zasiłek chorobowy lub świadczenia rehabilitacyjne w związku z niezdolnością do pracy, w tym spowodowaną chorobą wymagającą rehabilitacji leczniczej łącznie przez okres co najmniej 3 lat

Liczba uwzględnianych osiągnięć • część osiągnięć uwzględnianych w karcie oceny JN

może pochodzić od osób spoza N: – np. pracownicy dydaktyczni, doktoranci, byli pracownicy

– Do osiągnięć naukowych lub twórczych JN zalicza się publikacje autorów nieuwzględnionych przy określeniu liczby N – jeżeli wskazali tę jednostkę w afiliacji

• liczba tych publikacji nie może przekroczyć 20% wartości 3N–2N0

– Do osiągnięć naukowych JN są zaliczane monografie naukowe i rozdziały w monografiach autorstwa osób nieuwzględnionych przy określeniu liczby N, jeżeli osoby te wskazały jednostkę w afiliacji

• ich liczba nie może stanowić więcej niż 20% wszystkich monografii naukowych i rozdziałów w monografiach uwzględnianych przy kompleksowej ocenie w poszczególnych grupach nauk

Page 14: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

14

Osiągnięcia naukowe jednostki

autorzy lub współautorzy zostali uwzględnieni przy określeniu liczby N i wskazali tę jednostkę w afiliacji; liczba publikacji osób spoza N: max 20% wartości 3N–2N0.

autor lub współautorzy

zostali uwzględnieni przy

określeniu liczby N;

zaliczane monografie

naukowe i rozdziały w

monografiach autorstwa

osób nieuwzględnionych przy

określeniu liczby N, jeżeli

osoby te wskazały jednostkę

w afiliacji - ich liczba nie

może stanowić więcej niż

20% wszystkich monografii

naukowych i rozdziałów w

monografiach

uwzględnianych przy

kompleksowej ocenie

Ocena parametrycznaI. Osiągnięcia naukowe i twórcze

zawartość koszyka = 3N-2N0

Lista A Lista B Lista CInne

zagraniczne czasopisma

w tym: do 20% wartości 3N-2N0 od autorów spoza N

do 10% wartości 3N-2N0

limit w stosunku do wartości 3N-2N0:

HS: 40% STA: 25%SI: 20%NŻ: 10%

w tym: do 20%

od autorów

spoza N

monografia = 25 pkt5 pkt15-50 pkt 1 - 15 pkt 10-25 pkt

PUBLIKACJE

punktacja przyznawana przez

Zespół ds. Oceny Czasopism Naukowych

Indeksowane recenzowane

materiały z konf. m-narodowych

15 pkt

Page 15: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

15

Kryterium I

– monografie naukowe

• doprecyzowanie definicji

• rezygnacja z wyróżnienia języków podstawowych i kongresowych

• bazowa punktacja: 25 pkt

• zmiana zasad punktacji wieloautorskich

• monografie wybitne: 50 pkt

Monografie i rozdziały w monografiach• łączna liczba autorów ≤ 3 = 25 pkt• łączna liczba autorów ≤ 3, monografia wybitna = 50 pkt• liczba autorów ≥ 4 i udział nie jest wyodrębniony:

25 ������� �ó�������ą�������

łą��������� �ó�

• liczba autorów ≥ 4, autorstwo rozdziałów oznaczone– bez redaktora, wszyscy autorzy zatrudnieni w JN: 15 / 30 pkt– rozdział w monografii = 5/10 pkt

• łącznie za rozdziały w jednej monografii naukowej nie więcej niż 15 / 30 pkt

• gdy liczba autorów rozdziału wynosi dwóch lub więcej, jednostka, której pracownikiem jest autor rozdziału, otrzymuje 2,5/10 pkt

– łączna objętość rozdziałów autorstwa osób zatrudnionych w ocenianej jednostce naukowej (w której jest także zatrudniony redaktor naukowy tomu) obejmuje minimum 6 arkuszy:

15 / 30 pkt– redakcja naukowa = 5/10 pkt

Page 16: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

16

Ocena I kryterium

Kryterium IIOcena potencjału naukowego jednostki naukowej H-S S i I Ż S TA

1) posiadanie uprawnień do nadawania stopni naukowych lub stopni w zakresie sztuki; x x x x

2) rozwój własnej kadry naukowej i udział w rozwoju naukowym osób niebędących

pracownikami jednostki naukowej;x x x x

3) mobilność pracowników jednostki naukowej, w tym pobyty naukowe pracowników

jednostki naukowej w innych ośrodkach naukowych oraz podmiotach wdrażających wyniki

badań naukowych lub prac rozwojowych

x x x x

4) inne osiągnięcia świadczące o potencjale naukowym jednostki naukowej:

- członkostwo pracowników jednostki naukowej we władzach zagranicznych lub międzynarodowych towarzystw,

organizacji i instytucji naukowych lub artystycznych, których członkowie pochodzą co najmniej z 10 państw, x x x x

- pełnienie funkcji redaktora naczelnego czasopisma naukowego wymienionego w części A wykazu MNiSW, x x x x- członkostwo w zespołach eksperckich powołanych przez organy i instytucje państwowe lub organy i instytucje

zagraniczne lub międzynarodowex x x x

- udział w jury konkursu lub festiwalu z dziedziny sztuk muzycznych, plastycznych (sztuk pięknych, sztuk

projektowych, konserwacji dzieł sztuki), filmowych lub teatralnych, zorganizowanych poza jednostką naukową

przez renomowany ośrodek artystyczny, instytucję kultury lub uczelnię artystyczną, x

- wydawanie przez jednostkę naukową czasopisma naukowego wymienionego w części A lub C wykazu ministra x x x x

5) posiadanie laboratoriów o kompetencjach potwierdzonych przez uprawnione organizacje

(akredytacja Polskiego Centrum Akredytacji, akredytacja zagranicznej jednostki

akredytacyjnej, notyfikacja lub certyfikacja), posiadanie laboratoriów certyfikowanych w

zakresie Dobrej Praktyki Laboratoryjnej oraz wdrożone międzynarodowe systemy jakości

x x

6) pozyskane środki finansowe na realizację projektów obejmujących badania naukowe lub

prace rozwojowe w ramach krajowych lub zagranicznych postępowań konkursowych.x x x x

Page 17: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

17

Kryterium II• Uprawnienia:

– dr = 30 pkt– hab. = 70 pkt – jeżeli w okresie objętym ankietą przeprowadzono na

podstawie każdego z nich co najmniej jedno postępowanie, nawet jeśli nie zakończyło się ono nadaniem stopnia naukowego doktora / stopnia naukowego doktora habilitowanego

• Stopnie / tytuły naukowe (uzyskane przez pracownika JN

lub osobę spoza JN)

– dr = 2 pkt– dr hab. = 7 pkt (+3 pkt – przed 35. rokiem życia)– prof. = 10 pkt (+5 pkt – przed 45. rokiem życia)

Kryterium II

• Mobilność naukowców

Page 18: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

18

Kryterium II• Inne osiągnięcia świadczące o potencjale naukowym

jednostki naukowej– Członkostwo pracowników jednostki naukowej we

władzach zagranicznych lub międzynarodowych towarzystw, organizacji i instytucji naukowych lub artystycznych, których członkowie pochodzą co najmniej z 10 państw − 2 pkt

– Pełnienie przez pracownika jednostki naukowej funkcji redaktora naczelnego czasopisma wymienionego w części A wykazu – 4 pkt

– Członkostwo pracowników jednostki naukowej w zespołach eksperckich powołanych przez organy i instytucje państwowe oraz instytucje zagraniczne lub międzynarodowe − 2 pkt

– Wydawanie czasopisma naukowego wymienionego w części A lub C wykazu− 3 pkt

maksimum 30 pkt

Kryterium II• Projekty międzynarodowe i krajowe obejmujące badania naukowe

lub prace rozwojowe– punkty = kwota (mln PLN) x mnożnik

– mnożniki:

– za jeden projekt maksymalnie 100 pkt

– łącznie maksimum 400 pkt

rola JN w zarządzaniu projektem

rod

zaje

pro

jek

tów

m.in. UE, NASA, CERN

m.in. NCN, NCBiR

koo

rdyn

ato

r

pro

jektu

co

na

jmn

iej

z d

wo

ma

wyko

na

wca

mi

zag

ran

iczn

ym

i

wyko

na

wca

pro

jektu

w r

am

ach

kon

sorc

jum

lu

b

pro

jektu

ind

yw

idu

aln

eg

o

Page 19: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

19

Ocena II kryterium

6 – rozwój kadry

7 – mobilność

10 – projekty badawczo-rozwojowe

5 - uprawnienia

8 – inne osiągnięcia

9 – baza laboratoryjna

grupa NŻ

Page 20: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

20

Kryterium III

III. Praktyczne efekty działalności naukowej

– realizowane lub współrealizowane projekty obejmujące badania naukowe lub prace rozwojowe, finansowane ze środków finansowych przyznanych w ramach

• międzynarodowych lub zagranicznych

• krajowych postępowań konkursowych

punkty nie za przyznane finansowanie, lecz zrealizowane wydatki

– ekspertyzy i opracowania naukowe lub działania artystyczne przygotowane na zlecenie przedsiębiorców, organizacji gospodarczych oraz instytucji państwowych, samorządowych, zagranicznych lub międzynarodowych

– innowacyjność mierzona zakresem zastosowania • aplikacje i wdrożenia

Kryterium III

Ocena praktycznych efektów działalności naukowej jednostki naukowej H-S S i I Ż S TA

1) środki finansowe wydatkowane przez jednostkę naukową w okresie objętym oceną na

realizację projektów, obejmujących badania naukowe lub prace rozwojowe - zał. 3x x x x

2) nowe technologie, materiały, wyroby, metody, procedury, oprogramowanie oraz odmiany

roślin opracowane na rzecz podmiotów innych niż oceniana jednostka naukowa, na podstawie

umów zawartych przez jednostkę naukową

x x x x

3)środki finansowe uzyskane z tytułu komercjalizacji wyników badań naukowych lub prac

rozwojowych lub know-how związanego z tymi wynikamix x x x

4) ekspertyzy, opracowania naukowe lub działania artystyczne opracowane na rzecz

podmiotów innych niż oceniana jednostka naukowa – z wyłączeniem certyfikatów i orzeczeń

w sprawie jakości

x x x x

5) przychody jednostki naukowej z tytułu wdrożenia przez podmioty inne niż oceniana

jednostka naukowa wyników badań naukowych lub prac rozwojowych zrealizowanych w

jednostce naukowej

x x x x

6) przychody jednostki naukowej z tytułu sprzedaży produktów będących efektem wdrożenia

w tej jednostce naukowej wyników zrealizowanych przez nią badań naukowych lub prac

rozwojowych

x x x x

7) aplikacje wyników badań naukowych lub prac rozwojowych lub działalności artystycznej

zrealizowanych w jednostce naukowej, zastosowanych w sferze gospodarczej lub społecznej

w podmiotach innych niż oceniana jednostka naukowa

x x x x

Page 21: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

21

Wdrożenia lub aplikacjeWdrożenia - przychody jednostki naukowej z tytułu wdrożenia produktów (innowacja, w szczególności: produktowa, procesowa, systemowa, organizacyjna, społeczna, w tym: wyrób, technologia metoda, procedura, oprogramowanie, odmiana roślin) będących wynikiem badań naukowych lub prac rozwojowych zrealizowanych w jednostce naukowej dokonanych przez inne podmioty

Aplikacje wyników badań naukowych lub prac rozwojowych lub działalności artystycznej zrealizowanych w jednostce naukowej, zastosowanych w sferze gospodarczej lub społecznej w podmiotach innych niż oceniana jednostka naukowa

Kryterium III• Efekty finansowe działalności naukowej i innowacyjnej

– Środki finansowe wydatkowane przez jednostkę naukową w okresie objętym oceną na realizację projektów określonych w załączniku nr 3 –1 pkt za każde 100 tys. zł

• Komercjalizacja wyników badań naukowych lub prac rozwojowych (tylko gdy efekty wykonane przez autora lub autorów w ramach działalności JN)– 1 pkt za każde 50 tys. zł przychodu jednostki naukowej lub uczelni, w

skład której wchodzi jednostka naukowa, lub spółki celowej z tego tytułu

• Wdrożenia wyników badań naukowych lub prac rozwojowych– 1 pkt za każde 50 tys. zł przychodu z tego tytułu

• Wdrożenia w jednostce naukowej wyników badań naukowych lub prac rozwojowych– 1 pkt za każdy 1 mln zł przychodu z tego tytułu, ale nie więcej niż 300

pkt

• Aplikacje wyników badań naukowych lub prac rozwojowych– zasięg mały lub lokalny − 1 pkt, średni lub krajowy − 2 pkt, duży lub

międzynarodowy − 4 pkt

Page 22: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

22

Kryterium III

Kryterium IV

IV. Pozostałe efekty działalności naukowej

– do 10 najważniejszych osiągnięć o znaczeniu naukowym, gospodarczym i ogólnospołecznym

– Doprecyzowano ocenę innych efektów działalności naukowej JN

Page 23: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

23

Kryterium IV Dotyczy:

1) efektów badań naukowych, prac rozwojowych lub działalności artystycznej o znaczeniu międzynarodowym, w tym publikacji, monografii naukowych i naukowych baz danych oraz działań artystycznych, mających szczególne znaczenie dla rozwoju nauki, kultury i sztuki lub dla dziedzictwa narodowego;

2) udokumentowanych zastosowań wyników badań naukowych lub prac rozwojowych o dużym znaczeniu społecznym, w szczególności w zakresie ochrony zdrowia, w tym jakości i bezpieczeństwa żywności, ochrony środowiska, ochrony porządku publicznego i bezpieczeństwa państwa, ochrony zabytków i dziedzictwa kulturowego, ochrony miejsc pracy, zwiększania innowacyjności gospodarki, w tym posiadania statusu państwowego instytutu badawczego;

3) osiągnięć świadczących o pozycji międzynarodowej jednostki naukowej na tle grupy wspólnej oceny, ze szczególnym uwzględnieniem udziału w realizacji międzynarodowych projektów obejmujących badania naukowe lub prace rozwojowe, w tym projektów branych pod uwagę przy ocenie osiągnięć jednostki naukowej w ramach kryterium II, posiadania logo HR Excellence in Research; w grupie nauk humanistycznych i społecznych oraz w grupie nauk o sztuce i twórczości artystycznej uwzględnia się także dokonania potwierdzające oddziaływanie jednostki naukowej na rozwój społeczeństwa w dłuższym przedziale czasowym;

4) organizacji lub współorganizacji konferencji (sympozjów, kongresów, warsztatów) międzynarodowych, w których co najmniej 1/3 uczestników wygłaszających referaty reprezentowała zagraniczne ośrodki naukowe, organizacji lub współorganizacji konferencji krajowych, w których wzięli udział przedstawiciele co najmniej 5 jednostek naukowych, a także upowszechniania wiedzy, w tym organizacji festiwali nauki i innych form promocji i popularyzowania nauki, oraz działalności popularnonaukowej.

0-50 pkt

0-50 pkt

Jednostki referencyjne

• Jednostka referencyjna– zestaw czterech referencyjnych wartości ocen

punktowych określonych dla każdego z kryteriów oceny

– ustalana dla każdego GWO (z wyjątkiem NJN)

• Wartości JR A/B– ustalane z uwzględnieniem osiągnięć JN w danej

GWO w zakresie poszczególnych kryteriów oceny– oraz pozycji nauki polskiej w skali międzynarodowej w

dyscyplinach naukowych reprezentowanych przez jednostki naukowe w danej GWO, określoną na podstawie informacji z baz danych bibliometrycznych

Page 24: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

24

Ustalenie kategorii w GWO

Przyznana kategoria wynika z porównań pozycji JNw stosunku do jednostek referencyjnych dla GWO

• dotychczas:

– porównanie parami wszystkich JN i JR w danej GWO

• nowe zasady:

– porównanie danej JN wyłącznie z JR A/B

• „zwycięstwo” z A => kategoria A

• „przegrana” z B => kategoria C

• żadne z powyższych => kategoria B

Procedura porównań parami*• Porównanie ocen JN jednostek z ocenami JR, oddzielnie w

poszczególnych kategoriach

• Możliwe wyniki „pojedynków”: od -1 do 1 w każdym kryterium, pomnożone przez wagę tego kryterium

• oceny:– „pełne zwycięstwo” +1 (JN lepsza o ponad 30% słabszej)

– „niepełne zwycięstwo” (0; 1) (różnica m. JN/JR proporcjonalnie)

– „remis” 0 (JN lepsza o mniej niż 10% od słabszej)

– „niepełna porażka” (-1; 0) (różnica m. JN proporcjonalnie)

– „pełna porażka” -1 (JN gorsza o ponad 30% słabszej)

* wersja poglądowa – uproszczona (precyzyjny opis procedury: załącznik nr 10 do Rozporządzenia)

próg pełnego przewyższania G, wynoszący nie mniej niż 30% oceny przyznanej niżej ocenionej jednostce

próg nierozróżnialności D, wynoszący nie więcej niż 10% oceny przyznanej niżej ocenionej jednostce

Page 25: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

25

Procedura porównań parami• Oceny jednostki w danym kryterium porównywane są z ocenami

jednostki referencyjnej:

• Wyniki tych porównań, przemnożone przez wagi przypisaną poszczególnym kryteriom dają ostateczną ocenę:

• Jeśli wynik porównania z JR A jest nieujemny => podstawa do zaliczenia jednostki do kategorii A, jeśli jest ujemny, dokonywane jest analogiczne porównanie z JR B; jeśli wynik porównania z JR B jest ujemny => podstawa do zaliczenia jednostki do kategorii C, a jeśli nieujemny – do kategorii B

Procedura porównań parami - przykładI II III IV

JR A 30 30 0,5 60

JN 35 70 0,15 55

D 10% 3 3 0,02 5,5

G 30% 9 9 0,05 16,5

5 40

0,35 5

0,33 1,00 -1,00 0,00

OX-OR

OR-OX

Pi (X, R)

wagi dla HS: I: 65% II: 15% III: 5% IV: 15%

V(X, A) = suma iloczynów Pi i wag: => V(X, A) = 0,32 => kategoria A

Page 26: Zasady oceny parametrycznej jednostek naukowych 2017 · Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15 3 Zaangażowani w proces ewaluacji: • KEJN -30 specjalistów

Zasady oceny parametrycznej jednostek naukowych 2017 2016-02-15

26

Kategoria A+• Dodatkowa ekspercka ocena działalności JN

– ocena w kryterium I = min. 70% najwyższej oceny w GWO– wyróżnia się jakością i efektami prowadzonych badań naukowych, prac

rozwojowych lub działalności artystycznejw zależności od specyfiki działalności w danej GWO:

• znaczenie osiągnięć uwzględnianych w ramach I kryterium dla rozwoju dyscypliny / dziedziny nauki, w szczególności publikacji, a także monografii naukowych lub dzieł artystycznych wskazanych przez jednostkę naukową jako wybitne i mogących mieć wpływ na podejmowanie nowych kierunków badań naukowych lub działalności artystycznej, na podstawie następujących wskaźników:

– średniej wartości ocen 25% najwyżej punktowanego dorobu w kryterium I– wartości zmodyfikowanego indeksu Hirscha– liczbę wysoko cytowanych publikacji, w których JN jest podmiotem wiodącym

• udział w upowszechnianiu osiągnięć naukowych lub artystycznych, w szczególności w skali międzynarodowej

• udział w tworzeniu strategicznej infrastruktury badawczej• znaczenie wyników badań naukowych lub prac rozwojowych dla rozwoju gospodarczego

Polski• osiągnięcia naukowe i artystyczne o szczególnym znaczeniu dla rozwoju społecznego

Polski, ochrony dziedzictwa narodowego lub rozwoju kultury i sztuki• udział w realizacji międzynarodowych projektów badawczych uwzględnianych w II

kryterium

• Liczba jednostek z kategorią A+ w danej GWO zależy od jej pozycji międzynarodowej

Dziękuję za uwagę

[email protected]