Komitet Ewaluacji Jednostek Naukowych

Ocena parametryczna jednostek

naukowych 2017

Błażej Skoczeń

KEJN

2

KEJN

Komisja ds. Grupy Nauk

Humanistycznych i Społecznych

Komisja ds. Grupy Nauk

Ścisłych i Inżynierskich

Komisja ds. Grupy Nauk o Życiu

Komisja ds. Grupy Nauk o Sztuce i

Twórczości Artystycznej

KEJN jest organem doradczym, który

działa przy MNiSzW i liczy 30 osób

Struktura KEJN

KEJN

3

42,20%

50,51%

7,30%

A

B

C

3,85%

31,91%

56,24%

8,00%

A+

A

B

C

Ocena parametryczna 2010

Niewłaściwe dodawanie punktów

pochodzących z różnych kryteriów

Błędna definicja grup jednorodnych

Ocena parametryczna 2013

Zbyt skomplikowany system

porównań parami

Niewłaściwa ewaluacja

niejednorodnych jednostek

naukowych

Ocena parametryczna 2017

Uproszczony algorytm: porównanie

jednostki z jednostką referencyjną

Wprowadzenie ewaluacji

niejednorodnych jednostek

naukowych (NJN)

Zmiany kategorii w ubiegłych edycjach oceny JN

Z każdą kolejną edycją wzrasta kompleksowość i jakość

algorytmu oceny parametrycznej jednostek naukowych

Zmiana jakościowa! Udoskonalona ocena Podejście elementarne

KEJN Edycja 2013: przyznane kategorie (procentowo)

3,85%

31,91%

56,24%

8,00%

A+

A

B

C

3,96%

27,06%

62,05%

6,93%

A+

A

B

C

3,86%

37,77%

49,79%

8,58% A+

A

B

C

4,33%

35,91%

50,77%

8,98%

A+

A

B

C

1,94%

20,39%

70,87%

6,80% A+

A

B

C

HS NZ

SI TA

4

KEJN Edycja 2013: przyznane kategorie (liczbowo)

5

21 20 297

188

116

164

73

82

88

116

21

12

9

14

2

0

50

100

150

200

250

300

350

HS NZ SI TA

A+

A

B

C

KEJN

6

Edycja 2013: ocena końcowa vs. Kryterium 1

Fundacja Naukowa SmarterPoland.pl

Nauki ścisłe (SI)

Korelacja oceny

kompleksowej z

osiągnięciami

naukowymi i

twórczymi (K1)

KEJN

7

Ankieta 2014: Zaufanie do ekspertów

oceniających jednostkę

4,6%

11,9%

13,5%

58,5%

11,5%

0% 20% 40% 60% 80%

Zdecydowanie nie mam zaufania

Raczej nie mam zaufania

Trudno powiedzieć

Raczej mam zaufanie

Zdecydowanie mam zaufanie

KEJN

8

Konsultacje

Algorytm kompleksowej oceny został opracowany przez

KEJN po licznych konsultacjach m.in. na posiedzeniach

KRASP, Prezydium PAN, KRUP, KRAUM, RGIB oraz

kierownictwa MNiSzW i dokumentach KPN, Wydziałów

PAN i in. a także ankiety przeprowadzonej wśród JN.

Powszechnie uznano, że parametryzacja 2017 powinna być

kontynuacją poprzedniej, ale że wymaga ona zmian,

uzupełnień i dopracowania wielu szczegółów i rozwiązań.

Ocena ma charakter parametryczny z elementami

eksperckimi, co najsilniej jest wyrażone w ocenie według

kryterium IV oraz w wyborze JN do kategorii A+.

KEJN

9

Kogo oceniamy?

Rodzaje ocenianych jednostek naukowych:

• Instytuty PAN

• Wydziały Uczelni

• Instytuty Badawcze

• Jednostki Inne

• PAU

Jednostki naukowe pochodzą z:

• grupy nauk humanistyczno-społecznych

• grupy nauk o życiu

• grupy nauk ścisłych i inżynierskich

• grupy nauk o sztuce i twórczości artystycznej

• jednostki o profilu mieszanym

Ocenie podlega około 1000 jednostek naukowych

KEJN

10

Przyjęty system oceny

Stopień

parametryzacji

System

ekspercki

System

parametryczny

System

mieszany

3 kryteria parametryczne

1 kryterium eksperckie

Przyjęty system oceny parametrycznej ma charakter mieszany i zawiera

kryteria w pełni parametryczne (1, 2, 3) oraz kryterium eksperckie (4).

Podejście eksperckie zastosowano również w procesie wyłaniania jednostek

naukowych zasługujących na kategorię A+.

KEJN

11

Zakres i zasady oceny parametrycznej

i kategoryzacji jednostek naukowych

KEJN

12

Podstawa prawna i publikacje

• Art. 44 ust. 2 ustawy z dnia 30 kwietnia 2010 r. o zasadach finansowania nauki

(Dz. U. z 2014 r. poz. 1620, z 2015 r. poz. 249 i 1268 oraz z 2016 r. poz. 1020).

• Rozporządzenie ministra nauki i szkolnictwa wyższego w sprawie przyznawania

kategorii naukowej jednostkom naukowym i uczelniom, w których zgodnie z ich

statutami nie wyodrębniono podstawowych jednostek organizacyjnych (Projekt z

dnia 23/09/2016, Rozporządzenie wchodzi w życie z dniem 1 stycznia 2017).

• “How Good is Good? Parametric evaluation of Polish scientific institutions 2013”,

Academia, No. 4 (40), 2013.

• „Kategoryzacja jednostek naukowych AD 2013”, Forum Akademickie, 10/2013.

• „Kategoryzacja jednostek naukowych po kampanii odwołań”, FA, 07-08/2014.

• „Ocena parametryczna jednostek naukowych 2017: ewolucja czy rewolucja?”, FA,

04/2016.

KEJN

13

Najważniejsze zmiany w stosunku do 2013

Zmiany systemowe

• uproszczenie algorytmu porównywania parami,

• modyfikacja zasad tworzenia Grup Wspólnej Oceny (GWO),

• NJN oraz nowe zasady ustalania ocen jednostek referencyjnych dla

niejednorodnych jednostek naukowych,

• modyfikacja zasad wyłaniania JN kategorii A+.

Zmiany szczegółowe w czterech kryteriach

• zmiany podkryteriów i parametrów w poszczególnych kryteriach

• nowe moduły i nowe elementy oceny, które postulowało środowisko

KEJN

14

• Liczba publikacji naukowych oraz osiągnięć naukowych i twórczych

uwzględnianych w ocenie, nie mogą być większe niż 3N.

• N jest średnią arytmetyczną liczby pracowników zatrudnionych w jednostce w

poszczególnych latach przy prowadzeniu badań naukowych w ramach stosunku

pracy, w przeliczeniu na pełny wymiar czasu pracy, ustaloną na podstawie

oświadczeń składanych przez pracowników we wniosku o środki DS.

• Liczbę 3N, pomniejsza się o liczbę 2N0, gdzie N0 jest liczbą pracowników, w

przeliczeniu na pełny wymiar czasu pracy, uwzględnianych przy określaniu liczby

N, którzy byli zatrudnieni w jednostce łącznie przez co najmniej 3 lata w okresie

objętym oceną i nie byli autorami lub współautorami osiągnięć naukowych.

• Liczba N0 nie obejmuje pracowników inżynieryjno-technicznych oraz

inżynieryjnych i technicznych.

Liczba N i pole 3N-2N0

KEJN

15

• Do osiągnięć naukowych i twórczych jednostki zalicza się publikacje

naukowe, jeżeli ich autorzy lub współautorzy zostali uwzględnieni przy

określeniu liczby N i wskazali tę jednostkę w afiliacji.

• Do osiągnięć naukowych i twórczych jednostki zalicza się publikacje

naukowe autorów nieuwzględnionych przy określeniu liczby N, jeżeli

wskazali tę jednostkę w afiliacji, z zastrzeżeniem, że liczba tych publikacji

nie może przekroczyć 20% wartości 3N-2N0.

Afiliacja autorów publikacji

KEJN

16

• Monografie naukowe i rozdziały w monografiach zalicza się do osiągnięć

naukowych i twórczych jednostki, jeżeli ich autor lub współautorzy zostali

uwzględnieni przy określeniu liczby N.

• Do osiągnięć jednostki są zaliczane monografie naukowe i rozdziały w

monografiach autorstwa osób nieuwzględnionych przy określeniu liczby N,

jeżeli osoby te wskazały jednostkę w afiliacji, z zastrzeżeniem, że ich

liczba nie może stanowić więcej niż 20% wszystkich monografii naukowych i

rozdziałów uwzględnianych w ocenie.

• Liczba monografii naukowych i rozdziałów w monografiach naukowych

uwzględnianych w ocenie nie może łącznie przekroczyć 20% wartości

3N-2N0 w grupie nauk ścisłych i inżynierskich.

Afiliacja autorów monografii

KEJN

17

• Liczba dzieł architektonicznych lub wzorniczych uwzględnianych przy

kompleksowej ocenie w grupie nauk ścisłych i inżynierskich, w zakresie

dyscyplin naukowych architektura i urbanistyka oraz sztuki projektowe nie

może przekroczyć 20% wartości 3N-2N0.

• Liczba monografii naukowych uznanych za dzieła wybitne i rozdziałów w

tych monografiach, uwzględnianych przy kompleksowej ocenie nie może

łącznie przekroczyć 5% wartości liczby N.

Dzieła architektoniczne i monografie wybitne

KEJN

18

• W ocenie za lata 2013–2016 stosuje się wykaz czasopism naukowych wraz

z liczbą punktów przyznanych za publikacje naukowe w tych czasopismach

ustalony na podstawie wykazów ogłoszonych w tych latach przez

ministra.

• W wykazie ujmuje się wszystkie czasopisma naukowe, które zostały ujęte w

co najmniej jednym wykazie obowiązującym w poszczególnych latach z

okresu 2013–2016. Za publikacje naukowe w każdym z tych czasopism

przyznaje się najwyższą liczbę punktów spośród określonych w

poszczególnych wykazach z tego okresu.

• Minister ogłosi wykaz, o którym mowa w ust. 1, w formie komunikatu w BIP

na stronie podmiotowej ministra, w terminie do dnia 31 stycznia 2017 r.

Wykaz czasopism naukowych

KEJN

19

Grupy Wspólnej Oceny (GWO) tworzone są z uwzględnieniem zasad

podobieństwa jednostek naukowych, wyrażonych poprzez:

1. profil działalności naukowo-badawczej (w tym profil publikacji,

monografii, patentów),

2. uprawnienia jednostek do nadawania stopni naukowych (dr, dr hab.),

3. strukturę potencjału naukowego (dyscypliny naukowe, w których

pracownicy uzyskali stopnie lub tytuł naukowy),

4. podobieństwo w innych aspektach działalności badawczej jednostek

(np. wdrożenia, efekty materialne etc.).

W każdej grupie nauk zostanie utworzona specjalna GWO dla tzw.

niejednorodnych jednostek naukowych NJN.

Grupy wspólnej oceny GWO

KEJN

20

Kryterium 1 – osiągnięcia naukowe i twórcze: publikacje,

monografie, patenty, dz. artystyczna

Kryterium 2 – potencjał naukowy: uprawnienia, stopnie i tytuły,

baza laboratoryjna, zaangażowanie w projektach badawczych

Kryterium 3 – praktyczne efekty działalności naukowej i

artystycznej: koszty poniesione na działalność naukową,

środki pozyskane, aplikacje i wdrożenia

Kryterium 4 – pozostałe efekty działalności naukowej i

artystycznej: wybitne osiągnięcia jednostki naukowej

Kategoryzacja – jednostki referencyjne JRA, JRB, porównanie

parami z JRA, JRB, kategorie A, B, C i A+

Ocena jednostek naukowych - kryteria

KEJN

21

Porównanie pary jednostek X i Y

Porównanie ocen dla każdego z 4 kryteriów z osobna:

Oi(X)↔Oi(Y)→Pi ; i=1,..,4

Jednostki otrzymują punkty Pi w zakresie <-1 , +1>

A

n

k

i

e

t

a

J

N

O1(X)

O2(X)

O3(X)

O4(X)

A

n

k

i

e

t

a

J

N

O1(Y)

O2(Y)

O3(Y)

O4(Y)

P1(X,Y)

P2(X,Y)

P3(X,Y)

P4(X,Y)

V(X,Y)

Algorytm porównań parami – wersja uproszczona

KEJN

22

Założenia i symbole:

Oi(X) ≥ Oi(Y) ΔO = Oi(X) – Oi(Y)

Oi(X) – ocena jednostki X za i-te kryterium

Oi(Y) – ocena jednostki Y za i-te kryterium

Możliwe przypadki Pi(X,Y) Pi(Y,X)

ΔO ≥ G 1 -1

G > ΔO > D (ΔO – D)/(G – D) – (ΔO – D)/(G – D)

ΔO ≤ D 0 0

ΔO

P(X,Y)

D G

- G - D

1

-1

D – próg nierozróżnialności; G – próg pełnego przewyższania

Relacja przewyższania (porównanie pary jednostek X i Y)

KEJN

23

Kryterium oceny (Ki) Waga kryterium (Wi) [%]

Podstawowe

jednostki

organizacyjne

uczelni

Jednostki naukowe

Polskiej Akademii

Nauk

i międzynarodowe

instytuty naukowe

Instytuty

badawcze

i inne

Nauki ścisłe i inżynierskie

K1: osiągnięcia naukowe i

twórcze (W1) 65 65 40

K2: potencjał naukowy (W2) 10 10 10

K3: materialne efekty

działalności naukowej (W3) 15 15 40

K4: pozostałe efekty

działalności naukowej (W4) 10 10 10

V(X,R) = W1 P1(X,R) + W2 P2(X,R) + W3 P3(X,R) + W4 P4(X,R)

Całkowity wynik punktowy V (X,R) porównania jednostki naukowej X z

jednostką referencyjną R:

Porównanie jednostki X z jednostką referencyjną R

KEJN

24

• Jednostkę można uznać za NJN jeżeli stopień niejednorodności,

określony jako udział pracowników prowadzących działalność

naukową lub badawczo-rozwojową w obszarach wiedzy innych niż

obszar wiedzy wiodący dla danej jednostki w liczbie N, wynosi co

najmniej 35%.

• Do oceny NJN Komitet tworzy odrębne GWO, po jednej dla

każdego rodzaju jednostek w każdej z grup nauk.

• Niejednorodność JN dotyczy obszarów wiedzy a nie dziedzin lub

dyscyplin.

• Jednostki referencyjne JRA, JRB dla danej NJN to średnie

ważone jednostek referencyjnych z odpowiednich GWO,

reprezentujących obszary wiedzy charakterystyczne dla danej

jednostki.

Koncepcja niejednorodnych jednostek naukowych NJN

KEJN

25

Obszary wiedzy

1. obszar nauk humanistycznych

2. obszar nauk społecznych

3. obszar nauk ścisłych

4. obszar nauk przyrodniczych

5. obszar nauk technicznych

6. obszar nauk rolniczych, leśnych i weterynaryjnych

7. obszar nauk medycznych i nauk o zdrowiu

8. obszar sztuki

KEJN

26

Obszary wiedzy, dziedziny i dyscypliny Obszar nauk ścisłych Dziedzina nauk matematycznych 1. matematyka

2. informatyka

Dziedzina nauk fizycznych 1. astronomia

2. biofizyka

3. fizyka

4. geofizyka

Dziedzina nauk chemicznych 1. biochemia

2. biotechnologia

3. chemia

4. ochrona środowiska

5. technologia chemiczna

Obszar nauk technicznych Dziedzina nauk technicznych 1. architektura i urbanistyka

2. automatyka i robotyka

3. biocybernetyka i inżynieria

biomedyczna

4. biotechnologia

5. budowa i eksploatacja maszyn

6. budownictwo

7. elektronika

8. elektrotechnika

9. energetyka

10. geodezja i kartografia

11. górnictwo i geologia inżynierska

12. informatyka

13. inżynieria chemiczna

14. inżynieria materiałowa

15. inżynieria produkcji

16. inżynieria środowiska

17. mechanika

18. metalurgia

19. technologia chemiczna

20. telekomunikacja

21. transport

22. włókiennictwo

KEJN

27

Obszary wiedzy, dziedziny i dyscypliny

Obszar nauk społecznych Dziedzina nauk społecznych 1) nauki o bezpieczeństwie

2) nauki o obronności

3) nauki o mediach

4) nauki o polityce

5) nauki o polityce publicznej

6) nauki o poznaniu i komunikacji społecznej

7) pedagogika

8) psychologia

9) socjologia

Dziedzina nauk ekonomicznych 1) ekonomia

2) finanse

3) nauki o zarządzaniu

4) towaroznawstwo

Dziedzina nauk prawnych 1) nauki o administracji

2) prawo

3) prawo kanoniczne

Obszar nauk

humanistycznych

Dziedzina nauk humanistycznych 1) archeologia

2) bibliologia i informatologia

3) etnologia

4) filozofia

5) historia

6) historia sztuki

7) językoznawstwo

8) kulturoznawstwo

9) literaturoznawstwo

10) nauki o rodzinie

11) nauki o sztuce

12) nauki o zarządzaniu

13) religioznawstwo

Dziedzina nauk teologicznych

KEJN

28

Kryterium 1

• Publikacje naukowe w czasopismach z list A, B, C,

• Recenzowane publikacje naukowe (0,5 arkusza) w zagranicznym czasopiśmie niewymienionym w wykazie A, B, C,

• Publikacje w recenzowanych materiałach z konferencji międzynarodowych uwzględnionych w uznanej bazie publikacji (WoS),

• Monografie naukowe (6 arkuszy) i rozdziały w monografii (0,5 arkusza),

• Patenty na wynalazki, prawa ochronne na wzory użytkowe, prawa z rejestracji wzorów przemysłowych,

• Wykorzystane prawa autorskie majątkowe do utworu z zakresu architektury, urbanistyki lub sztuk projektowych,

• Utwory architektoniczne, architektoniczno-urbanistyczne i urbanistyczne oraz utwory z zakresu sztuk projektowych, wzornictwa przemysłowego

Zakres Kryterium 1

KEJN

29

Zmiany w Kryterium 1

• Doprecyzowanie definicji monografii

• Wprowadzenie kategorii monografii wybitnych (50 pkt)

• Rezygnacja z różnicowania punktacji za monografie w zależności od języka

• Podwyższenie punktacji za patenty:

zwiększenie punktacji za udzielony patent krajowy do 30 pkt., a

międzynarodowy do 40 pkt., natomiast za wdrożenie patentu do 30 pkt.

Rezygnacja z punktowania zgłoszeń patentowych

• Podniesienie wartości punktowej publikacji w materiałach

konferencyjnych uwzględnianych w uznanej bazie publikacji naukowych

o zasięgu międzynarodowym (WoS) do najniższej wartości punktowej

czasopisma naukowego na liście A.

KEJN

30

Kryterium 1 – monografie naukowe

• Stanowią spójne tematycznie opracowania naukowe

• Przedstawiają określone zagadnienie w sposób oryginalny i twórczy

• Poddane były procedurze recenzji wydawniczych

• Są opatrzone właściwym aparatem naukowym (bibliografia)

• Posiadają objętość co najmniej 6 arkuszy wydawniczych

• Są opublikowane jako książki lub odrębne tomy

• Posiadają nadany numer ISBN, ISMN lub identyfikator DOI

Monografia wybitna: przyznana prestiżowa nagroda (PRM, Ministra, PAN, FNP, zagranicznego towarzystwa naukowego, organizacji międzynarodowej).

Kryterium 1: monografie

KEJN

31

Kryterium 1: publikacje wieloautorskie

Utrzymanie dotychczasowej zasady! 1. do 10 autorów - 100% punktów dla JN;

2. powyżej 10 autorów:

• 100% punktów – jeśli co najmniej 20% autorów z JN

• 75% punktów – jeśli co najmniej 10% autorów z JN

• 50% punktów - jeśli mniej niż 10% autorów z JN

KEJN

32

• Posiadanie uprawnienia do nadawania stopni naukowych lub stopni w

zakresie sztuki

• Rozwój własnej kadry i udział osób niebędących pracownikami JN

• Mobilność pracowników JN w tym pobyty w innych ośrodkach naukowych

• Inne osiągnięcia świadczące o potencjale naukowym JN (członkostwo we

władzach towarzystw i organizacji naukowych, pełnienie funkcji redaktora

naczelnego czasopisma naukowego z listy A, członkostwo w zespołach

eksperckich, wydawanie czasopisma naukowego z listy A)

• Posiadanie laboratoriów akredytowanych, certyfikowanych w zakresie DPL

• Aktywność w koordynowaniu, realizacji i pozyskiwaniu środków

finansowych na realizację projektów międzynarodowych i krajowych.

Zakres Kryterium 2

KEJN

33

Punkty za mobilność naukowców (pobyt w uczelni notowanej w

Academic Ranking of World Universities lub w renomowanym ośrodku

naukowym)

Punkty za aktywność JN w pozyskiwaniu, koordynowaniu i realizacji

projektów międzynarodowych (maksimum 400 pkt)

Określenie punktacji projektu na podstawie:

• rodzaju projektu – 4 klas programów ze względu na wagę i znaczenie

• roli JN w hierarchii zarządzania projektem - 3 poziomy

• wysokości finansowania

Zmiany w Kryterium 2

KEJN

34

Rodzaj projektu:

r1 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane ze środków UE

zarządzanych centralnie

r2 – Projekty obejmujące badania naukowe lub prace rozwojowe finansowane wspólnie z

instytucjami badawczymi w krajach członkowskich OECD oraz projekty międzynarodowe

współfinansowane

r3 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane przez NCN i

NCBiR oraz finansowane przez analogiczne zagraniczne instytucje publiczne

r4 - Projekty obejmujące badania naukowe lub prace rozwojowe finansowane w ramach programów

operacyjnych, przez Ministra, przez krajowych albo zagranicznych przedsiębiorców

Rola JN:

z1 - Koordynator projektu realizowanego co najmniej z dwoma wykonawcami zagranicznymi

z2 - Koordynator projektu realizowanego z wykonawcą zagranicznym albo wykonawcami

krajowymi albo kierowanie pakietem zadaniowym

z3 - wykonawca projektu w ramach konsorcjum albo projektu indywidualnego

Zmiany w Kryterium 2

KEJN

35

Liczba punktów za projekt (P): P = m * K

m – mnożnik dla projektu z tabeli

K – środki finansowe w mln zł, wydatkowane przez JN w okresie objętym oceną na badania

prowadzone w ramach projektu

Za jeden projekt JN może uzyskać maksymalnie 100, a za wszystkie w okresie objętym

oceną maksymalnie 400 punktów

z1 z2 z3

r1 10 8 6

r2 8 7 5

r3 6 5 4

r4 x 4 3

Zmiany w Kryterium 2

KEJN

36

Zakres Kryterium 3

• Środki finansowe wydatkowane przez JN na realizację projektów B lub R

• Nowe technologie, materiały, wyroby, metody, procedury, oprogramowanie

opracowane na rzecz innych podmiotów, na podstawie zawartych umów

• Środki finansowe uzyskane z tytułu komercjalizacji wyników badań

naukowych lub prac rozwojowych

• Ekspertyzy, opracowania naukowe lub działania artystyczne opracowane na

rzecz innych podmiotów

• Przychody jednostki w celu komercjalizacji badań naukowych lub prac

rozwojowych z tytułu: wdrożenia przez inne podmioty wyników badań

naukowych, sprzedaży produktów będących efektem wdrożenia

• Aplikacje wyników badań naukowych lub prac rozwojowych prowadzonych w

jednostce i zastosowanych w innych podmiotach

KEJN

37

K 3

Przychody JN ze

sprzedaży wyników

działalności :

technologie, materiały,

produkty, licencje, know-

how, opinie, ekspertyzy,

działania artystyczne

Koszty JN na realizację

badań pozyskanych w

trybie konkursowym:

na badania naukowe i B+R

ze wskazanymi

wyłączeniami

Zastosowanie wyników

działalności poza JN

wdrożenia i aplikacje

aplikacja - potwierdzony efekt

niematerialny

wdrożenie - potwierdzony

przychodem efekt materialny

Efekty praktyczne działalności naukowej

Zmiany w Kryterium 3

KEJN

38

Zakres Kryterium 3

• Efekty finansowe działalności naukowej i innowacyjnej

• Sprzedaż wyników badań naukowych lub prac rozwojowych

• Wdrożenia wyników badań naukowych lub prac rozwojowych

• Aplikacje wyników badań naukowych lub prac rozwojowych

Powstał nowy wzór karty aplikacji lub wdrożenia produktu!

Przyjęto, że formą zastosowania jest:

• wdrożenie, które generuje przychody podmiotu wdrażającego i jest oceniane na

podstawie wysokości tego przychodu,

• aplikacja, która nie generuje wymiernych korzyści materialnych i jest oceniana

na podstawie zasięgu oddziaływania produktu (mały/lokalny, średni/krajowy,

duży/międzynarodowy).

Zmiany w Kryterium 3

KEJN

39

Zakres Kryterium 4

10 najważniejszych osiągnięć o znaczeniu naukowym, gospodarczym,

dla ochrony zdrowia lub środowiska naturalnego (ogólnospołecznym)

0 - 50 pkt za:

• efekty badań naukowych lub prac rozwojowych o znaczeniu międzynarodowym w

tym publikacji mających szczególne znaczenie dla rozwoju nauki, kultury i sztuki,

• udokumentowane zastosowania wyników badań naukowych lub prac rozwojowych

o dużym znaczeniu społecznym (ochrona zdrowia, środowiska, bezpieczeństwo).

0 - 50 pkt za:

• osiągnięcia świadczące o pozycji międzynarodowej jednostki na tle GWO, ze

szczególnym uwzględnieniem udziału w realizacji projektów międzynarodowych,

• organizację międzynarodowych konferencji (sympozjów, kongresów, warsztatów),

w których min 1/3 uczestników reprezentowała zagraniczne ośrodki naukowe.

KEJN

40

Kategoria A+

• może zostać przyznana JN kategorii A, która znajduje się wśród 15% jednostek najwyżej ocenionych w K1, lub uzyskała w K1 minimum 85% oceny najwyższej w danej GWO,

• wyróżnia się jakością i efektami prowadzonych badań naukowych lub prac rozwojowych.

Ponadto w ocenie uwzględnia się:

• znaczenie osiągnięć w Kryterium 1 dla rozwoju dyscypliny naukowej, w tym:

średnią wartość ocen 25% osiągnięć jednostki naukowej, najwyżej ocenionych według Kryterium 1,

wartości zmodyfikowanego indeksu Hirscha (hm=h/N0.4),

liczbę wysoko cytowanych publikacji, opublikowanych w okresie objętym oceną,

• udział w upowszechnianiu osiągnięć naukowych w skali międzynarodowej,

• udział w tworzeniu strategicznej infrastruktury badawczej,

• znaczenie wyników badań naukowych lub prac rozwojowych dla rozwoju gospodarczego kraju, zwiększenia konkurencyjności i innowacyjności gospodarki,

• udział w realizacji międzynarodowych projektów badawczych.

KEJN

41

Podsumowanie zmian

Systemowe – porównanie parami, GWO i NJN, Kategoria A+, wdrożenia i innowacyjność, umiędzynarodowienie,

Kryterium 1 – monografie, patenty, działalność artystyczna,

Kryterium 2 – wyeliminowanie wielu drobnych informacji, baza laboratoryjna, zaangażowanie w projektach badawczych,

Kryterium 3 – koszty poniesione na działalność naukową, docenienie aplikacji i wdrożeń,

Kryterium 4 – sprecyzowanie osiągnięć,

A+ – poszerzenie i doprecyzowanie kryteriów.

KEJN

42

Instrumentarium KEJNu

KEJN

43

System Ewaluacji Dorobku Naukowego

Przykładowa jednostka naukowa

Przykładowa jednostka naukowa

www.przykladowajednostkanaukowa.pl

KEJN

44

• Jednostki gromadzą dane nt. własnego dorobku ze wszystkich

dostępnych źródeł (wewnętrznych i zewnętrznych)

• Informacje wprowadzane są do modułu „Ankieta jednostki

naukowej”

• Wyznaczenie Grup Wspólnej Oceny przez KEJN

• System ekspercki wskazujący stopień dopasowania JN do GWO

• Przydział jednostek do GWO

• Wyliczenie parametrów N, N0

• Walidacja danych – wyszczególnienie zadań ewaluacyjnych

dla członków Zespołów Ewaluacji

• Praca w systemie teleinformatycznym

Weryfikacja

osiągnięć

zgłoszonych do

ewaluacji

Przydział

do GWO

Gromadzenie

danych

• Zespoły Ewaluacji przyznają odrębne oceny za każde

kryterium w karcie kompleksowej oceny jednostki naukowej

• Większa część osiągnięć jest punktowana na podstawie

algorytmów wynikających z rozporządzenia

Ocena KEJN

• Wyznaczenie jednostek referencyjnych JRA, JRB

• Porównanie parami z JRA, JRB Parametryzacja

• Zakończenie ewaluacji oraz publikacja wyników

• Odwołania

• Ogłoszenie finalnego wykazu z przypisaną kategorią A+, A, B, C

Kategoryzacja

Proces ewaluacji jednostek naukowych

KEJN

45

Proces ewaluacji jednostek naukowych

KEJN

46

Proces ewaluacji jednostek naukowych

KEJN

47

Efektywność w nauce to prosty ułamek:

EN=L/M

L = suma punktów za działalność naukową lub efekty

materialne działalności naukowej

M = liczba pracowników zatrudnionych przy realizacji

badań naukowych lub prac rozwojowych

Każdy pracownik naukowy i naukowo-dydaktyczny

liczony w mianowniku, powinien wypracować tyle

punktów aby utrzymać efektywność jednostki naukowej

na z góry założonym poziomie.

Zamiast wniosków

KEJN

48

Dziękuję za uwagę

Wynik oceny parametrycznej jednostek

naukowych i przyznana kategoria są podstawą

alokacji środków na działalność statutową