Na podlagi 28. �lena Sklepa o ustanovitvi Javne agencije za raziskovalno dejavnost Republike Slovenije (Uradni list RS, �t. 123/03 in 105/10) je Znanstveni svet Javne agencije za raziskovalno dejavnost Republike Slovenije na 8. seji, dne 8. 5. 2017, sprejel

Spremembo Metodologije ocenjevanja prijav za razpise

1.

V Metodologiji ocenjevanja prijav za razpise �t. 6319-2/2013-25 z dne 25. 1. 2016 (uradno pre�i��eno besedilo �t. 3), �t. 6319-2/2013-26 z dne 4. 3. 2016, �t. 6319-2/2013-27 z dne 4. 3. 2016, �t. 6319-2/2013-29 z dne 26. 9. 2016, �t. 6319-2/2013-30 z dne 10. 10. 2016,  �t. 6319-2/2013-31 z dne 7. 11. 2016, �t. 6319-2/2013-32 z dne 21. 11. 2016, �t. 6319-2/2013-33 z dne 6. 2. 2017, �t. 6319-2/2013-34 z dne 23. 3. 2017 in �t. 6319-2/2013-35 z dne 13. 4. 2017 se v KAZALU:

• pod poglavjem z naslovom �B. RAZISKOVALNI PROJEKTI� naslovi podpoglavij �II. Postopek ocenjevanja za I. fazo�, �III. Ocena recenzentov za I. fazo� in � IV. Ocena recenzentov in postopek II. faze izbora prijav� spremenijo tako, da se glasijo:

�II. Ocena recenzentov in postopek v okviru I. faze izbora prijav

III. Ocena recenzentov in postopek v okviru II. faze izbora prijav

IV. Panel�.

• poglavje z naslovom �F. MEDNARODNA ZNANSTVENA LITERATURA IN BAZE PODATKOV� se spremeni tako, da se glasi: �F. MEDNARODNA ZNANSTVENA LITERATURA�.

2.

Besedilo poglavja z naslovom �B. RAZISKOVALNI PROJEKTI� se spremeni tako, da se glasi:

�I. Vstopni pogoji

Vstopni pogoji so dolo�eni na podlagi pravilnika o postopkih. Kot vstopni pogoji so v tej metodologiji uporabljene kvantitativne ocene, dolo�ene v poglavju A.SPLO�NO.

Bibliografske enote z ve�jim �tevilom citatov, za katere v WoS ni polnega bibliografskega zapisa, lahko prijavitelj navede v okviru izjemnih raziskovalnih dose�kov v to�ki __ Prijavne vloge za vodjo projekta, izpolnjene na obrazcu: ARRS-ZV-JR-Prijava-20xx-I (v nadaljnjem besedilu: prijavna vloga - I. faza). V primeru, ko imajo raziskovalci vrednost A_i  oziroma CI ve�jo od mejne vrednosti, prijavitelj to lahko navede v okviru izjemnih raziskovalnih dose�kov v to�ki __ prijavne vloge - I. faza.

Kandidate za vodje projektov bo ARRS ocenjevala v vedi in na podro�ju, ki ju prijavitelj navede v to�ki __ prijavne vloge - I. faza, razen v primeru, da je projekt prerazporejen na drugo vedo oziroma podro�je skladno s 95. �l. pravilnika o postopkih. V tem primeru se projekt ocenjuje na vedi oziroma podro�ju, kamor je bil projekt prerazporejen.

Dele� sredstev za interdisciplinarne raziskave se po vedah dolo�i z javnim razpisom. Prijavitelj interdisciplinarne raziskave se prijavi na osnovno vedo in podro�je in navede drugo vedo in podro�je, ki sta vklju�ena v prijavljeni interdisciplinarni raziskovalni projekt.

ARRS vsako leto vnaprej objavi podatke o kapaciteti podro�ij po raziskovalnih podro�jih glede na spro��ena sredstva zaradi zaklju�enih projektov, ob upo�tevanju vrednosti razpisa.

II. Ocena recenzentov in postopek v okviru I. faze izbora prijav 

Ocenjevanje prijav v I. fazi poteka skladno s pravilnikom o postopkih.

Recenzenti ocenjujejo prijave na podlagi prijavne vloge na obrazcu ARRS-JR-Prijava-20xx-I. Vsako prijavo ocenjujeta dva tuja recenzenta.

Recenzenti ocenjujejo posamezne elemente ocenjevanja tako, da izpolnijo ocenjevalni list (obrazec: ARRS-RPROJ-OL-TUJ-�/20xx).

V ocenjevalni list se vpi�ejo �tevil�ne in opisne ocene po posameznih elementih ocenjevanja (kriterijih in kazalnikih).

Ob�asno strokovno telo razdeli prijave za ocenjevanje v skupine z najve� 10 prijavami. �e je prijav v prvi fazi za posamezno raziskovalno podro�je ve� kot 10, potem jih ob�asno strokovno telo razdeli na podpodro�ja oziroma  enotne vsebinske sklope, ki jih ocenjujejo isti recenzenti.

Ob�asno strokovno telo mora pri imenovanju recenzentov za podro�je interdisciplinarnosti upo�tevati, da recenzenta pokrivata glavni podro�ji interdisciplinarnosti, povezani z vsebino projekta, navedeni v to�ki __ prijavne vloge za I. fazo.

Recenzentske ocene so sestavljene na naslednji na�in:

• ocena BT - za temeljne projekte in temeljne podoktorske projekte iz treh posami�nih ocen na podlagi kriterijev, kazalnikov in na�ina vrednotenja ocen, kot je opredeljeno v Tabeli B in Tabeli C.
• ocena BA - za aplikativne projekte in aplikativne podoktorske projekte iz �tirih posami�nih ocen na podlagi kriterijev, kazalnikov in na�ina vrednotenja ocen, kot je opredeljeno v Tabeli B in Tabeli C.

V I. fazi se ocenjuje vodja projekta (v II. fazi se ocenjuje celotna projektna skupina).

Oceni BT oziroma BA se dobita s se�tevkom posami�nih ocen, pri �emer je skupna ocena najve�:

• 15 to�k pri temeljnih projektih in temeljnih podoktorskih projektih (BT = BT1+BT2+BT3)
• 20 to�k pri aplikativnih projektih in aplikativnih podoktorskih projektih (BA = BA1+BA2+BA3+BA4).

V II. fazo javnega razpisa se ne more uvrstiti:

• temeljni projekt oziroma temeljni podoktorski projekt, ki ima oceno BT = BT1 + BT2 + BT3 ni�jo od 10 to�k oziroma posami�no oceno BT1, BT2 ali BT3 ni�jo od 3 to�k.
• aplikativni projekt oziroma aplikativni podoktorski projekt, ki ima oceno BA = BA1 + BA2 + BA3  + BA4  ni�jo od 12 to�k oziroma posami�no oceno BA1, BA2, BA3 ali BA4 ni�jo od 3 to�k.

Recenzenti so ob prejemu prijave obve��eni o navedenih mejnih pragovih.

Tabela B: Ocenjevanje prijav za raziskovalne projekte za I. in II. fazo ocenjevanja.

Kriteriji in kazalniki za ocenjevanje temeljnih projektov in temeljnih podoktorskih projektov
 

Kriteriji in kazalniki za ocenjevanje aplikativnih projektov in aplikativnih podoktorskih projektov
 

Tabela C:  Vrednotenje kriterijev prijav

Recenzenti vrednotijo kriterije z oceno od 0 do 5 na eno decimalko, pri �emer upo�tevajo naslednje opise, pomene in razpone ocen:
 

III.  Ocena recenzentov in postopek v okviru II. faze izbora prijav

Ocenjevanje prijav v II. fazi poteka skladno s pravilnikom o postopkih.

Prijavitelje, ki so uvr��eni v drugo fazo izbora projektov (kategorija A), ARRS pozove, da oddajo dopolnjeno prijavo raziskovalnega projekta na obrazcu ARRS-ZV-JR-Prijava-20xx -II (v nadaljnjem besedilu: prijavna vloga - II. faza). Prijave ocenjujejo trije tuji recenzenti. Pri interdisciplinarnih raziskavah sta dva recenzenta z osnovne vede in podro�ja ter en recenzent z druge vede in podro�ja, ki sta vklju�ena v prijavljeni interdisciplinarni raziskovalni projekt. Recenzenti ocenjujejo projekte, razdeljene po enotnih vsebinskih sklopih.

Ocena recenzenta je sestavljena iz enakih elementov kot v I. fazi. V II. fazi je vsebina projekta dopolnjena oz. raz�irjena, ocenjuje pa se celotna projektna skupina.

V izbor projektov po II. fazi javnega razpisa se ne more uvrstiti:

- temeljni projekt oziroma temeljni podoktorski projekti projekt, ki ima oceno BT = BT1 + BT2 + BT3 ni�jo od 10 to�k oziroma posami�no oceno BT1, BT2 ali BT3 ni�jo od 3 to�k.

- aplikativni projekt oziroma aplikativni podoktorski projekti projekt, ki ima oceno BA = BA1 + BA2 + BA3 + BA4  ni�jo od 12 to�k oziroma posami�no oceno BA1, BA2, BA3 ali BA4 ni�jo od 3 to�k.

Recenzenti so ob prejemu prijave obve��eni o navedenih mejnih pragovih.

Znotraj vsake vede mora biti izbranih vsaj 10% podoktorskih projektov. Vsaj 30% projektov s podro�ja tehnike, vsaj 20% s podro�ja biotehnike, vsaj 10% s podro�ja medicine in dru�boslovja ter vsaj 5% s podro�ja naravoslovja, mora biti aplikativnih. Med izbranimi projekti mora biti vsaj 20% tak�nih, katerih nosilci so mladi doktorji (najve� 10 let po letu zagovoru doktorata).

Vsak projekt ima obvezno izpolnjeno polje za manj�i projekt (50.000 EUR). Taki projekti se praviloma dodelijo prijavam, ki so na spodnjem robu seznama odobrenih.

IV. Panel

�lani panela za posamezno fazo razpisa so sestavljeni iz nabora tujih recenzentov, ki niso ocenjevali prijav v tej fazi razpisa.�.

3.

Besedilo poglavja z novim naslovom �F. MEDNARODNA ZNANSTVENA LITERATURA�  se spremeni tako, da se glasi:

�I. Elementi ocenjevanja

Dostopnost se meri s �tevilom raziskovalcev, zaposlenih v mati�ni organizaciji, in z velikostjo knji�nice glede na knji�ni�no gradivo.

Pogostnost uporabe se meri s povpre�no uporabo prijavljenih serijskih publikacij v preteklem letu. Kot uporaba se upo�tevata �tevilo izposoj tiskanih serijskih publikacij in �tevilo prenosov �lankov v formatu PDF. Povpre�na uporaba se izra�una tako, da se uporaba prijavljenih serijskih publikacij deli z njihovih �tevilom. �tevilo to�k se dolo�i glede na to, v kateri razred spada izra�unana povpre�na vrednost.

Kakovost in pomen mednarodne znanstvene literature se merita s faktorjem vpliva za posamezno kategorijo v SCI-Expanded, SSCI, Scopus (d) ali Scopus (h). �e je serijska publikacija v ve� kategorijah, se upo�teva kategorija z najvi�jim �tevilom to�k. To�ke se dolo�ijo na podlagi povpre�nega �tevila to�k v izpisu Seznam gradiva za sofinanciranje nakupa (Z-SEZ-25) za vse serijske publikacije, ki jih prijavitelj prijavi v sofinanciranje. Upo�tevajo se zadnji podatki iz SICRISa. Povpre�no �tevilo to�k se zaokro�i na najbli�je �tevilo to�k, pri �emer se povpre�je, ki je to�no na sredini, zaokro�i na vi�jo vrednost.

Potencialni vpliv zaradi razvoja, raz�irjanja in uporabe pri�akovanih rezultatov se ocenjuje z dele�em sredstev iz drugih virov.

Skladnost predlaganega obsega aktivnosti prijavitelja s predvidenimi finan�nimi sredstvi in zagotavljanje gospodarne rabe sredstev se ugotavlja na podlagi odstotka prijavljenih serijskih publikacij, ki so pogoj za konzorcij.

Elementi ocenjevanja so dolo�eni v Tabeli F.

Tabela F: Ocenjevanje za posamezne elemente ocenjevanja
 

II. Razdelitev prijav po skupinah in predlog finan�no ovrednotenega seznama prijav

Prijave oceni Strokovno telo za mednarodno literaturo po znanstvenih podro�jih na podlagi prijavne vloge za sofinanciranje nakupa mednarodne znanstvene literature in stro�kov konzorcija za elektronski dostop do vsebin v celotnem besedilu na ocenjevalnem obrazcu.

�e je v prijavi navedenih ve� znanstvenih ved, se upo�teva prva, razen pri Centralni tehni�ni knji�nici, ki se vedno obravnava v tehniki. �e v prijavi ni podatka za posamezen kriterij, se ji dodeli najmanj�e �tevilo to�k.

Strokovno telo posebej predlaga sofinanciranje dolo�enih nabavnih konzorcijev, ki so posebnega pomena. Strokovno telo posebej predlaga tudi sofinanciranje mednarodnih zbirk podatkov.�.

4.

V poglavju z naslovom �G. MEDNARODNO ZNANSTVENO SODELOVANJE� se v podpoglavju z naslovom �IV. Prevzem sofinanciranja po vodilni agenciji�:

• v to�ki C) besedilo �Materials World Network (MWN)� �rta;
• v celotnem besedilu to�ke D) kratica �OTKA� nadomesti s kratico �NKFIH�.

5.

V poglavju z naslovom �M. ZNANSTVENE MONOGRAFIJE� se v podpoglavju z naslovom �I. Elementi ocenjevanja�, v prvem odstavku za tabelo M1, za drugim stavkom dodata novi tretji in �etrti stavek, ki se glasita: ��e je avtor/recenzent najmanj tri mesece odsoten zaradi izrabe dopusta iz naslova zavarovanja za star�evsko varstvo (za enega otroka se upo�teva eno leto), bolezni ali po�kodbe oziroma drugih primerov odsotnosti, dolo�enih v predpisih o zdravstvenem zavarovanju, oziroma zaposlitve izven raziskovalne dejavnosti, se za izra�un ocene upo�teva ustrezno dalj�e �asovno obdobje. V primeru ocenjevanja avtorja/recenzenta posthumno, se za izra�un ocene upo�teva obdobje zadnjih pet let pred smrtjo.�.

6.

Ta metodologija za�ne veljati naslednji dan po objavi na spletni strani ARRS.

�t.: 6319-2/2013-36
Ljubljana, 8. 5. 2017

Prof. dr. Marko Topi�
predsednik Znanstvenega sveta agencije

Ta metodologija je objavljena na spletni strani ARRS dne 18.05.2017.