Efektivní systém hodnocení a financování výzkumu, vývoje a inovací (IPN Metodika)

Efektivní systém hodnocení a financování výzkumu, vývoje a inovací (IPN Metodika) Jitka Moravcová MŠMT Seminář Hodnocení a financování vědy v ČR Poslanecká sněmovna Parlamentu ČR 20.5.2014 www.metodika.reformy-msmt.cz

Hodnocení VaVaI Co je hodnocení? Definice Evropské komise: Hodnocení je proces, kterým je sledována, interpretována a vyhodnocována kvalita, implementace, relevance a dopady politiky/programů VaVaI. Co je hodnocení v ČR? Počítání výsledků, kterým je přiřazena určitá váha. Monitorovací cvičení, hodnotí se výzkumné organizace a programy. Mechanicky (trojčlenka) se používají získané body k výpočtu institucionální podpory poskytovatelům a ti (kromě AV ČR) stejným algoritmem počítají inst. financování výzkumných organizacím.. 1

Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací Institucionální podporu lze poskytnout na dlouhodobý koncepční rozvoj výzkumné organizace na základě zhodnocení jí dosažených výsledků, mezinárodní spolupráci ČR ve VaV realizovanou na základě mezinárodních smluv, Účelovou podporu lze poskytnout na grantový projekt, programový projekt, specifický vysokoškolský výzkum, velkou infrastrukturu. 2

Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací Institucionální podpora - poskytovatelé MŠMT, AV ČR, MPO, MZe, MZ Účelová podpora - poskytovatelé GA ČR, TA ČR, MŠMT 3

Hodnocení - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací Institucionální podpora Institucionální podporu poskytne poskytovatel VO na základě zhodnocení jí dosažených výsledků tak, že její podíl na celkové výši institucionální podpory VO ze státního rozpočtu v daném roce odpovídá jejímu podílu na hodnotě výsledků všech VO dosažených v uplynulých 5 letech podle hodnocení prováděného každoročně RVVI. Poskytovatel může výši podpory upravit podle podrobnějšího hodnocení používajícího mezinárodně uznávaných metodik. Pouze AV ČR jako poskytovatel takové hodnocení realizuje. Ostatní rozpočítávají podle výsledků (RIV body). VVŠ rozpočítávají podle výsledků na fakulty a dále na jednotlivé ústavy a katedry (a jednotlivce). 4

Současná metodika hodnocení výsledků lepší, než žádná metodika hodnocení, je jednoduchá, je zažitá, není náchylná k nepotismu, základ pro přiznání institucionální podpory 5

Současná metodika hodnocení výsledků Absolutní počet odkazů Relativní zastoupení odkazů výroba tzv. recenzovaných neimpaktovaných (tj. především domácích) časopiseckých publikací vzrostla v období 2006-2010 o více než 200 procent WoS, heslo Czech Republic, 25.1.2014 6

Současná metodika hodnocení výsledků soustředí se pouze a právě na hodnocení výstupů, nedává informaci o kvalitě a významu výsledků, neposkytuje informace umožňující mezinárodní srovnání výkonnosti a produktivity pracovišť ani celých oborů, neposkytuje ani jedné úrovni řízení v systému VaV zpětnou (mezinárodní) vazbu ohledně kvality řízení VaV, nereflektuje postavení a mise různých typů VO, realizuje se každý rok, výše institucionální financování se tak mění každoročně, nepodává žádnou informaci o sledování a dosahování cílů národních priorit či priorit poskytovatelů, nepodává informace o splnění cílů programů, nepodporuje excelenci. 7

Budoucí metodika hodnocení Národní program reforem 2014, Národní politika VaVaI ČR na léta 2009-2015 s výhledem do 2020, Strategie mezinárodní konkurenceschopnosti na období 2012-2020, Národní inovační strategie, usnesení vlády č. 77, 26. ledna 2011, Dlouhodobé principy hodnocení výsledků VO, RVVI, 263. zasedání, 25. březen 2011. Změna současného hodnocení je nezbytná! 8

Národní inovační strategie Prioritní osa Excelentní výzkum obsahuje opatření Efektivní využívání veřejných prostředků na VaV zajistit dlouhodobý koncepční rozvoj VO, pro které musí být vytvořeny jasné a stabilní podmínky pro rozdělování institucionální podpory výzkumu na základě hodnocení podporujícího excelenci hodnocení všech programů účelové podpory musí být založeno na základě hodnocení skutečných přínosů a zejména dopadů podpořeného VaV ustanovit systém hodnocení velkých výzkumných infrastruktur 9

IPN Metodika, projekt MŠMT Koncepce projektu respektuje všechny citované strategické dokumenty a ověřenou mezinárodní praxi 2011 měsíc leden únor březen duben květen červen červenec srpen září říjen listopad prosinec aktivita Příprava projektu, veřejné diskuse, projednání na RVVI, oponentní řízení CERA a Expertní skupina, schválení projektu 2012 měsíc leden únor březen duben květen červen červenec srpen září říjen listopad prosinec aktivita vedením MŠMT Zahájení projektu Sestavení týmů KA, zahájení činnosti v KA, dozorčí rada, presentace projektu, příprava 1. zadávací dokumentace pro veřejnou zakázku, projednání a schválení na MŠMT, předání zadávací dokumentace do kabinetu ministra Omezení aktivit směrem k plnění hlavních cílů projektu pozastavení uzavírání nových dohod členů týmu, jednání o věcném obsahu VZ Omezení aktivit směrem k plnění hlavních cílů projektu jednání se zástupci MŠMT a 2013 měsíc leden únor březen duben květen červen červenec srpen září říjen listopad prosinec aktivita vlastními realizátory projektu (harmonogram, personální zajištění, podoba VZ) Omezení aktivit směrem k plnění hlavních cílů projektu, práce na přípravě podstatné změny, konzultace podstatné změny s děkany PřF, členy dozorčí rady, zástupci RVŠ a AV ČR 1. 4. uzavřena DPČ s hl. odborným garantem Finální verze Situační zprávy (příloha žádosti o PZ), Memorandum o spolupráci s RVVI, mezinárodní seminář 1.5. uzavřeny DPČ s garanty KA Příprava žádosti o podstatnou změnu, 2.7. předložena Řídicímu orgánu, 30. 7. předložena poradě vedení vysloven souhlas, konzultace druhu zadávacího řízení s Mgr. Sixtou (MMR) 19. 8. Podstatná změna nabyla účinnosti dodatkem, obnoveno řešení projektu Příprava 2. zadávací dokumentace, vyhlášení a realizace výběrového řízení 2014 měsíc leden únor březen duben květen červen červenec srpen září říjen listopad prosinec aktivita Výběrové řízení ukončeno 6.3.2014, revitalizace KA 2015 měsíc leden únor březen duben květen červen aktivita Konec projektu 10

IPN Metodika, projekt MŠMT Zpracování podrobných a strukturovaných návrhů oborových metodik hodnocení hodnocených jednotek v rámci VO s prvky mezinárodního oborového informovaného peer-review Využití relevantních bibliografických, citačních a dalších databází vědeckých výsledků a jejich analytických nástrojů k zajištění zadání včetně přípravy specialistů Vypracování podrobného návrhu procesních pravidel hodnocení Návrh systému institucionálního financování VaV (rozpočet podle předpisu a výkonnostní kontrakt) a jeho vazeb na výsledky hodnocení Malé pilotní ověření nového systému hodnocení VO Analýza účelového financování ve vztahu a v interakci k financování institucionálnímu Velké pilotní ověření Doporučení pro vznik a fungování instituce organizující hodnocení 11

IPN Metodika, projekt MŠMT Základní pojetí hodnocení Hodnocená jednotka, přihlášení ke zhodnocení v oboru (typicky v.v.i. nebo fakulta). Odhad 5 8 panelů, cca 25 oborových subpanelů. Soubor indikátorů podle oboru a postavení HJ v systému VaVaI. Dvoukolové hodnocení, mezinárodní oborové peer-review. Sebehodnotící zpráva. Nebudou se hodnotit všechny výsledky. Hodnocení organizující instituce. Realizace 1krát za cca 5 let. 12

IPN Metodika, projekt MŠMT Bibliometrie VVŠ WoS, heslo Czech Republic, 25.1.2014, roztřídění podle instituce 13

IPN Metodika, projekt MŠMT Institucionální financování 14

IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory 15

IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory zdroj: Výroční zprávy VVŠ o hospodaření 2012 17

Proč potřebuje ČR jiné hodnocení? Zajištění informací pro posílení efektivity řízení a strategického rozhodování (dnes není k dispozici). Pravidelné vyhodnocování vědecké výkonnosti a fungování institucí, které realizují výzkum a nárokují si veřejnou institucionální podporu (dnes není k dispozici). Srovnání kvality všech HJ vůči světové úrovni a standardům (dnes není k dispozici) Informace o využívání a potřebnosti velkých a nákladných výzkumných infrastruktur (dnes není k dispozici) Srovnání hodnocených jednotek (HJ) v oborech v ČR (dnes není k dispozici) 19

Je jednoduché zavést nové hodnocení? není žádné ideální a nekonfliktní řešení metodicky velmi složité nyní samostatný vědní obor metodika není 100 % přenositelná ze země do země hledání konsensu otevřené jednání všech zúčastněných stran vysvětlování, diskuse, ochota jednat dlouhodobý proces, přechodné období 20