Efektivní systém hodnocení a financování výzkumu, vývoje a inovací IPN Metodika Jitka Moravcová MŠMT Učená společnost 19. červen 2012

Úvod Česká republika Státní výdaje na VaV dosáhly 1,54% of HDP v 2007 a 1.47% v 2008. Mezi k EU nově přistoupenými zeměmi je to nejvyšší podíl HDP. Vyšší investování než v Irsku, podstatně více než ve Španělsku, Itálii či Portugalsku (Spain, Italy, Portugal). Ale stále je pod průměrem OECD. Metodika hodnocení výsledků VaV byla zavedena v 2004. Počet publikací na WoS se za období 1993-2009 ztrojnásobil. Počet citací byl za roky 2005-2009 více než 6krát vyšší než v letech 1993-1997. Zvyšující se vědecká spolupráce. 45 % všech publikací vzniklo v mezinárodní spolupráci. 2

Úvod zákon č. 130/2002 Sb. výsledek VaVaI základní výzkum: nové vědomosti + publikace aplikovaný výzkum: nové poznatky a dovednosti pro vývoj výrobků, postupů nebo služeb + ochrana autorských práv, poznatky a dovednosti pro potřeby poskytovatele, pokud vznikly při plnění veřejné zakázky vývoj: návrhy nových nebo podstatně zdokonalených výrobků, postupů nebo služeb inovace: nové nebo podstatně zdokonalené výrobky, postupy nebo služby, zavedené do praxe 3

Úvod zákon č. 130/2002 Sb. účelová podpora grantový projekt: příjemce cíle a způsoby řešení v základním výzkumu stanovuje sám programový projekt: příjemce vyjadřuje, jak přispěje k naplnění cílů programu, řešení může obsahovat i nezbytné činnosti základního výzkumu, pokud na ně navazují činnosti aplikovaného výzkumu, vývoje nebo inovací specifický vysokoškolský výzkum velká infrastruktura 4

Úvod zákon č. 130/2002 Sb. institucionální podpora dlouhodobý koncepční rozvoj výzkumné organizace na základě zhodnocení jí dosažených výsledků mezinárodní spolupráci České republiky ve výzkumu a vývoji, realizovanou na základě mezinárodních smluv operační programy VaVaI náklady spojené s činností RVVI, GA ČR, TA ČR, AV ČR 5

Úvod Celkové výdaje státního rozpočtu na VaVaI (tis. Kč) 6

Současný stav Hodnocení výsledků VaV Metodika hodnocení byla zavedena 2004. Koncept kvantitativního měření výsledků. Prostředek ke zvýšení kvality vědecké práce. Snaha o vylepšení hodnocení současně na všech úrovních systému VaV . Každoroční revize. Podstatná revize byla v roce 2009. Metodologie pro alokaci institucionální podpory. Spoléhá pouze na kvantifikaci výsledků pro hodnocení výzkumných organizací a programů. Revize 2010. Jde ještě dále za revizi 2009. Body spočítané podle Metodiky převádí přímou úměrou na institucionální podporu. 7

Současný stav Metodika hodnocení Definuje uznatelné výsledky a způsob, jak jsou data sbírána a jak se převádějí na body. Vysílá jasný signál: žádné výsledky, žádná institucionální podpora. Směřuje proti nepotismu, korupci a lobování tím, že spoléhá jen na výsledky dosažené v minulosti. Stala se předmětem nekončících debat a diskusí. Způsobuje, že institucionální stejně jako účelové financování je krátkodobé. Neumožňuje strategické plánování a investování VO... Vyvolává nestabilitu financováním na 1 rok. Vyvolává tendenci k fragmentaci výzkumného úsilí i výsledků. 8

Současný stav Mezinárodní audit systému VaVaI v ČR, 2010-2011 Metodika hodnocení (VO, programů, poskytovatelů) by měla být nahrazena systémem, který kombinuje indikátory, peer review a prvky budoucího rozvoje. Metodiku implementovat společně s výkonnostními smlouvami pro financování VO v transparentním procesu. Pro stabilitu systému by měl být podíl účelového financování max. 50 %. Mezi výsledkem hodnocením a institucionálním financováním nemusí nutně být přímá úměra. Neužívat přístup výhradně postavený na indikátorech. Změny dělat pomalu. Systém potřebuje čas na vyhodnocení změn. Změny dělat po malých krocích. Malá změna výše dotace má velký vliv na chování výzkumné organizace. 9

Budoucnost Individuální projekt národní MŠMT, 2012-2013 Efektivní systém hodnocení a financování R&D&I systému. Oborová metodika hodnocení využívající dobrou zahraniční praxi. Nový systém institucionální podpory bez mechanického vztahu body-peníze. Kombinace dvou pilířů: formula budget a performance contracts. Institucionální podpora optimálně na 5 let. Různé modely hodnocení a financování pro různé typy VO. Těsná spolupráce a koordinace s RVVI. Otevřená diskuse se všemi aktéry. Hodnocení jako nástroj pro rozvoj výzkumných organizací. Hodnocení jako nástroj pro kvalifikovaná politická rozhodnutí. Hodnocení jako nástroj pro efektivní využívání veřejných prostředků. 10

IPN Metodika Klíčové aktivity 1. Informační podpora (přístup do databází, analyýza a optimalizace IS, bibliometrické analýzy). Prof. Petr Ráb. 2. Systém hodnocení (oborová metodika, pravidla podle typu VO, indikátory, informované peer-review, samoevaluační zprávy, malý pilotní projekt, poskytovatelé, programy). Doc. Daniel Münich. 3. Systém financování (formula funding + performance-based contract, represivní složky). RNDr. Jiří Rákosník. 4. Velké pilotní ověření (VVŠ, důležitá zpětná vazba, výzkumný profil). Prof. Stanislava Hronová 5. Harmonogram pro přechodné období. RNDr. Jan Hrušák. 6. Institucionální podpora (studie proveditelnosti ustavení nezáviské instituce organizující hodnocení, výchova expertů). Ing. Karel Šima. 7. Koordinace reformních kroků a vytváření podmínek pro jejich přijetí. Prof. Richard Hindls. 11

IPN Metodika webová stránka http://metodika.reformy-msmt.cz/ 12

IPN Metodika Harmonogram 2012 – 2013: veřejná zakázka 2013/2014: závěrečná zpráva veřejné zakázky 2014: příprava podmínek pro hodnocení 2015: celonárodní hodnocení 2016: zveřejnění výsledků 13

Veřejná zakázka 14

Veřejné projednávání Ke 2 dílčím zprávám (hodnocení, financování). K závěrečné zprávě (včetně malého pilota). Každá veřejná konzultace bude trvat 2 měsíce: předložení konceptu zprávy interní expertní oponentura (experti a panelisté) finální verze zprávy ke zveřejnění a připomínkám vypořádání připomínek a konference ke zprávě 15

IPN Metodika Srovnání hodnocených jednotek (HJ) v oboru v ČR (dnes není k dispozici) Srovnání kvality všech HJ vůči světovému standardu (dnes není k dispozici) Kvalitativní a kvantitativní zpětnou vazbu (dnes není k dispozici) pro: vědce, týmy, katedry řízení / management součástí VŠ řízení / management VO poskytovatele RVVI a vládu (například stanovení priorit) podnikatelské subjekty zájemce o studium veřejnost – daňové poplatníky zahraniční subjekty 16

Hodnocení Inspirace praxí Velké Británie, Holandska, Finska. Reflexe Dlouhodobých principů hodnocení a financování RVVI a Ipn Audit. Metoda: sada indikátorů (bibliometrie) informované peer-review podle oborových metodik nadresortní koordinace a dohled pouze 1 x za ~5 let cca 5 - 8 oborových panelů a cca 25-30 subpanelů Hodnocené jednotky (HJ) přihlášené ke zhodnocení v oboru. HJ typicky v.v.i. nebo součásti VŠ (fakulty). Hodnocení organizující instituce. 17

Hodnocení Tři dimenze hodnocení řazeny dle váhy v hodnocení 1. dimenze: Nejvýznamnější výsledky výzkumu připadající na vědeckého pracovníka (případně tým). 2. dimenze: Nejvýznamnější dopady výzkumu. 3. dimenze: Institucionální předpoklady rozvoje HJ. V každé dimenzi bude výsledkem hodnocení výkonnostní profil HJ vztažený k mezinárodním standardům. 18

Hodnocení Průběh hodnocení Ustavení (sub)panelů. Přihláška HJ do hodnocení v daném oboru. Zpracování sebeevaluační zprávy samotnou HJ. Zpracování bibliometrické zprávy pro HJ. Osobní návštěva subpanelu v HJ. Hodnotící zpráva panelu a stanovisko HJ. Syntéza výsledků na úroveň oborů, poskytovatelů, velkých infrastruktur. Zveřejnění výsledků. 19

Hodnocení Průběh hodnocení Procesy hodnocení kompletně v angličtině. Převaha zahraničních hodnotitelů v panelech a subpanelech. Dobře honorovaná práce kvalitních hodnotitelů. Kvalitní organizační podpora (hodnocení organizující instituce). Překážky proti nepotismu, opatření na vyloučení konfliktu zájmů. HJ si nebudou vybírat hodnotitele. Panelům a subpanelům předsedají cizinci. Zajištění průřezového dohledu nad prací panelů/subpanelů. 20