Informace Oddělení tvůrčích činností Setkání zaměstnanců 1. 2. 2018 Informace Oddělení tvůrčích činností Setkání zaměstnanců FAI 13.1.2019
OBSAH Vykazování publikačních výstupů do OBD Podklady pro osobní hodnocení na období 1.9.2018 – 31.8.2019 Metodika hodnocení výsledků výzkumu a vývoje 2013-2016 hodnocení FAI dle H13-H16 srovnání výsledků FAI dle H16 s podobně zaměřenými fakultami METODIKA 17+ (principy) Implementace v roce 2017 (sledované bibliometrické analýzy) Bibliometrická analýza výsledků FAI v období 2011-2015 Srovnání přístupu hodnocení hodnocení výzkumných organizací a hodnocení programů účelové podpory dle Metodiky 2013-2016 a METODIKY 17+ Úkoly a doporučení v souvislosti se zavedením Metodiky 17+ Setkání zaměstnanců FAI 13.1.2019
Je třeba dodržovat rozhodnutí rektora RR/10/2015 Vykazování publikačních výstupů za rok 2017 do OBD Je třeba dodržovat rozhodnutí rektora RR/10/2015 Článek 2 odst. 8 uvádí následující: Při doplňování údajů u jednotlivých záznamů v OBD je autor povinen jako přílohu přiložit postprint příslušného článku. Ten bude následně uložen v Repozitáři publikační činnosti UTB a zpřístupněn podle statutu časopisu v databázi Sherpa/Romeo. Statut příslušného časopisu prověří Knihovna UTB. V případě, že vydavatel neumožňuje volné zveřejnění postprintu článku, bude tento článek v repozitáři dostupný pouze v rámci počítačové sítě UTB. Pojmem postprint je myšlen tzv. Accepted Manuscript - rukopis článku přijatý k tisku na základě recenzního řízení, ale ještě bez editace a dalších typografických zásahů provedených ze strany vydavatele. Návod k editaci záznamu je přílohou RR/10/2015 Všechny záznamy zadat do 28.2.2018 Setkání zaměstnanců FAI 13.1.2019
Vykazování publikačních výstupů za rok 2017 do OBD Je třeba nejdříve zkontrolovat zda již některý z vašich publikačních výstupů není v systému OBD zadán Publikační výstupy evidované v databázích SCOPUS a Web of Science zadává dle aktuálních přírůstků knihovna UTB. Předměty průmyslové právní ochrany (Užitný nebo průmyslový vzor, Patent) zadává Centrum transferu technologií UTB na základě registrace/udělení ochranného dokumentu. V případě, že je výstup již zadán je třeba záznam doplnit a zkontrolovat Je třeba zadat všechny publikační výstupy Všechny knižní, časopisecké i konferenční publikace Patenty, užitné a průmyslové vzory Poloprovoz, certifikovaná metodika, ověřená technologie, prototyp, software, funkční vzorek Setkání zaměstnanců FAI 13.1.2019
Výběr druhu výsledku Výběr poddruhu výsledku zatím stejný jako pro rok 2016. Rok vydání, uplatnění nezaměňovat s rokem sběru záznamů.
Výběr autorů z číselníku Při výběru autora z číselníku automaticky naskakuje do kolonky „rok publikace“ rok 2017. Po vyfiltrování dle tohoto kritéria není ovšem uvedeno pracoviště autora. Výsledný záznam se pak nepromítne v databázi výsledku spadajících pod FAI. Při odstranění roku se po vyfiltrování autora zobrazí i pracoviště a výsledný záznam se promítne v databázi výsledku spadajících pod FAI.
Výběr oboru 1. 2. 1. Výběr oboru + podoboru dle nové metodiky 17+ 2. Nezapomenout zadat i „starý“ kód oboru!
Zadání DOI článku ve sborníku Má-li příspěvek vygenerováno DOI, nutno vyplnit i záznamu OBD.
Podklady pro osobní hodnocení na období 1.9.2018-31.8.2019 OTČ připraví materiály pro vyplnění podkladů pro výpočet osobního hodnocení pro období 1.9.2018 – 31.8.2019 „Výkaz tvůrčích a ostatních aktivit za rok 2017“ – nebude měněna metodika hodnocení jednotlivých výstupů oproti minulému roku Seznam hodnocených konferencí (rok 2017) včetně uvedení informace zda sborník má nenulovou hodnotu SJR indexu Seznam časopisů (kde publikovali autoři z FAI v roce 2017) včetně uvedení normovaného pořadí časopisů Manuál pro vyplnění výkazu včetně popisu metodiky hodnocení citací Všechny podklady pro OH dostupné na webových stránkách FAI menu „Věda a výzkum“ - položka „Hodnocení výzkumu a vývoje“ - kategorie „Hodnocení pedagogických a tvůrčích aktivit na FAI “ Setkání zaměstnanců FAI 13.1.2019
„Výkaz tvůrčích a ostatních aktivit za rok 2017“ Podklady pro osobní hodnocení na období 1.9.2018-31.8.2019 „Výkaz tvůrčích a ostatních aktivit za rok 2017“ vyplnit a odevzdat včetně dalších podkladů ředitelům ústavů do pátku 27.4.2018 Ředitelé po kontrole předají materiály na OTČ do pátku 11.5.2018 Setkání zaměstnanců FAI 13.1.2019
Metodika 2013 - 2016 - princip hodnocení PILÍŘ I. - Publikační výstupy PILÍŘ II. Hodnocení kvality vybraných výsledků Bonifikace za získání ERC (European Research Project) Druh výsledku Popis Počet RIV bodů Kriterium Jimp Článek v impaktovaném časopise 10 - 305 Normované pořadí časopisu dle IF Jsc Článek v časopise indexovaného v databázi SCOPUS Normované pořadí časopisu dle SJR D Článek ve sborníku indexovaném v databázi SCOPUS nebo WOS 8 - 60 Normované pořadí sborníku dle SJR B, C Kniha, kapitola v knize 4 - 120 Hodnocení peer review Setkání zaměstnanců FAI 13.1.2019
Metodika 2013 - 2016 - princip hodnocení PILÍŘ III. (výstupy do roku 2011) Paušální hodnocení všech nepublikačních výstupů (funkční vzorek, užitný vzor, software, prototyp, metodika, výzkumná zpráva, atd.) PILÍŘ III. (výstupy v roce 2012-2015) Paušální hodnocení pouze Patenty, Odrůdy, Plemena Ostatní druhy výsledku (funkční vzorek, užitný vzor, software, prototyp, metodika, výzkumná zpráva, atd.) Musí být výstupem aplikovaného nebo smluvního výzkumu Hodnocení dle objemu finanční podpory aplikovaného nebo smluvního výzkumu Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
vysoké školy (VŠ) ústavy AV ČR rezortní VO Metodika 17+ Pro účely hodnocení jsou VO rozděleny do 3 základních skupin podle svého postaví v systému VaVaI a účelu zřízení: vysoké školy (VŠ) ústavy AV ČR rezortní VO Metodika 17+ zavádí posouzení kvality v pěti základních hodnoticích modulech, které jsou pro všechny typy VO společné: MODUL 1 - Kvalita vybraných výsledků, MODUL 2 - Výkonnost výzkumu, MODUL 3 - Společenská relevance, MODUL 4 - Viabilita/Životaschopnost, MODUL 5 - Strategie a koncepce. Relativní významnost modulů bude různá podle postavení a mise VO v systému VaVaI. pro VŠ nejvyšší význam (váha) Setkání zaměstnanců FAI 13.1.2019
MODUL 1 - Kvalita vybraných výsledků Principem hodnocení je posouzení vybraných výsledků odborným panelem z hlediska jejich kvality, originality a významnosti ve srovnání s mezinárodní úrovní. (odpovídá pilíři II. dle předcházející metodiky) Hodnotí se omezený počet vybraných výsledků (počet závislý na objemu RVO prostředků v minulých letech). Vybrané výsledky jsou posouzeny ve dvou odlišných kategoriích: I. kategorie: zejména (nikoli výhradně) výsledky základního výzkumu, resp. výsledky publikační hlavním kritériem pro posouzení je přínos k poznání v daných oborech II. kategorie: zejména výzkum aplikovaný, resp. výsledky nepublikační hlavním kritériem je společenská relevance, resp. význam pro společnost a případně jeho dopady (ekonomický či jinak popsatelný přínos společnosti). Setkání zaměstnanců FAI 13.1.2019
MODUL 2 – Výkonnost výzkumu Zahrnuje produktivitu, kvalitu a konkurenceschopnost v oblasti výzkumu a vývoje. Sledovanými indikátory budou: Bibliometrické údaje kompletní výsledky VO v jednotlivých oborech zdrojem budou mezinárodní databáze v těch oborech, kde je převážná část výsledků publikována v mezinárodních časopisech. Objemy a skladba získaných prostředků na VaVaI. Počty a skladba pracovníků. Zpracování dalších kvantitativních analýz běžnými statistickými postupy. Kvantitativní ukazatele a analýzy pro oblast aplikovaného výzkumu. Setkání zaměstnanců FAI 13.1.2019
MODUL 3 – Společenská relevance Společenská relevance se vztahuje k využití výsledků výzkumu v průmyslovém VaVaI a ve společenské praxi, ale i k jejich celkovému společenskému přínosu. Zahrnuje sledování parametrů zejména v těchto oblastech: přenos výsledků do praxe, spolupráce s aplikační sférou, aktivity pro přenos znalostí a technologií na neakademické subjekty ve společnosti (kvalitativní údaje), ekonomický či další dokladovatelný přínos pro společnost, zapojení studentů do výzkumné činnosti: výběrové přednášky/semináře související s výzkumem dané VO, praxe studentů, kvalita výchovy a uplatňování doktorandů, externí financování (účelové a smluvní), příjmy z licencí, spin-off, mezinárodní i domácí prestižní ocenění vědeckého přínosu. Setkání zaměstnanců FAI 13.1.2019
MODUL 4 – Viabilita Kvalita řízení a kvalita vnitřních procesů VO v oblastech: Výzkumné prostředí organizační schéma, kvalita vedení výzkumu, personální politika, struktura a rozvoj lidských zdrojů, vybavenost a organizace infrastruktury pro výzkum. Mezinárodní a národní spolupráce členství v globální a národní výzkumné komunitě, komunitní aktivity, financování z externích zdrojů, úspěšnost v získávání projektů resp. spolufinancování (financování z třetích stran), úspěšně dokončené grantové projekty, postavení VO podle mezinárodních ukazatelů a statistik. Základní struktura nákladů a výnosů v jednotlivých letech hodnoceného období Setkání zaměstnanců FAI 13.1.2019
MODUL 5 – Strategie a koncepce Stanovení výzkumné strategie VO - kvalita je pak kritickým faktorem pro hodnoticí panely. Strategie a koncepce zahrnuje sledování parametrů v těchto oblastech: přiměřenost a kvalita výzkumné strategie, mise organizace (účel, strategické směřování), koncepce (kroky, jak byla mise naplňována), plnění koncepce, vize pro další období, vazba na plnění koncepce poskytovatele/zřizovatele, případná vazba na plnění vyšších strategických cílů opatření vyplývajících z platných dokumentů na národní a nadnárodní úrovni. Setkání zaměstnanců FAI 13.1.2019
Nástroje hodnocení Pro účely hodnocení budou použity tři základní nástroje: Nástroj 1 – bibliometrická analýza Nástroj 2 – posouzení hodnotiteli a odborným panelem Nástroj 3 – návštěva na místě Hodnoticí panely - Pro odborné posouzení VO bude ustaveno 6 panelů podle oborových skupin OECD (Frascati Manual): Natural Sciences, Engineering and Technology, Medical and Health Sciences, Agriculture, Social Sciences, Arts and Humanities. Setkání zaměstnanců FAI 13.1.2019
Škálování (výsledné hodnocení) VO Výsledkem kompletního hodnocení ve všech modulech v pětiletých cyklech bude zařazení VO do čtyřstupňové škály: A – Vynikající (excellent) VO Ve výzkumných parametrech globálních oborů mezinárodně kompetitivní instituce a/nebo instituce se silným inovačním potenciálem a vynikajícími výsledky aplikovaného výzkumu a/nebo instituce naplňující vynikajícím způsobem svěřenou misi. B – Velmi dobrá (very good) VO Instituce vyrovnané kvality s výbornými výsledky výzkumu, dostatečným inovačním potenciálem a/nebo významnými výsledky aplikovaného výzkumu, výsledky VaVaI odpovídají účelu zřízení. C – Dobrá (good) VO Dobrá instituce, poněkud nevyrovnané kvality, v některých parametrech základního a/nebo aplikovaného výzkumu dosahující výborné výsledky a/nebo instituce, která průměrně naplňuje účel zřízení. VO se strategií a snahou odstraňovat slabé stránky a nedostatky. D – Průměrná až podprůměrná (average to below average) VO Instituce v převážné většině parametrů základního a/nebo aplikovaného výzkumu průměrná až podprůměrná a/nebo instituce, která nedostatečně naplňuje účel zřízení. VO s řadou slabých stránek a nedostatků a omezenou snahou je odstraňovat. Setkání zaměstnanců FAI 13.1.2019
Implementace Metodiky 17+ První dlouhodobě platné škálování nastane v roce 2020 V implementačním období (2017-2019) bude škálování výsledků VO indikativní a bude možné zařazení VO do škálovací stupnice změnit v roce následujícím. Setkání zaměstnanců FAI 13.1.2019
Implementace Metodiky 17+ v roce 2017 MODUL 1 - Kvalita vybraných výsledků Výběr nejlepších výsledků s rokem uplatnění 2016, pro které nelze uplatnit bibliometrické ukazatele Tyto výsledky hodnoceny recenzenty podle kritéria „společenská relevance“ Za FAI nominováno celkem 9 výsledků 4x – patent 3x – kapitola v knize 1x – poloprovoz 1x – výzkumná zpráva (smluvní výzkum) Setkání zaměstnanců FAI 13.1.2019
Implementace Metodiky 17+ v roce 2017 MODUL 2 - Výkonnost výzkumu zhodnoceny druhy výsledků Jimp, Jsc a D podle bibliometrických ukazatelů AIS (Article Influence Score) – databáze WOS SJR (SCImago Journal Index) – databáze SCOPUS Rozdělení výsledků do kvalitativních tříd – percentilů První decil – 10 % nejlepších časopisů (zdrojů) Kvartily – Q1, Q2, Q3, Q4 Setkání zaměstnanců FAI 13.1.2019
Implementace Metodiky 17+ v roce 2017 MODUL 2 - Výkonnost výzkumu Celková bibliometrická zpráva bude obsahovat: Celkový seznam a počet výsledků VO Četnost a procentní podíl všech výsledků v prvním decilu a v jednotlivých kvartilech podle AIS a SJR Oborově členěný počet a procentní podíl výsledků umístěných v prvním decilu a v prvním kvartilu dle AIS a SJR Srovnání oborového mediánu VO s mezinárodním (národním) mediánem Počet publikací ve spolupráci se zahraničními výzkumnými organizacemi Počet publikací ve spolupráci s podniky Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Setkání zaměstnanců FAI 13.1.2019
Bibliometrická analýza dle webového nástroje AV ČR https://ideaapps.cerge-ei.cz/Trendy/cz/ Setkání zaměstnanců FAI 13.1.2019
Srovnání přístupu hodnocení hodnocení výzkumných organizací a hodnocení programů účelové podpory dle Metodiky 2013-2016 a METODIKY 17+ Metodika 2013-2016 Metodika 17+ Kvantitativní forma hodnocení („kafemlýnek“) Kvalitativní forma hodnocení (excelentní výsledky) Průměrné hodnocení výsledků FAI Podprůměrné hodnocení výsledků FAI Mírný růst institucionální podpory na rozvoj výzkumné organizace (RVO) POKLES institucionální podpory na rozvoj výzkumné organizace (RVO) Mírný růst účelové podpory na specifický vysokoškolský výzkum (SVV) POKLES účelové podpory na specifický vysokoškolský výzkum (SVV) Setkání zaměstnanců FAI 13.1.2019
Doporučení na základě principů Metodiky 17+ Zvýšit poměr počtu časopiseckých publikací (časopisy indexované v databázi WOS, SCOPUS) versus počet konferenčních publikací Zaměřit se na excelentní výstupy pokusit se vybírat časopisy z Q1, Q2 popřípadě prvního decilu budou podporovány publikace v prestižních placených časopisech (kvartil Q1), kde poplatek za zveřejnění je více než 1000 Euro Dbát na citovanost našich publikací (zejména pak excelentních) v excelentních publikačních výstupech Zvýšit počet publikací ve spolupráci se zahraničními výzkumnými organizacemi Vytvářet publikace ve spolupráci s podniky Setkání zaměstnanců FAI 13.1.2019
Kde vyhledávat hodnotné časopisy Web of Science http://apps.webofknowledge.com SCOPUS https://www.scopus.com SCIMAGO http://www.scimagojr.com POZOR na “predátorské časopisy“ https://predatoryjournals.com/journals/ Setkání zaměstnanců FAI 13.1.2019
Doporučení na základě principů Metodiky 17+ Pokoušet se o členství v mezinárodních výzkumných komunitách, redakcích Zvyšovat smluvní výzkum fakulty výstupem smluvního výzkumu by měl být alespoň nějaký druh nepublikačního výsledku (tj. funkční vzorek, užitný vzor, software, prototyp, metodika, výzkumná zpráva, atd.) tyto výstupy mohou být nominovány do MODULu 1, kde se hodnotí společenská relevance (tzn. „užitečnost“, význam pro společnost, ekonomické zisky) Podávat žádosti o grantové a programové projekty Setkání zaměstnanců FAI 13.1.2019
Podmínky pro zajištění odpovídajícího podílu institucionální podpory na rozvoj výzkumné organizace vyplývající z nasazení Metodiky 17+ Maximální motivace akademických a vědeckých pracovníků pro vytváření excelentních výstupů Aktualizovat směrnici děkana „Hodnocení pedagogických a tvůrčích aktivit na FAI“ Podporovat mezinárodní výzkumné aktivity akademických a vědeckých pracovníků Zvýšení publikačních výstupů ve spolupráci se zahraničními partnery Podporovat kariérní růst pracovníků FAI v souladu s Metodikou 17+ Aktualizovat směrnici děkana „ Směrnice pro habilitační řízení a řízení ke jmenování profesorem na FAI“ Setkání zaměstnanců FAI 13.1.2019
Děkuji za pozornost Setkání zaměstnanců FAI 13.1.2019