Implementace IS HAP na LF UP Jana Talašová Školení pro akademické a vedoucí pracovníky LF 11. října 2018 1
Obsah 1. Úvodem: Proč IS HAP? 2. Stručně k modelu hodnocení IS HAP 3. Napojení IS HAP na ostatní informační systémy UP a další zdroje dat 4. Harmonogram implementace IS HAP na LF 2
1. Úvodem: Proč IS HAP? IS HAP je důležitou součástí systému vnitřního zajišťování a hodnocení kvality na UP, jehož existenci a funkčnost vyžaduje: Novela zákona o VŠ. Standardy akreditací oblastí vzdělávání i studijních programů. IS HAP je vhodným nástrojem pro informační podporu řízení akademických pracovníků na UP: Progresivní metodika hodnocení (prorůstové řízení), interdisciplinární řešitelský tým, sofistikovaný matematický model hodnocení. Napojení na ostatní informační systémy univerzity, propracované komunikační rozhraní, pohodlné výstupy. 10 let výzkumu, praktické ověření na fakultách 5 českých VŠ. 3
2. Stručně k modelu hodnocení IS HAP 2.1. Základní koncepce modelu Model slouží k periodickému ročnímu hodnocení výkonu akademických pracovníků ve: vzdělávací oblasti, tvůrčí oblasti. Rozdílné požadavky jsou kladeny na různé pracovní pozice: asistent, odborný asistent, docent, profesor (výzkumný pracovník, lektor) Model rovněž zohledňuje: zatížení pracovníka akademickými funkcemi a manažerskou činností a počítá celkové vytížení akademického pracovníka. 4
2.2. Postup hodnocení akad. pracovníků v IS HAP 1. Vyplnění aktivit a výsledků do zadávacího formuláře (s maximálním využitím externích zdrojů dat). 2. Výpočet bodových hodnocení za vzdělávací a tvůrčí oblast. (Pozor - různé bodové škály ve vzdělávací a tvůrčí oblasti!) 3. Výpočet standardizovaných hodnocení ve vzdělávací a tvůrčí oblasti jako podílu bodových hodnocení dosažených v těchto oblastech a standardních bodových hodnocení stanovených pro každou z oblastí a danou pracovní pozici 4. Výpočet celkového hodnocení (vzdělávací + tvůrčí oblast) pomocí jazykově definované báze fuzzy pravidel. 5. Výpočet celkového vytížení pracovníka (celkové hodnocení + zatížení akademickými a manažerskými funkcemi) pomocí jazykově definované báze fuzzy pravidel. 6. Finální kvalitativní hodnocení pracovníka jeho nadřízeným s využitím vypočteného hodnocení, dat uložených přehledně v IS HAP a dalších informací (hodnotící pohovor). Hodnocení je zapsáno do IS HAP. 5
2.3. Stanovení bodových hodnocení aktivit a výsledků Pro jednotku každé ze sledovaných činností je určeno bodové hodnocení: pro pedagogiku dle relativní časové a odborné náročnosti této aktivity v rámci dané skupiny činností, pro tvůrčí činnost je základem porovnání s bodovým hodnocením impaktovaných publikací v kafemlejnku (prof. Hobza + prof. Hořejší). Uplatňují se limity počtu jednotek započitatelných do hodnocení (množství nevýznamných aktivit nemá nahradit jeden excelentní výstup). 6
2.4. Výpočet standardizovaných hodnocení pro každou z hodnocených oblastí Standardizovaná hodnocení akademického pracovníka ve vzdělávací a tvůrčí oblasti představují násobky standardu určeného pro: danou oblast hodnocení, danou pracovní pozici. Standardy se nastavují pro každou z obou oblastí hodnocení a všechny pracovní pozice takto: přednastavení primárně na základě analýzy uložených dat, finální podobu stanovují děkani fakult; u různých fakult jedné univerzity se standardy tedy mohou lišit. 7
2.5. Výpočet celkového hodnocení (vzdělávací+tvůrčí činnost) - škály pro vstupní proměnné Škála první vstupní proměnné: Škála druhé vstupní proměnné: 8
2.5. Výpočet celkového hodnocení (vzdělávací+tvůrčí činnost) - jazykově popsaná báze pravidel Jazykově popsaná agregační funkce (příklad): IS HAP nabízí několik jazykově popsaných bází pravidel. Volba báze pravidel je součástí nastavení modelu hodnocení IS HAP. 9
2.5. Výpočet celkového hodnocení (vzdělávací+tvůrčí činnost) - grafické znázornění agregačního modelu Výsledná agregační hodnotící funkce pro uvedenou bázi pravidel 11
2.5. Výpočet celkového hodnocení (vzdělávací+tvůrčí činnost) - interpretace výsledku Škála výstupní proměnné: Vypočtené hodnocení H je interpretováno následovně: Je-li např. H=1,6, tj. VD(H)=0,8 a VY(H)=0,2, pak celkové hodnocení je: z 80% velmi dobré a z 20% vynikající (jazyková interpretace), z 80% světle modré a z 20% tmavomodré (grafické znázornění). 12
2.6. Výpočet celkového vytížení pracovníka 13
Ukázka hodnocení akademického pracovníka 14
Ukázka hodnocení pracovníků katedry 15
3. Napojení IS HAP na ostatní IS UP a další zdroje dat Důvody: Nutnost max. automatizace při implementaci IS HAP v rozsahu celé UP. Usnadnění práce akademických pracovníků se systémem IS HAP. Snaha o objektivitu dat zpracovávaných IS HAP. Problémy: Nedokonalost dat uložených v těchto IS, související nutná opatření. 16
3.1. SAP IS HAP přebírá ze SAPu organizační strukturu pracovišť UP IS HAP přebírá ze SAPu informace o akademických pracovnících: ID pracovníka a jeho přiřazení k pracovišti Pracovní pozici pracovníka (odb. asistent, docent, profesor, ) Průměrný přepočtený pracovní úvazek v hodnoceném období 17
3.2. STAG IS HAP přebírá standardně ze STAGu informace o pedagogické činnosti akademického pracovníka: odučené hodiny, zkoušení studenti vedené kvalifikační práce garanti studijních programů Specifika IS HAP LF ohledně výuky: informace o rozsahu výuky akademických pracovníků byla poskytnuta přednosty jednotlivých ústavů a klinik (rozdělení celkové vykazované výuky pracoviště) LF pracuje s hodinami výuky za rok (ostatní fakulty s týdenními hodinami) V IS HAP LF je uváděna výuka vztažená k jednotlivým ústavům a klinikám (na ostatních fakultách jsou uváděny jednotlivé předměty) 18
3.3. OBD IS HAP přebírá z OBD informace o vědeckovýzkumné tvůrčí činnosti akademického pracovníka. V souvislosti s využitím dat z OBD pro IS HAP bylo realizováno významné rozšíření informací o publikacích v odborných časopisech uložených v OBD (byla přidána ověřená informace o kategorie časopisu J imp, J Scop, J ost + základní bibliometrické charakteristiky impakt. časopisu). Data o publikacích a patentech jsou do IS HAP naplňována výlučně z OBD, nelze je doplňovat ručně. 19
3.5. Projekty a smluvní výzkum Jednoduchá databáze projektů a zakázek aplikovaného výzkumu byla vytvořena přímo v IS HAP Získávání dat o projektech - PS UP, CEP; započítávají se projekty spadající do hodnoceného období. Shromažďování dat o zakázkách aplikovaného výzkumu (od 50 tis. Kč) probíhá v podobném duchu, jako dříve pro MŠMT. Data o projektech a zakázkách smluvního výzkumu nelze doplňovat nebo měnit ručně. 21
3.5. Informace zadávané akad. pracovníky Položky zadávacího formuláře LF, jejichž hodnoty nelze získat automatizovaně ze základních IS univerzity ani z dostupných externích informačních zdrojů. Textová pole, v jejichž rámci je dána akad. pracovníkovi možnost poskytnout nadřízenému informace důležité z hlediska jeho hodnocení a dalšího profesního rozvoje: Ostatní činnosti (všechny další aktivity a výsledky, které chce mít pracovník zohledněny při svém hodnocení) Plány do budoucna ve vzdělávací a tvůrčí oblasti 22
4. Harmonogram implementace IS HAP na LF Od Do Aktivita 12. 10. 5.11. Zpřístupnění zadávacích formulářů IS HAP akademickým pracovníkům, doplňování dat akademickými pracovníky a odeslání vyplněných formulářů, kontrola formulářů na úrovni přednostů (případné vracení k opravě) 6. 11. 25. 11. Analýza dat LF týmem IS HAP. Předběžné nastavení parametrů matematického modelu hodnocení na podmínky této fakulty. 26. 11. 30.11. Děkanovi LF bude zpřístupněno hodnocení pracovníků na základě předběžných nastavení modelu hodnocení. Děkan LF stanoví ve spolupráci s týmem IS HAP finální nastavení modelu hodnocení. Proběhne výpočet hodnocení s použitím finálního nastavení modelu. 3.12. 31.1.2019 Zpřístupnění vypočtených hodnocení přednostům pracovišť LF. Hodnotící pohovory a zápis hodnocení ze strany vedoucího (přednosty). Zpřístupnění celkových hodnocení akademickým pracovníkům. 23
4. Harmonogram implementace IS HAP na LF 12.10. 5.11.: Sběr dat Většina dat bude už předem do zadávacích formulářů načtena. Akademičtí pracovníci si odkontrolují správnost svých načtených dat; doplní ostatní data a vyplněné formuláře odešlou ke zpracování. 24
4. Harmonogram implementace IS HAP na LF 6.11. 25.11.: Předběžné nastavení modelu hodnocení Analytici týmu IS HAP provedou analýzu dat uložených na LF. Na základě výsledků této analýzy a s uplatněním dalších racionálních pravidel pak vytvoří návrh předběžného nastavení modelu hodnocení LF. Nastavení spočívá v určení bodových standardů pro vzdělávací a tvůrčí oblast pro každou z pracovních pozic. 25
4. Harmonogram implementace IS HAP na LF 26.11. 30.11.: Finální nastavení modelu hodnocení Hodnocení pracovníků vypočtené na základě předběžných nastavení modelu hodnocení bude zpřístupněno děkanovi fakulty. Děkan fakulty ve spolupráci s týmem IS HAP provede finální nastavení modelu hodnocení LF. 26
4. Harmonogram implementace IS HAP na LF 3.12. 31.1.: Hodnocení akademických pracovníků přednosty Hodnocení na základě finálního nastavení modelu hodnocení IS HAP pro LF bude zpřístupněno přednostům. Přednostové se sejdou nad vypočtenými hodnoceními a daty uloženými v IS HAP s akademickými pracovníky k hodnotícím pohovorům. Výsledné hodnocení pracovníka zapíše přednosta přímo do IS HAP do položky Hodnocení vedoucího (zvolená hodnota z jazykové škály + případný komentář). Teprve toto hodnocení akademického pracovníka jeho přímým nadřízeným je považováno za výsledek hodnocení! Po dokončení celého procesu hodnocení na LF budou kompletní hodnocení zpřístupněna v IS HAP hodnoceným akademickým pracovníkům. 27
Další informace k IS HAP najdete na univerzitní wikipedii: https://wiki.upol.cz/upwiki/is_hap 28
Literatura 1. Sugeno, M., Yasukawa, T.: A fuzzy-logic-based approach to qualitative modeling. IEEE Transactions on fuzzy systems, 1 (1), 1993, pp. 7-31. 2. Talašová, J., Stoklasa, J.: Fuzzy approach to academic staff performance evaluation. In Proceedings of the 28th International Conference on Mathematical Methods in Economics 2010, České Budějovice, 2010, pp. 621 626. 3. Stoklasa, J., Talašová, J., Holeček, P: Academic staff performance evaluation variants of models. Acta Polytechnica Hungarica 8 (3), 2011, pp. 91 111. 4. Collan, M., Stoklasa, J., Talašová, J.: Examples of Academic Faculty Evaluation Systems from the Czech Republic and Finland. In Peer Reviewed Full Papers of the 8th International Conference on Evaluation for Practice: Evaluation as a Tool for Research, Learning and Making Things Better., Tampere, 2012, pp. 111 120. 5. Talašová, J., Stoklasa, J.: Metodika pro periodické hodnocení akademických pracovníků. Závěrečná zpráva IPN Kvalita, MŠMT, 2014, 63 stran. 29
Literatura 6. Talašová, J., Stoklasa, J., Holeček, P.: HR management through linguistic fuzzy rule bases - a versatile and safe tool? In Proceedings of the 32nd International Conference on Mathematical Methods in Economics 2014, Olomouc, 2014, pp. 1027 1032. 7. Collan, M., Stoklasa, J., Talašová, J.: On Academic Faculty Evaluation Systems: More than just Simple Benchmarking. International Journal of Process Management and Benchmarking, 4 (4), 2014, pp. 437 455. 8. Holeček, P., Stoklasa, J., Talašová, J.: Human resources management at universities a fuzzy classification approach. International Journal of Mathematics in Operational Research, 9 (4), 2016, pp. 502 519. 9. Collan, M., Stoklasa, J. Talašová, J.: Staff Evaluation Systems-Shaping Autonomy through Stakeholders.pdf. In R. Turcan, J. Reilly, L. Bugaian, eds. (Re)Discovering University Autonomy - The Global Market Paradox of Stakeholder and Educational Values in Higher Education. Hampshire: Palgrave Macmillan US, 2016, pp. 97 106. 10. Talašová J, Stoklasa J, Holeček P, Talášek T.:. Mathematical support for human resource management at universities. In Proceedings of the 35th International Conference on Mathematical Methods in Economics 2017. Hradec Králové, 2017, pp. 783 788. 30
Děkuji za pozornost Kontakt: doc. RNDr. Jana Talašová, CSc. e-mail: jana.talasova@upol.cz 31