Umíme hodnotit efekt e-learningu v celoživotním vzdělávání lékařských knihovníků? Případová studie Národní lékařské knihovny Eva Lesenková Adéla Jarolímková Helena Bouzková Národní lékařská knihovna, Praha Jitka Feberová Karlova univerzita v Praze, Ústav výpočetní techniky
Zdravotnictví ČR 2010 Zdravotnická zařízení Počet Státních zařízení 226 Nestátních zařízení 27 842 Zdravotnických zařízení celkem 28 068 Druhy zdravotnických zařízení (bez zař. lékár. péče a ost.) Počet Nemocnice (lůţková a ambulantní část) 189 Odborné léčebné ústavy 157 Lázeňské léčebny 86 Samostatná ambulantní zařízení 24 295 Zvláštní zdravotnická zařízení 391 Orgány ochrany veřejného zdraví 31
Zdravotnictví ČR 2010 Pracovníci ve zdravotnictví Počet Lékaři 45 650 Nelékaři 107 200 V průměru připadalo v ČR na 1 lékaře 231 obyvatel Zdroj: Ústav zdravotnických informací a statistiky České republiky. Zdravotnictví České republiky 2010 ve statistických údajích [online]. Praha : ÚZIS ČR, Srpen 2011 [cit. 2011-08-31]. Dostupné z WWW: <http://www.uzis.cz/publikace/zdravotnictvi-cr-2010-statistickych-udajich>. ISBN 978-80-7280-943-1.
Zdravotnické knihovny v krajích ČR(stav k 31. 12. 2010) Celkový počet veřejných knihoven ČR 6430 Zdravotnické knihovny Druhy zdravotnických zařízení Knihovny Knihovníci Nemocnice 50 52 Ostatní lůžková zařízení 7 20 Odborné léčebné ústavy 10 10 Hygienické stanice 3 14 Střední a vyšší zdravotnické školy 17 11 LF a jiná VŠ vzdělávací zařízení 5 34 Fakultní nemocnice 4 19 Integrated libraries (faculty/hospital) 5 55 Ostatní 4 71 Celkem 107 286
Zdravotnické knihovny v krajích ČR
Národní lékařská knihovna, Praha specializovaná veřejná knihovna (Knihovní zákon 257/2001 Sb.) organizační sloţka státu MZd ČR součást Veřejných informačních sluţeb ve zdravotnictví (VISZ) shromaţďuje tištěné, elektronické zdroje a poskytuje informační sluţby pro odbornou zdravotnickou veřejnost, studenty zdravotnických oborů a laiky
Národní lékařská knihovna, Praha Hlavní aktivity získávání, zpracování, uchovávání a šíření české medicínské produkce vytváření české národní lékařské bibliografie - Bibliografia Medica Czechoslovaca překlad terminologického slovníku MeSH rozvoj a provoz integrovaného knihovnicko-informačního systému Medvik pečuje o historické fond Zdravotnického muzea poskytuje specializované sluţby ze zdrojů Světové zdravotnické organizace organizuje a realizuje celoţivotní vzdělávání lékařských knihovníků a poskytuje podporu pro informační gramotnost informačních
Celoživotní vzdělávání lékařských knihovníků ČR tradice celoţivotního vzdělávání lékařského knihovníka (LK) sahá do 70. let 20. století specializované vzdělání není podmínkou k výkonu profese LK více neţ 30% LK nemá ţádné knihovnické vzdělání (data z průzkumu 2009) kurzy a semináře CŢV jsou organizovány NLK ve spolupráci s ústředními orgány a profesními a vzdělávacími organizacemi (MKČR/VISK 2, MZČR, SKIP, ZIVI Čls JEP, IPVZ)
E-kurz Moderní knihovnicko-informační práce v lékařských knihovnách Komu byl e-kurz určen? lékařským knihovníkům ze sítě VISZ pro přehled o současném stavu informačních sluţeb a zdrojů v oblasti medicíny obtíţnost kurzu mírně pokročilí podmínkou účasti v kurzu - registrace knihovny v evidenci veřejných knihoven MK ČR Obsah knihovní systém ČR, legislativa, lékařské knihovny lékařská terminologie, terminologický slovník MeSH specializované medicínské informační zdroje
Cíle kurzu Hlavní cíl obrození knih.-inf. sluţeb referenční sluţby poskytnout a prohloubit znalosti v oblasti knihovnicko-informačních systémů ve zdravotnictví přístupů ke specializovaným informačním zdrojům odborné terminologie zvýšit vyuţívání moderních vyhledávacích technologií ověřit uplatnění nabytých znalostí a dovedností v praxi co změnili účastníci ve své praxi?
Cílové skupiny skupina 1 pilotní listopad-prosinec 2010 15 vybraných studentů z regionálních knihoven absolvovali všichni skupina 2 březen duben 2011 39 studentů (bez rozlišení typu knihovny) absolvovalo 36 studentů rozdíly mezi skupinami ve skupině 1 bylo vyšší procento účastníků s odb. vzděláním v poměru 73 % ku 59 % ve skupině 1 byla delší průměrná pracovní zkušenost - 25,5 roku ku 19,8 roku
Organizační zajištění Národní lékařská knihovna ve spolupráci s Ústavem výpočetní techniky UK NLK obsahová stránka kurzu, tutorování ÚVT vytvoření kurzu v CMS Moodle, technická podpora financováno z programu VISK 2 MKČR autoři/tutoři PhDr. E. Lesenková, Ph.D. PhDr. H. Bouzková (Knihovny) Mgr. A. Jarolímková, Ph.D. (Informační zdroje) Doc. MUDr. M. Špála, CSc. MUDr. J. Feberová (Odborná terminologie)
Programové vybavení CMS (Course Management System) Moodle softwarový prostředek určený pro podporu prezenční i distanční výuky prostřednictvím online kurzů dostupných na WWW umoţňuje či podporuje snadnou publikaci studijních materiálů, zakládání diskusních fór, sběr a hodnocení elektronicky odevzdávaných úkolů, tvorbu online testů a řadu dalších činností slouţících pro podporu výuky
Metody přípravy kurzu základní princip přípravy kurzu konstruktivismus (Piaget, Vygotsky, Bruner) asimilace a adaptace zaloţená na změnách vzorců chování studentů začlenit studenty do interakce, sociální komunikace, vytvoření vlastních postupů, znalostních struktur a kritického hodnocení získaných informací Constructivism as a paradigm for teaching and learning [online]. Educational Broadcasting Corporation, 2004 [cited 2011 Jun 16]. Available from: http://www.thirteen.org/edonline/concept2class/constructivism/index.html Christie, Alice A. Constructivism and its implications for educators [online]. Alice Christie, 2005 [cited 2011 Jun 16]. Available from: http://alicechristie.com/edtech/learning/constructivism/index.htm
Metody hodnocení kurzu podle KIRKPATRICKOVA ČTYŘÚROVŇOVÉHO MODELU HODNOCENÍ KIRKPATRICK, J.; KIRKPATRICK, W. K. Kirckpatrikův čtyřúrovňový model: nový pohled po 50 letech 1959 2009. Dostupné na: (http://www.develor.cz/develorcz/develorcz_files/file/kirkpatricko vy4urovne-novypohledpo50%20letech2.pdf).
Nástroje hodnocení a posuzování úroveň 1: Reakce hodnotící dotazník na konci kurzu s 10 otázkami distribuce prostřednictvím diskusního fóra setkání s účastníky na konci kurzu úroveň 2: Učení srovnání výsledků pre- a posttestu (17 otázek ze všech témat kurzu) úroveň 3: Chování po 3 měsících od absolvování kurzu dostali studenti dotazník, který zjišťoval, zda vzdělávání ovlivnilo chování studentů, a jaké nastaly změny v poskytovaných sluţbách úroveň 4: Výsledky nebyly měřeny
% % Výsledky - úroveň 1 spokojenost s e-learningem Vyhovuje vám forma e-learningu? 100 90 80 70 60 50 40 30 20 10 0 100 97 0 3 Group 1 Group 2 Yes No 120 100 80 60 Zúčastnili byste se dalšího e-learningu? 100 97 Yes No 40 20 0 0 Group 1 Group 2 3
% Výsledky úroveň 1 spokojenost s e-learningem 100 Byli jste spokojeni s kurzem? 90 87 80 70 67 60 50 40 33 Group 1 Group 2 30 20 17 10 0 entirely partially not at all 0 0
Výsledky úroveň 1 (reakce) souhrn e-learning byl většinou účastníků akceptován 78 % účastníků bylo zcela spokojeno, 22 % částečně průměrná známka jednotlivých lekcích se pohybovala od 1 do 1,5 přínos kurzu prohloubení znalostí o pouţívání terminologického slovníku MeSH, zvýšení relevance vyhledávání ve zdrojích NLK účastníci téměř nevyuţívali diskusního fóra
Výsledky úroveň 2 Testy, úkoly 16,5 Průměrné výsledky pre- a posttestu. 16 15,5 15 14,5 14 Group 1 Group 2 13,5 13 12,5 Pretest Posttest
Výsledky úroveň 2 (učení) souhrn průměrné výsledky testů potvrdily prohloubení znalostí v obou skupinách skupina 1 od 13.7 / 17 bodů (pretest) do 15.3 / 17 bodů (posttest) skupina 2 - od 13.7 / 17 bodů do 15.9 /17 bodů 78 % účastníků měli v posttestu lepší výsledky v úkolech ze 100 moţných bodů dosahovali účastníci průměrně 98-99 bodů, nejniţší dosaţený počet byl 70 bodů
Výsledky úroveň 3 přenos získaných znalostí Provedli jste nějaké změny v knihovních službách své knihovny na základě znalostí získaných v kurzu? 50% Yes No 50%
Výsledky úroveň 3 přenos získaných znalostí Ve kterých zdrojích jste rozšířili možnosti přístupu? 70% 60% 57% 50% 40% 43% 30% 20% 10% 21% 21% 21% 0% Databases Catalogues E-journals EBM resources Searching scientific information via Internet
Výsledky úroveň 3 přenos získaných znalostí Jaký způsob komunikace jste zvolili pro předání nabytých znalostí pro své uživatele? 100% 90% 93% 80% 70% 60% 50% 40% 43% 30% 20% 10% 7% 14% 21% 0% Other Seminar Library web pages E-mail Personal communication
Výsledky úroveň 3 (chování) souhrn 50 % účastníků skupiny 1 uvedlo změny v knihovních sluţbách své knihovny 36 % zavedlo uţívání terminologického slovníku MeSH při vyhledávání 57 % účastníků rozšířilo moţnosti vyhledávání vědeckých informací na internetu pro koncové uţivatele o evaluované volné zdroje a 25 % o zdroje medicíny zaloţené na důkazu pro předání nabytých znalostí pro své uţivatele zvolilo 93% účastníků osobní komunikaci, 43% via e-mail, 21% via webpage a 14% organizovalo seminář
Diskuse Byli jsme úspěšní při dosažení cílů? usnadnili jsme přístup k celoţivotnímu vzdělávání lékařských knihovníků 23 studentů se nikdy nezúčastnilo kurzu NLK (přibliţně 10 % ze všech LK) obrození knihovnicko-informačních sluţeb 50 % účastníků skupiny 1 uvedlo změny ve sluţbách změna přístupu k uţivateli prohloubení znalostí odborné terminologie 36 % zavedlo uţívání MeSH přístup ke spec. informačním zdrojům 57 % účastníků rozšířilo moţnosti vyhledávání o evaluované volné zdroje 25 % o zdroje medicíny zaloţené na důkazu vytvořili jsme unikátní kolekci výukových materiálů
Diskuse Co jsme se naučili o e-learningu? Z výhod e-learningu přenositelnost, variabilita, modularita, dostupnost učiva a nákladová efektivita šetří čas cestovní náklady pro účastníky počet studentů není limitován studijními místy a pc stanicemi posílení profesních sounáleţitosti Slabá místa e-learningu pocit izolace, nedostatek motivace v důsledku absence osobní komunikace s tutorem nedostatek času pro studium knihovníků malých knihoven počáteční náklady jsou vyšší neţ u klasického kurzu příprava studijních materiálů a tutorování je časově náročnější neţ u klas. kurzu
Diskuse Co jsme se naučili o hodnocení a posuzování? testy a úkoly byly pravděpodobně příliš jednoduché problémy s škálovým hodnocením otázky v dotazníku určeným pro závěrečnou zpětnou vazbu byly nedostatečně formulovány
Závěr e-learning je alternativní formou CŢV kirkpatrickův model je vhodný doporučení pro další rozvoj obsah kurzu, tutorování prohloubit znalosti z teorie komunikace a metod přípravy dotazníků včlenit multimediální aplikace nástroje hodnocení a posuzování náročnější úkoly a testy pro konstrukci hodnotícího dotazníku podrobnější otazníku repozitář výukových materiálů součástí řešeného projektu IGA MZ ČR Archivace a online zpřístupnění plných textů vědeckých publikací pro podporu rozvoje vědy a vzdělávání lékařských a nelékařských oborů 2011-2013
Plán vzdělávacích akcí 2011