HODNOCENÍ KVALITY A EFEKTIVITY E-LEARNINGOVÉHO VZDĚLÁVÁNÍ THE QUALITY AND EFFICIENCY EVALUATION OF E-LEARNING EDUCATION Tomáš Maier, Ludmila Gallová Anotace: Příspěvek se zabývá hodnocením kvality a efektivity e-learningu, tj. zkoumá možnosti zpětné vazby mezi tutory (pedagogy) na jedné straně a cílovou skupinou (studenty) na straně druhé. Pro zpětné hodnocení je zde navrhnut dotazník, který je určen pro cílovou skupinu pro absolvování kurzu, respektive měl by být cílovou skupinou vyplněn již nějakou dobu po absolvování kurzu. Příspěvek vznikl v rámci grantu IGA 1110/1312/113107 IG6/2006. Klíčová slova: e-learning, dotazníkové šetření, dotazník, distanční vzdělávání Abstract: The contribution is focused on duality and efficiency evaluation of e-learning. So it means that it explores possibilities of back-coupling between tutors (teachers) on one hand and target group (students) on the other hand. For the backward evaluation is purposed questionnaire for the target which should be fulfilled in a relevant time after a course. This contribution was set in frame of grant IGA 1110/1312/113107 IG6/2006. Key words: E-learning, Questionnaire Research, Questionnaire, Distance Education ÚVOD Z dřívějších průzkumů 13 mezi pedagogy vyplývá, že e-learningové kurzy jsou hodnoceny spíše pozitivně a absolventi zdůrazňují potřebu většího množství informací směrem k e- learningu. Rovněž se dá předpokládat, že absolventi kurzu projeví zájem o návazné vzdělávací možnosti v oblasti vysokoškolské pedagogiky a uplatnění distanční formy vzdělávání. Tzv. koncoví uživatelé jsou v tomto smyslu větší černou skříňkou, zatím hodnověrné průzkumy příliš neexistují. CÍL Cílem hodnocení kvality každého e-learningového kurzu by mělo být získání podnětných návrhů od absolventů, protože v těchto formách vzdělávání je více než při jiné formě výuky omezována zpětná vazba. Cílovou skupinu je nutno rozdělit na dvě základní podskupiny. První z nich jsou tzv. koncoví uživatelé, tedy v rámci ČZU zejména studenti bakalářského a magisterského studia. U těchto absolventů by se mělo zjišťovat jejich hodnocení obsahu, zisku nových vědomostí a dovedností. Druhou skupinou absolventů jsou doktorandi, pedagogové a vědečtí pracovníci. U 13 Zlámalová a kol: Hodnocení kvality obsahu a účinnosti vzdělávacího kurzu NCDiV, Centrum pro studium vysokého školství 889
nich je mimo výše uvedeného nutné zjistit jejich názor na praktické využití při výuce. Dalším cílem by mělo rovněž být vyhodnocení dlouhodobé realizace kurzu z pohledu zájmu pedagogů o další vzdělávání a o rozvoj jejich pedagogické způsobilosti. METODY Pro formální hodnocení e-learningových kurzů (a distančního vzdělávání vůbec) se jako nejvhodnější jeví dotazníkové šetření. Praxe bývá taková, že i několik let po skončení kurzu je návratnost poměrně vysoká (až 50 %). Pakliže by hodnocení kvality a efektivity bylo součástí samotného kurzu, tak tato návratnost může být až stoprocentní, i když zde by se mohlo vyskytnout nebezpečí neupřímných odpovědí. Větší je rozhodně návratnost při e-learningové výuce řádných studentů (bakalářského či magisterského stupně) než u doktorandů a vědeckých pracovníků. Dotazník by měl být volen tak, aby jeho vyplnění nebylo časově náročné. Proto by měly převažovat uzavřené typy otázek s možností výběru několika variant. Tyto podmínky je nutno splnit pro kvalitativní vyhodnocení. Několik závěrečných otázek by mělo být otevřených, aby respondent mohl přesně a podrobně vyjádřit svůj názor. Dotazníky by měly být pokud možno anonymní, protože jen to zaručuje maximální objektivitu. Ke zpracování vyplněných dotazníků není nutné používat žádný speciální software, plně dostačující je běžně dostupný Microsoft Excel. VÝSLEDKY A DISKUZE Dotazník 1. Jsem a) Student/ka bakalářského stupně b) Student/ka magisterského stupně c) Student/ka doktorského stupně d) pedagog e) zaměstnanec f) osoba samostatně výdělečně činná g) nezaměstnaný/á Samozřejmě že ke každému konkrétnímu kurzu není nutné dávat všechny možnosti na výběr, jiné alternativy odpovědí budou nutné pro cílovou skupinu nezaměstnaných na rekvalifikaci, jiné pro studenty. 2. Můj věk je v intervalu a) do 25 let b) do 35 let c) do 50 let d) do 65 let e) nad 65 let Věk hraje spíše roli ve vztahu konkrétního jedince k informačním technologiím a k novým metodám výuky obecně. Starší se obecně adaptují hůře na nové podmínky. 3. Do kurzu jsem se přihlásil/a 890
z vlastní iniciativy z příkazu zaměstnavatele (vedoucího), školitele, atd. Tato otázka je relevantní pouze pro heterogenní skupinu; pro studenty konkrétního předmětu na škole (kteří ho musí absolvovat povinně) ztrácí na významu. 4. Jak hodnotíte kurz, který jste v průběhu uplynulého semestru absolvoval/a a) získal/a jsem zcela nové informace o e-learningu b) získal/a jsem mnoho nových informací o e-learningu c) nových informací nebylo mnoho Odpověď na tuto otázku bude patrně v korelaci se vstupními znalostmi absolventa; neměly by zde být výraznější rozpory, pokud by kurz byl absolvován prezenční a e-learningovou formou. 5. Kurz považuji za přínosný zajímavý inspirující informativní zbytečný zcela nedostačující nevhodný pro uplatnění v práci těžkopádný jiná možnost (prosíme vypsat) Odpovědi na první částečně otevřenou otázku budou vesměs velmi subjektivní. I přes složitější zpracování je vhodné ponechat otázku v otevřené formě. 6. Která část pro vás byla nejpřínosnější problematika e-learningu a distanční vzdělávání vlastnosti textu v e-kurzu struktura distančního on-line kurzu, grafická stránka a rozložení textu internetové technologie a atraktivita kurzu vzdělávací cíle a zkvalitnění elektronického kurzu testování výsledků výuky a hodnocení kvality a efektivity e-learningového vzdělávání vlastnictví podkladů a autorské právo software v e-learningu a jeho rozdělení vlastní e-learningový software Zde budou samozřejmě možnosti odpovědí závislé na konkrétním sylabu kurzu. Tato otázka je velmi důležitá pro případné další úpravy kurzu. Možno rovněž položit tuto otázku v přesnější (a složitější podobě), kde by posluchači známkovali jednotlivé kapitoly. 7. Využili jste poznatky z kurzu v praxi ano 891
ne V případě této otázky bude odpověď závislá na době, která uplyne od absolvování kurzu. V případě, že bude hodnocení probíhat bezprostředně po skončení kurzu, je vzhledem k relevanci vhodné tuto otázku vypustit. 8. E-learningovou metodiku využívám, respektive si myslím, že budu využívat jako doplnění prezenční výuky v rámci distanční nebo kombinované formy postgraduálního studia při inovaci vlastních studijních textů, tvorbě nových učebních pomůcek při realizaci celoživotního vzdělávání na naší škole v zaměstnání jinde (prosíme vypsat) Zjištění očekávání absolventa je rovněž velmi důležité k případným dalším úpravám kurzu. 9. Doporučil/a bych kurz jiným osobám Třetí osoby spadají do potenciálního okruhu absolventů a je proto vhodné i zde využívat podpůrné nástroje pro Public Relation. 10. Propagujete kurz ve svém okolí Propagace absolventů je samozřejmě nejlepší a bezplatný druh reklamy, proto je dobré myslet i na tyto skutečnosti. 11. Máte zájem se zúčastnit případného navazujícího kurzu Celkovou spokojenost absolventa s kurzem snad nejlépe vystihuje tato otázka, z nadměrného počtu případných negativních odpovědí je nutno vyvodit velké důsledky. 12. Zpětná vazba mezi lektorem a mnou byla a) bez problémů b) dostačující c) naprosto nedostatečná a nevyhovující Téma zpětné vazby je velmi ožehavým tématem při neosobní komunikaci, jakou e-learning bezesporu může být a nedostatečná zpětná vazba může být některými účastníky velmi negativně vnímána. 892
13. Fundovanost lektorů byla a) na výborné úrovni b) dostatečná c) nedostačující Význam funkce lektora může být v e-learningu poněkud potlačen, nicméně jeho funkce má stále své nezastupitelné místo. 14. V kurzu mi nejvíce scházelo a) teoretická východiska e-learningu (možno vypsat) b) praktické procvičování (možno vypsat) c) dostatek příkladů při tvorbě textů d) příklady chyb, kterých by se mělo při tvorbě textů vyvarovat e) osobnější komunikace f) úvodní kapitola o základním softwaru g) jiné (prosím vypsat) Tato otázka poněkud rozvíjí otázku č. 8 (e-learningovou metodiku využívám, respektive si myslím, že budu využívat), opět je velmi důležitá pro případné další změny v kurzu. 15. V kurzu bych změnil/a následující a) rozdělení kurzu pro začátečníky a pokročilé b) zmenšit počet účastníků c) dát více prostoru moderním technologiím d) jiné (prosím vypsat) Tato otázka se týká spíše technického zabezpečení běhu celého kurzu, náměty od absolventů jsou více než vítané. ZÁVĚR Každý kurz, ať v prezenční či distanční formě, je nutno nějakým způsobem průběžně hodnotit a evaluovat. Vzhledem k charakteru distanční formy, kde je poněkud omezena zpětná vazba, může být toto hodnocení mnohem obtížnější. Proto je vhodné použít nějaký doplňující aparát, v tomto případě dotazník. Tento příspěvek nastiňuje možnosti obecných dotazníkových otázek nutných k hodnocení. Jejich finální forma se pak odlišuje od typu výsledného kurzu a zejména od cílové skupiny posluchačů. Literatura Barešová, A. E-learning ve vzdělávání dospělých. Praha : nakladatelství VOX, 2003. ISBN 80-863-2427-3. Zlámalová a kol. Hodnocení kvality obsahu a účinnosti vzdělávacího kurzu NCDiV. http://www.csvs.cz/projekty/vyzkumna_zprava_ncdiv.pdf, 29.6.2006, Praha Nocar, D. a kol. E-learning v distančním vzdělávání. Olomouc, 2004. ISBN 80-244-0802-3. Kontaktní adresa Ing. Tomáš Maier, Ing. Ludmila Gallová, KZE-PEF-ČZU, Kamýcká 129, Praha 6, 165 21, tel: 224 382 300, e-mail: maier@pef.czu.cz, gallova@pef.czu.cz 893