SOUHRNNÁ ZPRÁVA T E S T O V Á N Í 8. ROČ N Í K Ů PRŮŘEZOVÁ TÉMATA Ve zprávě komentujeme výsledky testování 8. ročníků základních škol. Toto testování proběhlo v rámci projektu Podpora využití ICT ve výuce průřezových témat na základních školách, do kterého jsou zapojeny školy z celé ČR kromě hl. m. Prahy. Zúčastněné školy testovaly své žáky od od 27. dubna do 4. května 2012.
Percentil II. Základní pojmy Vyjadřuje v rámci daného ročníku pořadí účastníka testu přepočtené na stupnici 0 až 100 (0 = nejhorší, 100 = nejlepší). Percentil lze též interpretovat jako procento ostatních žáků ve stejném ročníku, které účastník předstihl. Jde o základní hodnotu, kterou ve zprávě používáme pro vyjádření výsledků. Průměrný percentil je vždy 50, proto někde používáme pro přesnější určení výsledků i celkový průměrný percentil a skupinový percentil. Pokud se např. testu zúčastnilo 500 žáků, pak účastník s percentilem 80 předstihl 80 %, tj. 400 ostatních a umístil se na 100. místě. Pokud je percentil třídy 5.A 40 a percentil třídy 5.B 50, je rozdíl jejich výsledků 10 percentilových bodů (10 pcb). Průměrný percentil Vysvětluje, jaký je průměrný percentil určité skupiny žáků (např. jedné třídy, určitého typu školy atd.). Počítá se jako průměr z celkového percentilu všech žáků dané skupiny. Hrubá úspěšnost Vyjadřuje poměr (v procentech) mezi počtem správných odpovědí a počtem všech úloh. Hrubá úspěšnost není nikdy menší než čistá a nemůže nabývat záporných hodnot. Hrubou úspěšnost používáme jen v grafu analýzy po úlohách. Čistá úspěšnost (úspěšnost) Vyjadřuje poměr mezi skóre dosaženým v celém testu a maximálním možným počtem bodů, kterého lze v testu dosáhnout (odpovídá počtu úloh v testu). Čistá úspěšnost může nabývat i záporných hodnot, pokud je dosaženo záporného skóre (při velkém počtu chybných odpovědí). Čistá úspěšnost je zpravidla nižší než hrubá. V rámci zprávy používáme hodnoty čisté úspěšnosti. Skóre Je dáno součtem bodů za test. Za každou správně vyřešenou úlohu žák získává 1 bod, za nesprávně vyřešenou úlohu se odečítá bod nebo část bodu: u úloh se čtyřmi možnostmi (A) až (D) jedna třetina bodu. Pokud žák úlohu vynechá, nic se nepřičítá ani neodečítá. Důvodem tohoto výpočtu je eliminace vlivu tipování. Penalizace za nesprávnou odpověď je stanovena tak, aby náhodně tipující žák získal v průměru za test 0 bodů; pokud však dokáže v úloze vyloučit některé možnosti jako nesprávné, již v průměru část bodu získá.
ZÚČASTNĚNÉ ŠKOLY K porovnání výsledků jsme použili data všech zapojených škol z celé České republiky. Celkově se testování zúčastnilo 2 642 žáků z 86 škol. Testy byly k dispozici pouze v online formě. Celkové počty zúčastněných (včetně rozložení na školy, třídy a žáky) najdete na posledním řádku následující tabulky. Testování bylo součástí projektu určeného pro všechny kraje ČR s výjimkou hl. města Prahy, z tohoto důvodu nejsou mezi zapojenými školami žádné školy z Prahy. Počet žáků, tříd a škol podle zastoupení v jednotlivých krajích Školy Třídy Žáci Jihočeský kraj 3 5 87 Jihomoravský kraj 13 24 485 Karlovarský kraj 3 6 110 Královéhradecký kraj 10 14 284 Liberecký kraj 6 10 176 Moravskoslezský kraj 6 11 171 Olomoucký kraj 3 8 130 Pardubický kraj 4 7 116 Plzeňský kraj 7 10 157 Středočeský kraj 12 18 293 Ústecký kraj 10 20 382 Vysočina 5 7 137 Zlínský kraj 4 5 114 Celkem 86 145 2 642
Procentuální zastoupení žáků v projektu podle krajů Ústecký kraj 15% Vysočina 5% Zlínský kraj 4% Jihočeský kraj 3% Jihomoravský kraj 19% Středočeský kraj 11% Karlovarský kraj 4% Plzeňský kraj 6% Královéhradecký kraj 11% Pardubický kraj 4% Olomoucký kraj 5% Moravskoslezský kraj 6% Liberecký kraj 7% VÝSLEDKY TESTOVÁNÍ V následující části vám nabídneme odpovědi na otázky: Jak byly testy spolehlivé? Jak byly náročné? A jak v nich žáci dopadli? Reliabilita Počet úloh Počet testovaných Průřezová témata 0,791 42 2 642 Test vykazuje dobré psychometrické parametry reliabilitu. Tato hodnota slouží k měření přesnosti testování. Reliabilita je teoreticky číslo mezi minus nekonečnem a 1, v praxi bývá mezi 0 a 1. Čím je reliabilita vyšší, tím menší vliv na výsledek má náhoda. Při reliabilitě 0 by šlo o výsledky zcela náhodné, při reliabilitě 1 by byly výsledky zcela přesné. Protože měříme intelektuální dovednosti, přesnosti 1 a ani jí blízké se nikdy nedosahuje. Zpravidla se reliabilita pohybuje mezi 0,5 a 0,95.
CELKOVÉ VÝSLEDKY TESTU Tyto tabulky charakterizují především samotný test jeho průměrnou čistou a hrubou úspěšnost. Zajímavý je údaj o počtu vynechaných a neřešených úloh (ty, které žáci pravděpodobně nestihli řešit nacházejí se za poslední zodpovězenou otázkou). Průměrné skore Průměrná hrubá úspěšnost Průměrná čistá úspěšnost Maximální dosažené skore Minimální dosažené skore Průřezová témata 15,4 51,8 36,6 40,7-6,0 Správně Špatně Vynechal Nečetl Průřezová témata 21,7 19 1,0 0,1 Všechny parametry těchto testů se blíží ideálnímu pásmu. Celková náročnost testu má být taková, aby průměrný žák ze skupiny, pro kterou je test určen, vyřešil správně přibližně polovinu úloh (tj. průměrná hrubá úspěšnost je 50 %). Pokud bychom neodečítali části bodů za nesprávné odpovědi, úspěšnost vyřešení testů by byla vyšší. Rozdíl mezi hrubou a čistou úspěšností nám říká, jak moc žáci chybovali, případně chybně tipovali správnou odpověď. Podle hodnot úspěšností můžeme soudit, že test byl pro žáky poněkud obtížný. Zřejmě to bude tím, že jde o testování témat, která nejsou standardně zařazena do RVP a jsou na školách vyučována v různou dobu a různým způsobem. Nikomu z žáků se nepovedlo odpovědět na všechny otázky správně, podle dosaženého maximálního skore je zjevné, že minimálně jeden žák odpověděl na všechny otázky, z toho na jednu špatně. Žáci úlohy příliš nevynechávali, špatných odpovědí je ale jen o něco málo méně než těch správných. Při hodnocení jednotlivých témat zastoupených v testu je vidět, že nejlépe se dětem dařilo v úlohách zaměřených na multikulturní výchovu a výchovu demokratického občana, nejhůře dopadly části zaměřené na globální a environmentální výchovu. Např. pouze 22 % žáků dokázalo odpovědět na otázku -Která instituce/stát neratifikoval/a Kjótský protokol? (tj. neschválil/a a nepotvrdil/a jeho platnost). Na druhou stranu 84 % žáků dokázalo správně z nabízených obrázků vybrat ten, který nezobrazuje oficiální symbol České republiky.
Čistá úspěšnost podle částí testu - průřezová témata 100% 90% 80% 70% 60% 50% 40% 30% 28% 37% 40% 45% 46% 24% 20% 10% 0% globální osobnostní a sociální mediální demokratického občana multikulturní environmentální Úspěšnost po úlohách - průřezová témata 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% 1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 41