Pilotné testovanie 2015 Správa zo štatistického spracovania pilotných testov z nemeckého, anglického a ruského jazyka úroveň C1 Autori: Mgr. Michal Illovský PaedDr. Miroslava Jurenková Ing. Jana Kostolanská, PhD. PaedDr. Ján Markech RNDr. Viera Ringlerová, PhD. Mgr. Zuzana Rusinková Zostavili: PaedDr. Miroslava Jurenková PaedDr. Ján Markech Bratislava 2016
Obsah POUŢITÉ SKRATKY A POJMY... 3 ÚVOD... 4 1 CHARAKTERISTIKA TESTOV EČ MS ÚROVEŇ C1... 5 2 ZÚČASTNENÉ ŠKOLY A TESTOVANÍ ŢIACI... 7 2.1 Anglický jazyk... 7 2.2 Nemecký jazyk... 8 2.3 Ruský jazyk... 9 3 VÝSLEDKY... 10 3.1 Všeobecné výsledky... 10 3.1.1 Anglický jazyk... 10 3.1.2 Nemecký jazyk... 12 3.1.3 Ruský jazyk... 15 4 POLOŢKOVÁ ANALÝZA... 18 4.1 Obťaţnosť... 18 4.1.1 Anglický jazyk... 18 4.1.2 Nemecký jazyk... 21 4.1.3 Ruský jazyk... 24 4.2 Neriešenosť... 27 4.2.1 Anglický jazyk... 27 4.2.2 Nemecký jazyk... 29 4.2.3 Ruský jazyk... 31 4.3 Súhrnné charakteristiky poloţiek... 33 4.3.1 Anglický jazyk... 33 4.3.2 Nemecký jazyk... 36 4.3.3 Ruský jazyk... 39 Národný ústav certifikovaných meraní vzdelávania 2
Pouţité skratky a pojmy AJ NJ RJ PT NÚCEM MS EČ PFIČ ÚFIČ SERR SOŠ GYM P N Sig. P.Bis. r anglický jazyk nemecký jazyk ruský jazyk pilotné testovanie Národný ústav certifikovaných meraní vzdelávania maturitná skúška externá časť (maturitnej skúšky) písomná forma internej časti (maturitnej skúšky) ústna forma internej časti (maturitnej skúšky) Spoločný európsky referenčný rámec pre jazyky vydaný Radou Európy stredná odborná škola gymnázium percentuálny podiel ţiakov veľkosť štatistického súboru, počet ţiakov obojstranná signifikancia, štatistická významnosť Point Biserial, parameter medzipoloţkovej korelácie korelačný koeficient, koeficient vecnej signifikancie poloţka príklad, úloha, otázka v teste určená na riešenie a hodnotená (0, 1) (testová) v hrubom skóre Národný ústav certifikovaných meraní vzdelávania 3
Úvod Od 1. septembra 2016 nadobudne účinnosť nové znenie 6, odsek 9 a 7, odsek 10 vyhlášky č. 318/2008 Z. z. o ukončovaní štúdia na stredných školách v znení neskorších predpisov, podľa ktorého ţiaci bilingválnych stredných škôl vykonajú EČ MS, PFIČ MS a ÚFIČ MS z druhého vyučovacieho jazyka na úrovni C1 SERR. S cieľom overovania testov úrovne C1 realizoval NÚCEM pilotné testovanie z anglického, nemeckého a ruského jazyka, ktoré sa konalo 19. 26. októbra 2015. Na pilotnom testovaní sa mohli zúčastniť všetci ţiaci 4. a 5. ročníka päťročného bilingválneho štúdia alebo ţiaci ekvivalentných ročníkov osemročného bilingválneho štúdia (cieľová skupina). Presný výber ţiakov či tried bol v kompetencii škôl. Súčasťou administrácie nebola administrácia PFIČ MS. Maximálny čas na riešenie testu, ktorý pozostával zo 100 poloţiek, bol 150 minút. V prvej kapitole predkladanej správy charakterizujeme test úrovne C1 a pouţité typy úloh v testoch úrovne C1 SERR. V druhej kapitole prinášame stručný prehľad škôl a ţiakov, ktorí sa zúčastnili na pilotnom testovaní z jednotlivých cudzích jazykov. V tretej kapitole sumarizujeme výsledky pilotného testovania ako celku, pozornosť však venujeme aj histogramom, ktoré prinášajú prehľad úspešnosti v časti počúvanie s porozumením, gramatika a lexika a čítanie s porozumením. Štvrtá kapitola je venovaná poloţkovej analýze pilotného testu. Uvádzame obťaţnosť a neriešenosť poloţiek jednotlivých častí pilotných testov a v závere uvádzame súhrnné charakteristiky testových poloţiek. Pilotné testy a kľúče správnych odpovedí sú zverejnené na www.nucem.sk v sekcii Maturita/Testovanie druhý vyučovací jazyk, úroveň C1. Národný ústav certifikovaných meraní vzdelávania 4
1 Charakteristika testov EČ MS úroveň C1 Testy EČ MS úrovne C1 sú určené maturantom bilingválnych stredných škôl, ktorí sa pripravujú na MS z druhého vyučovacieho jazyka a počas svojho štúdia dosiahli úroveň skúseného používateľa jazyka (účinnú operačnú spôsobilosť/effective Operational Proficiency), úroveň C1 podľa Spoločného európskeho referenčného rámca pre jazyky vydaného Radou Európy (ďalej SERR ). Testy EČ MS z druhého vyučovacieho jazyka zodpovedajú úrovňou náročnosti úrovni C1 SERR. Test rešpektuje obsah zákona č. 245/2008 Z. z. o výchove a vzdelávaní (školský zákon) a o zmene a doplnení niektorých zákonov v znení neskorších predpisov a vyhlášky č. 318/2008 Z. z. o ukončovaní štúdia na stredných školách v znení neskorších predpisov. Testy EČ MS sú vytvorené v súlade so Štátnym vzdelávacím programom z druhého vyučovacieho jazyka, úroveň C1 pre vyššie sekundárne vzdelávanie (ŠPÚ, 2012), ktorý bol schválený Ministerstvom školstva, vedy, výskumu a športu Slovenskej republiky dňa 03. 09. 2013 s účinnosťou od 01. 09. 2016. Obsah testov EČ MS a zadaní PFIČ MS ďalej vychádza z Cieľových poţiadaviek na vedomosti a zručnosti maturantov z anglického, francúzskeho, nemeckého, ruského, španielskeho a talianskeho jazyka, úroveň C1 (ŠPÚ, 2012), ktoré boli schválené Ministerstvom školstva, vedy, výskumu a športu Slovenskej republiky dňa 03. 09. 2013 s účinnosťou od 01. 09. 2016. Na administráciu testov EČ MS z druhého vyučovacieho jazyka úrovne C1 je pridelených 150 minút. Cieľom testu EČ MS úrovne C1 je zistenie úrovne osvojenia si komunikačných jazykových kompetencií integrovaných v nasledovných častiach: Počúvanie s porozumením, Pouţívanie jazyka (Gramatika a lexika), Čítanie s porozumením. Jednotlivé časti testu EČ MS obsahujú rôzne typy úloh zamerané na rozličné témy. Témy sú bliţšie špecifikované v tematických okruhoch stanovených cieľovými poţiadavkami na vedomosti a zručnosti maturantov z príslušných druhých vyučovacích jazykov úrovne C1 a v Štátnom vzdelávacom programe pre druhý vyučovací jazyk úrovne C1. V testoch EČ MS úrovne C1 sú pouţité dva hlavné typy úloh: úlohy s krátkou odpoveďou (ÚKO): - úlohy na doplňovanie, - cloze test, - úlohy zamerané na tvorbu slov, - úlohy zamerané na korekcie textov; Národný ústav certifikovaných meraní vzdelávania 5
úlohy s výberom odpovede (ÚVO): - multiple choice (výber zo 4 moţností), - úlohy na priraďovanie. Pokyny k úlohám v testoch EČ MS sú formulované v príslušnom druhom vyučovacom jazyku. Ak si to typ testovej úlohy vyţaduje, je uvedené vzorové riešenie. Test EČ MS úrovne C1 obsahuje 10 textov: 3 nahrávky v časti Počúvanie s porozumením (30 poloţiek 40 minút), 3 texty v časti Používanie jazyka/gramatika a lexika (40 poloţiek 50 minút), 4 texty v časti Čítanie s porozumením (30 poloţiek 60 minút). Testy externej časti maturitnej skúšky patria z hľadiska teórie tvorby testov medzi tzv. NR-testy (norm-referenced), čiţe rozlišovacie testy, ktorých cieľom nie je v prvom rade overenie miery osvojenia testovaných poznatkov ţiakmi, ale ide v nich o vytvorenie poradia testovaných ţiakov podľa miery úspešnosti v absolvovanom teste priradením percentilu kaţdému ţiakovi (percentil určuje percento ţiakov, ktorí v teste dosiahli horší výsledok neţ daný ţiak). Celková priemerná úspešnosť testovanej populácie v takto koncipovaných testoch sa má pohybovať v rozmedzí 40 60 %, pričom NR-testy vţdy obsahujú jednoduché, stredne náročné aj veľmi obťaţné úlohy, ktorých základnou vlastnosťou je to, ţe dobre rozlíšia ţiakov jednotlivých výkonnostných skupín. Národný ústav certifikovaných meraní vzdelávania 6
2 Zúčastnené školy a testovaní ţiaci 2.1 Anglický jazyk Zúčastnené školy p. č. kód školy názov školy ulica mesto 1 611001 Gymnázium Bilíkova 24 Bratislava Dúbravka 2 611009 Spojená škola Gymnázium Novohradská 3 Bratislava Ruţinov 3 611016 Evanjelické lýceum Vranovská 2 Bratislava Petrţalka 4 611019 Gymnázium Pankúchova 6 Bratislava Petrţalka 5 611047 Bilingválne gymnázium Haanova 28 Bratislava Petrţalka 6 611051 Súkromné gymnázium Česká 10 Bratislava Nové Mesto 7 611055 Súkromné gymnázium Dudváţska 6 Bratislava Pod. Biskupice 8 621018 Súkromné gymnázium VJM Hodská 10 Galanta 9 621019 Gymnázium J. B. Magina Beňovského 358/100 Vrbové 10 626105 Obchodná akadémia Kukučínova 2 Trnava 11 631004 Gymnázium Jablonská 5 Myjava 12 631020 Súkromné gymnázium FUTURUM Koţušnícka 2 Trenčín 13 633015 Stredná odborná škola Lipová 8 Handlová 14 641008 Gymnázium Golianova 68 Nitra 15 646103 Súkromná spojená škola Sv. Štefana 36 Štúrovo 16 651002 Gymnázium J. M. Hurbana 17.novembra 1296 Čadca 17 651010 Spojená škola Gymnázium Komenského 10 Liptovský Mikuláš 18 651013 Bilingválne gymnázium Komenského 215 Sučany 19 651030 Súkromné gymnázium Vysokoškolákov 13 Ţilina 20 651032 Súkromné gymnázium Bystrická cesta 174/5 Ruţomberok 21 656101 OA D. M. Janotu 17.novembra 2701 Čadca 22 661008 Evanjelické gymnázium Skuteckého 5 Banská Bystrica 23 661015 Gymnázium Andreja Kmeťa A. Gwerkovej-Gőllnerovej 6 Banská Štiavnica 24 661057 Evanjelické gymnázium Jesenského 836 Tisovec 25 671021 Súkromné gymnázium Rovná 597/15 Poprad 26 671029 Gymnázium Konštantínova 2 Prešov 27 671034 Súkromné gymnázium Solivarská 28 Prešov 28 681014 Súkromné gymnázium Katkin park 2 Košice Západ 29 681016 Gymnázium Trebišovská 12 Košice Západ 30 681022 Gymnázium Sv. E. Steinovej Charkovská 1 Košice Dargov. Hrdinov 31 681027 Evanjelické gymnázium Škultétyho 10 Košice Staré mesto 32 681048 Gymnázium Javorová 16 Spišská Nová Ves 33 681056 Gymnázium Komenského 32 Trebišov 34 686103 Obchodná akadémia Watsonova 61 Košice 35 686120 Obchodná akadémia ul. akademika Hronca 8 Roţňava Národný ústav certifikovaných meraní vzdelávania 7
Počty ţiakov podľa pohlavia Počet % Pohlavie chlapci 570 32,5 dievčatá 1184 67,5 SPOLU 1754 100,0 Na pilotnom testovaní z anglického jazyka na úrovni C1 SERR sa zúčastnilo 1 754 ţiakov z 35 škôl, z toho 570 chlapcov (32,5 %) a 1184 dievčat (67,5 %). Počty ţiakov podľa známky Počet % Známka neuvedená 55 3,1 1 685 39,1 2 670 38,2 3 277 15,8 4 67 3,8 SPOLU 1754 100,0 Priemerná známka testovaných ţiakov z anglického jazyka bola 1,84. 2.2 Nemecký jazyk p. č. kód školy názov školy ulica mesto 1. 611001 Gymnázium Bilíkova 24 Bratislava Dúbravka 2. 616102 OA I. Karvaša Hrobákova 11 Bratislava Petrţalka 3. 626105 Obchodná akadémia Kukučínova 2 Trnava 4. 661008 Evanjelické gymnázium Skuteckého 5 Banská Bystrica 5. 671022 Spojená škola - Gymnázium Dominika Tatarku 4666/7 Poprad Počty ţiakov podľa pohlavia Počet % Pohlavie chlapci 68 33,7 dievčatá 134 66,3 SPOLU 202 100,0 Na pilotnom testovaní z nemeckého jazyka na úrovni C1 SERR sa zúčastnilo 202 ţiakov z 5 škôl, z toho 68 chlapcov (33,7 %) a 134 dievčat (66,3 %). Národný ústav certifikovaných meraní vzdelávania 8
Počty ţiakov podľa známky Počet % Známka neuvedená 7 3,5 1 47 23,3 2 74 36,6 3 56 27,7 4 17 8,4 5 1,5 SPOLU 202 100,0 Priemerná známka testovaných ţiakov z nemeckého jazyka bola 2,16. 2.3 Ruský jazyk p. č. kód školy názov školy ulica mesto 1. 611007 Gymnázium A. Einsteina Einsteinova 35 852 03 Bratislava-Petrţalka Na pilotnom testovaní z ruského jazyka na úrovni C1 SERR sa zúčastnilo 42 ţiakov z 1 školy. Z testovanej vzorky bolo 25 dievčat a 17 chlapcov. Zo 4. ročníka bolo 22 a z 5. ročníka 20 ţiakov. Národný ústav certifikovaných meraní vzdelávania 9
3 VÝSLEDKY 3.1 Všeobecné výsledky 3.1.1 Anglický jazyk Anglický jazyk úroveň C1 2015 - pilot - psychometrické charakteristiky testu (úspešnosť) Časť Počúvanie Gramatika Čítanie Spolu Priemer Priemer Priemer Priemer Počet testovaných ţiakov 1754 1754 1754 1754 Maximum 100,0 95,0 96,7 93,0 Minimum 6,7 7,5,0 14,0 Priemer 53,0 53,4 57,5 54,5 Štandardná odchýlka 19,2 14,9 19,0 15,7 Štandardná chyba priemernej úspešnosti,5,4,5,4 Cronbachovo alfa,849,808,835,930 Štandardná chyba merania pre úspešnosť 7,5 6,5 7,7 4,2 Priemerná úspešnosť ţiakov v teste z anglického jazyka bola 54,5 %. Reliabilita celého testu bola 0,930, čo hovorí o vysokej spoľahlivosti testu. Reliability všetkých častí testu boli taktieţ dobré (nad 0,80). Národný ústav certifikovaných meraní vzdelávania 10
Národný ústav certifikovaných meraní vzdelávania 11
Obr. 1. Histogramy úspešnosti anglický jazyk 3.1.2 Nemecký jazyk Nemecký jazyk úroveň C1 2015 - pilot - psychometrické charakteristiky testu (úspešnosť) Časť Počúvanie Gramatika Čítanie Spolu Priemer Priemer Priemer Priemer Počet testovaných ţiakov 202 202 202 202 Maximum 80,0 77,5 76,7 76,0 Minimum 3,3 2,5 3,3 8,0 Priemer 33,5 29,2 33,0 31,6 Štandardná odchýlka 15,4 13,3 14,8 12,4 Štandardná chyba priemernej úspešnosti 1,1,9 1,0,9 Cronbachovo alfa,776,793,745,897 Štandardná chyba merania pre úspešnosť 7,3 6,0 7,5 4,0 Priemerná úspešnosť ţiakov v teste z nemeckého jazyka bola 33,5 %. Reliabilita celého testu bola 0,897, čo hovorí o vysokej spoľahlivosti testu. Reliability všetkých častí testu boli prijateľné (nad 0,70). Národný ústav certifikovaných meraní vzdelávania 12
Národný ústav certifikovaných meraní vzdelávania 13
Obr. 2. Histogramy úspešnosti nemecký jazyk Národný ústav certifikovaných meraní vzdelávania 14
3.1.3 Ruský jazyk Ruský jazyk úroveň C1 2015 - pilot - psychometrické charakteristiky testu (úspešnosť) Časť Počúvanie Gramatika Čítanie Spolu Priemer Priemer Priemer Priemer Počet testovaných ţiakov 42 42 42 42 Maximum 96,7 92,5 60,0 84,0 Minimum 20,0 20,0 10,0 19,0 Priemer 57,8 48,0 34,9 47,0 Štandardná odchýlka 15,0 15,2 12,8 12,4 Štandardná chyba priemernej úspešnosti 2,3 2,3 2,0 1,9 Cronbachovo alfa,792,824,652,896 Štandardná chyba merania pre úspešnosť 6,8 6,4 7,6 4,0 Priemerná úspešnosť ţiakov v teste z ruského jazyka bola 47,0 %. Reliabilita testu bola 0,896, čo hovorí o dobrej spoľahlivosti testu. Národný ústav certifikovaných meraní vzdelávania 15
Národný ústav certifikovaných meraní vzdelávania 16
Obr. 3. Histogramy úspešnosti ruský jazyk Národný ústav certifikovaných meraní vzdelávania 17
4 POLOŢKOVÁ ANALÝZA 4.1 Obťaţnosť 4.1.1 Anglický jazyk Národný ústav certifikovaných meraní vzdelávania 18
Obr. 4. Grafy obťaţnosti anglický jazyk V pilotnom teste z anglického jazyka úrovne C1 sa nachádzalo 10 veľmi ľahkých a 9 veľmi ťaţkých poloţiek. Národný ústav certifikovaných meraní vzdelávania 19
AJ C1 2015 - obťaţnosť poloţiek v percentách Poloţka Obťaţnosť Štd. chyba 1 1 66,3 1,1 2 2 62,8 1,2 3 3 78,9 1,0 4 4 53,6 1,2 5 5 51,8 1,2 6 6 63,1 1,2 7 7 71,4 1,1 8 8 39,1 1,2 9 9 51,8 1,2 10 10 61,2 1,2 11 11 71,8 1,1 12 12 94,0,6 13 13 61,5 1,2 14 14 84,3,9 15 15 77,7 1,0 16 16 63,8 1,1 17 17 68,7 1,1 18 18 71,5 1,1 19 19 71,9 1,1 20 20 61,6 1,2 21 21 48,3 1,2 22 22 17,4,9 23 23 29,5 1,1 24 24 38,0 1,2 25 25 33,4 1,1 26 26 34,4 1,1 27 27 21,4 1,0 28 28 27,7 1,1 29 29 4,9,5 30 30 8,0,6 31 31 87,2,8 32 32 59,7 1,2 33 33 45,0 1,2 34 34 74,6 1,0 35 35 57,1 1,2 36 36 77,7 1,0 37 37 64,3 1,1 38 38 36,6 1,2 39 39 20,7 1,0 40 40 82,9,9 41 41 40,4 1,2 42 42 28,5 1,1 43 43 94,0,6 44 44 47,3 1,2 45 45 74,7 1,0 46 46 72,7 1,1 47 47 58,3 1,2 48 48 39,1 1,2 49 49 28,5 1,1 50 50 78,1 1,0 Poloţka Obťaţnosť Štd. chyba 51 51 38,5 1,2 52 52 60,5 1,2 53 53 38,5 1,2 54 54 65,5 1,1 55 55 40,8 1,2 56 56 8,6,7 57 57 66,8 1,1 58 58 8,8,7 59 59 78,1 1,0 60 60 71,4 1,1 61 61 51,8 1,2 62 62 11,0,7 63 63 59,2 1,2 64 64 96,2,5 65 65 8,7,7 66 66 70,5 1,1 67 67 88,2,8 68 68 47,8 1,2 69 69 50,9 1,2 70 70 7,8,6 71 71 75,8 1,0 72 72 78,0 1,0 73 73 79,4 1,0 74 74 82,4,9 75 75 56,8 1,2 76 76 37,5 1,2 77 77 76,7 1,0 78 78 66,8 1,1 79 79 66,9 1,1 80 80 57,4 1,2 81 81 37,8 1,2 82 82 57,8 1,2 83 83 21,7 1,0 84 84 49,1 1,2 85 85 48,1 1,2 86 86 21,2 1,0 87 87 71,7 1,1 88 88 40,6 1,2 89 89 12,6,8 90 90 51,5 1,2 91 91 59,4 1,2 92 92 55,4 1,2 93 93 88,4,8 94 94 60,5 1,2 95 95 81,1,9 96 96 65,1 1,1 97 97 54,8 1,2 98 98 45,3 1,2 99 99 45,9 1,2 100 100 79,7 1,0
4.1.2 Nemecký jazyk
Obr. 5. Grafy obťaţnosti nemecký jazyk V pilotnom teste z nemeckého jazyka úrovne C1 sa nachádzalo 0 veľmi ľahkých a 28 veľmi obťaţných poloţiek. Národný ústav certifikovaných meraní vzdelávania 22
NJ C1 2015 - obťaţnosť poloţiek v percentách Poloţka Obťaţnosť Štd. chyba 1 1 75,7 3,0 2 2 41,6 3,5 3 3 34,7 3,4 4 4 44,6 3,5 5 5 60,4 3,4 6 6 56,9 3,5 7 7 34,7 3,4 8 8 34,2 3,3 9 9 56,4 3,5 10 10 32,2 3,3 11 11 65,8 3,3 12 12 37,6 3,4 13 13 52,0 3,5 14 14 38,1 3,4 15 15 47,0 3,5 16 16 31,7 3,3 17 17 31,2 3,3 18 18 37,6 3,4 19 19 29,7 3,2 20 20 61,9 3,4 21 21 6,9 1,8 22 22 48,5 3,5 23 23 1,5,9 24 24 6,4 1,7 25 25 21,8 2,9 26 26 0,0 0,0 27 27 10,4 2,2 28 28 0,0 0,0 29 29 3,0 1,2 30 30 3,5 1,3 31 31 70,3 3,2 32 32 46,0 3,5 33 33 42,1 3,5 34 34 6,9 1,8 35 35 43,6 3,5 36 35 43,6 3,5 37 36 59,9 3,5 38 37 46,5 3,5 39 38 35,6 3,4 40 39 35,6 3,4 41 40 43,1 3,5 42 41 58,9 3,5 43 42 40,1 3,5 44 43 52,0 3,5 45 44 32,7 3,3 46 45 21,8 2,9 47 46 20,3 2,8 48 47 33,2 3,3 49 48 34,2 3,3 50 49 38,6 3,4 51 50 21,8 2,9 Poloţka Obťaţnosť Štd. chyba 52 51 4,5 1,5 53 52 13,4 2,4 54 53 27,2 3,1 55 54 2,5 1,1 56 55 4,0 1,4 57 56 4,0 1,4 58 57 27,7 3,2 59 58 63,4 3,4 60 59 50,5 3,5 61 60 14,4 2,5 62 61 4,0 1,4 63 62 4,5 1,5 64 63 23,3 3,0 65 64 11,4 2,2 66 65 53,0 3,5 67 66 1,0,7 68 67 0,0 0,0 69 68,5,5 70 69 0,0 0,0 71 70 75,7 3,0 72 71 45,5 3,5 73 72 55,0 3,5 74 73 46,0 3,5 75 75 49,5 3,5 76 76 17,8 2,7 77 77 37,1 3,4 78 78 23,8 3,0 79 79 36,1 3,4 80 80 24,3 3,0 81 81 17,8 2,7 82 82 19,8 2,8 83 83 27,7 3,2 84 84 29,7 3,2 85 85 19,8 2,8 86 86 5,0 1,5 87 87 11,9 2,3 88 88 0,0 0,0 89 89 0,0 0,0 90 90 2,0 1,0 91 91 7,9 1,9 92 92 46,5 3,5 93 93 48,0 3,5 94 94 45,0 3,5 95 95 65,3 3,4 96 96 41,1 3,5 97 97 64,9 3,4 98 98 55,0 3,5 99 99 52,5 3,5 100 100 53,5 3,5
4.1.3 Ruský jazyk
Obr. 6. Grafy obťaţnosti ruský jazyk V pilotnom teste z ruského jazyka úrovne C1 bolo 22 veľmi obťaţných poloţiek (na 1 poloţku neodpovedal správne nikto) a 16 veľmi ľahkých poloţiek (na 1 poloţku odpovedali správne všetci ţiaci). Národný ústav certifikovaných meraní vzdelávania 25
RJ C1 2015 - obťaţnosť poloţiek v percentách Poloţka Obťaţnosť Štd. chyba 1 1 66,7 7,4 2 2 90,5 4,6 3 3 66,7 7,4 4 4 59,5 7,7 5 5 81,0 6,1 6 6 92,9 4,0 7 7 95,2 3,3 8 8 92,9 4,0 9 9 78,6 6,4 10 10 100,0,0 11 11 9,5 4,6 12 12 88,1 5,1 13 13 33,3 7,4 14 14 85,7 5,5 15 15 85,7 5,5 16 16 52,4 7,8 17 17 54,8 7,8 18 18 66,7 7,4 19 19 69,0 7,2 20 20 52,4 7,8 21 21 78,6 6,4 22 22 9,5 4,6 23 23 61,9 7,6 24 24 2,4 2,4 25 25 52,4 7,8 26 26 19,0 6,1 27 27 19,0 6,1 28 28 40,5 7,7 29 29 26,2 6,9 30 30 2,4 2,4 31 31 81,0 6,1 32 32 78,6 6,4 33 33 9,5 4,6 34 34 54,8 7,8 35 35 71,4 7,1 36 36 52,4 7,8 37 37 31,0 7,2 38 38 54,8 7,8 39 39 50,0 7,8 40 40 97,6 2,4 41 41 38,1 7,6 42 42 78,6 6,4 43 43 76,2 6,7 44 44 59,5 7,7 45 45 57,1 7,7 46 46 92,9 4,0 47 47 78,6 6,4 48 48 61,9 7,6 49 49 95,2 3,3 50 50 52,4 7,8 51 51 47,6 7,8 Poloţka Obťaţnosť Štd. chyba 52 52 28,6 7,1 53 53 64,3 7,5 54 54 23,8 6,7 55 55 4,8 3,3 56 56 40,5 7,7 57 57 52,4 7,8 58 58 45,2 7,8 59 59 33,3 7,4 60 60 28,6 7,1 61 61 14,3 5,5 62 62 78,6 6,4 63 63 14,3 5,5 64 64 35,7 7,5 65 65 7,1 4,0 66 66 4,8 3,3 67 67 4,8 3,3 68 68 4,8 3,3 69 69 59,5 7,7 70 70 54,8 7,8 71 71 71,4 7,1 72 72 85,7 5,5 73 73 83,3 5,8 74 74 23,8 6,7 75 75 42,9 7,7 76 76 81,0 6,1 77 77 28,6 7,1 78 78 52,4 7,8 79 79 47,6 7,8 80 80 19,0 6,1 81 81 7,1 4,0 82 82 31,0 7,2 83 83 19,0 6,1 84 84 21,4 6,4 85 85 16,7 5,8 86 86,0,0 87 87 19,0 6,1 88 88 38,1 7,6 89 89 2,4 2,4 90 90 11,9 5,1 91 91 26,2 6,9 92 92 28,6 7,1 93 93 42,9 7,7 94 94 52,4 7,8 95 95 35,7 7,5 96 96 33,3 7,4 97 97 33,3 7,4 98 98 33,3 7,4 99 99 28,6 7,1 100 100 31,0 7,2
4.2 Neriešenosť 4.2.1 Anglický jazyk
Obr. 7. Grafy vynechanosti a nedosiahnutosti anglický jazyk Vysoká neriešenosť v teste z anglického jazyka bola najmä v časti Počúvanie s porozumením, kde 6 poloţiek z 30 malo hodnotu neriešenosti nad stanovený limit. V tejto časti 8 poloţiek (uvedených 6 bolo medzi nimi) malo vysoké hodnoty vynechanosti. V časti Čítanie je 1 poloţka s vysokou vynechanosťou, avšak celková neriešenosť u tejto poloţky je pod 30 %. Národný ústav certifikovaných meraní vzdelávania 28
4.2.2 Nemecký jazyk Národný ústav certifikovaných meraní vzdelávania 29
Obr. 8. Grafy vynechanosti a nedosiahnutosti nemecký jazyk Vysoká neriešenosť v teste z nemeckého jazyka bola v časti Počúvanie s porozumením. V tejto časti malo 5 poloţiek tieţ vysoké hodnoty vynechanosti. V časti Čítanie s porozumením bola veľmi vysoká vynechanosť u poloţiek 80 91. Národný ústav certifikovaných meraní vzdelávania 30
4.2.3 Ruský jazyk Národný ústav certifikovaných meraní vzdelávania 31
Obr. 9. Grafy vynechanosti a nedosiahnutosti ruský jazyk Národný ústav certifikovaných meraní vzdelávania 32
4.3 Súhrnné charakteristiky poloţiek 4.3.1 Anglický jazyk Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 1 66,3 51,8,00,40,40,369 2 62,8 53,0,00,17,17,339 3 78,9 32,2,00,06,06,258 4 53,6 52,9,00,74,74,315 5 51,8 50,1,00 1,31 1,31,299 6 63,1 60,9,00,63,63,399 7 71,4 62,1,00,80,80,460 8 39,1 59,2,00,74,74,406 9 51,8 42,7,00 1,77 1,77,279 10 61,2 42,7,00,74,74,299 11 71,8 53,3,00,40,40,442 12 94,0 17,9,00,17,17,256 13 61,5 62,9,00,23,23,466 14 84,3 22,5,00,29,29,236 15 77,7 47,0,00,97,97,400 16 63,8 64,6,06 3,99 4,05,451 17 68,7 29,0,06 2,85 2,91,189 18 71,5 43,8,06 3,31 3,36,339 19 71,9 55,3,06 3,02 3,08,413 20 61,6 52,7,23 2,34 2,57,339 21 48,3 76,9 3,76 14,77 18,53,513 22 17,4 52,3 4,79 20,01 24,80,433 23 29,5 34,9 5,47 22,01 27,48,228 24 38,0 63,7 6,50 28,28 34,78,421 25 33,4 67,2 7,70 23,43 31,13,484 26 34,4 75,4 8,78 24,40 33,18,524 27 21,4 62,9 10,60 36,55 47,15,462 28 27,7 59,4 11,40 23,60 35,01,428 29 4,9 18,0 15,11 22,63 37,74,288 30 8,0 21,1 15,11 6,10 21,21,257 31 87,2 43,9,00,11,11,426 32 59,7 35,8,00,57,57,203 33 45,0 1,0,00 1,03 1,03 -,035 34 74,6 21,9,00,17,17,150 35 57,1 62,9,00,57,57,389 Národný ústav certifikovaných meraní vzdelávania 33
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 36 77,7 52,4,00,00,00,422 37 64,3 62,9,00,40,40,422 38 36,6 33,5,00,11,11,202 39 20,7 24,6,00,23,23,161 40 82,9 39,6,00,06,06,319 41 40,4 22,7,00,23,23,145 42 28,5 25,5,00,86,86,148 43 94,0 7,7,00,06,06,105 44 47,3 47,2,00,68,68,283 45 74,7 51,8,00,23,23,403 46 72,7 43,0,00,06,06,309 47 58,3-7,3,00,06,06 -,064 48 39,1 11,5,00,17,17,051 49 28,5 30,9,00,29,29,225 50 78,1 38,2,00,17,17,287 51 38,5 74,6,06 1,31 1,37,486 52 60,5 32,7,06 1,65 1,71,205 53 38,5 51,2,06 4,39 4,45,343 54 65,5 48,1,11 1,08 1,20,324 55 40,8 48,3,11 4,50 4,62,330 56 8,6 12,0,11 2,68 2,79,114 57 66,8 60,9,11 1,60 1,71,438 58 8,8 25,1,11 1,71 1,82,278 59 78,1 22,2,11 2,85 2,96,204 60 71,4 64,7,11 2,00 2,11,487 61 51,8 60,1,17 8,10 8,27,435 62 11,0 25,7,17 2,17 2,34,281 63 59,2 58,1,17 2,28 2,45,391 64 96,2 11,4,17,74,91,223 65 8,7 18,0,17 4,90 5,07,196 66 70,5 50,1,17 1,77 1,94,352 67 88,2 16,8,17 1,25 1,43,187 68 47,8 78,0,23 2,00 2,22,519 69 50,9 78,9,68 9,24 9,92,509 70 7,8 24,0,68,23,91,295 71 75,8 42,7,11,57,68,351 72 78,0 49,3,11,23,34,385 73 79,4 56,1,11,29,40,456 74 82,4 21,3,11,46,57,201 75 56,8 35,8,11,57,68,200 Národný ústav certifikovaných meraní vzdelávania 34
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 76 37,5 30,6,11,86,97,182 77 76,7 37,3,11,91 1,03,294 78 66,8 53,8,11 1,20 1,31,369 79 66,9 56,1,11 1,37 1,48,378 80 57,4 62,9,11 1,25 1,37,465 81 37,8 37,2,11 1,08 1,20,255 82 57,8 54,7,11 1,71 1,82,349 83 21,7 17,5,11 1,88 2,00,129 84 49,1 59,5,11 1,65 1,77,424 85 48,1 47,8,11 1,88 2,00,330 86 21,2 51,2,34 17,22 17,56,379 87 71,7 48,1,34 9,12 9,46,350 88 40,6 63,5,34 18,64 18,99,412 89 12,6 40,0,34 14,60 14,94,344 90 51,5 66,3,51 15,79 16,31,397 91 59,4 74,6,74 21,27 22,01,518 92 55,4 46,1 1,08,34 1,43,283 93 88,4 37,6 1,08,29 1,37,411 94 60,5 58,9 1,08,97 2,05,401 95 81,1 44,7 1,08,29 1,37,428 96 65,1 68,6 1,08 2,05 3,14,500 97 54,8 23,6 1,14,23 1,37,166 98 45,3 56,9 1,37 1,94 3,31,356 99 45,9 52,6 1,48,40 1,88,362 100 79,7 44,2 1,48,29 1,77,414 V teste je 48 poloţiek, ktoré majú všetky parametre priaznivé (vo vyššie uvedenej tabuľke nemajú ţiadne políčko farebne zvýraznené). V teste bolo 10 veľmi ľahkých a 9 veľmi ťaţkých poloţiek, 29 poloţiek malo P. Bis. menší ako 0,30. Poloţky nediskriminujú ţiadny ročník, boli pre všetky ročníky pribliţne rovnako obťaţné, rozdiely medzi ročníkmi neboli významné. 40 poloţiek malo P. Bis. menší ako 0,30, z toho 2 poloţky (33 a 47) mali P. Bis. záporný. Hodnoty citlivosti sú nepriaznivé u 24 poloţiek a z toho 1 poloţka (47) má hodnotu zápornú. Národný ústav certifikovaných meraní vzdelávania 35
4.3.2 Nemecký jazyk Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 1 75,7 42,5,00,00,00,260 2 41,6 67,5,00 1,49 1,49,375 3 34,7 50,0,00 1,49 1,49,318 4 44,6 42,5,00 1,49 1,49,292 5 60,4 50,0,00,00,00,324 6 56,9 65,0,00,50,50,346 7 34,7 50,0,00 1,49 1,49,286 8 34,2 17,5,00 2,48 2,48,117 9 56,4 50,0,00,99,99,306 10 32,2 42,5,00 1,98 1,98,196 11 65,8 10,0,00,00,00,131 12 37,6 52,5,00,50,50,379 13 52,0 50,0,00,00,00,294 14 38,1 60,0,00 1,98 1,98,361 15 47,0 30,0,00,00,00,225 16 31,7 27,5,00 8,91 8,91,220 17 31,2 40,0,00 4,95 4,95,283 18 37,6 50,0,00 5,45 5,45,367 19 29,7 50,0,00 3,96 3,96,374 20 61,9 57,5,00 2,97 2,97,395 21 6,9 27,5 8,91 21,78 30,69,378 22 48,5 65,0 9,90 11,88 21,78,386 23 1,5 7,5 10,40 39,60 50,00,295 24 6,4 25,0 10,40 15,84 26,24,299 25 21,8 55,0 12,38 11,88 24,26,447 26,0,0 16,34 40,59 56,93,000 27 10,4 20,0 16,34 10,89 27,23,273 28,0,0 22,28 20,79 43,07,000 29 3,0 15,0 26,73 4,46 31,19,333 30 3,5 15,0 26,73 25,74 52,48,213 31 70,3 57,5,00,00,00,313 32 46,0 30,0,00,00,00,236 33 42,1 32,5,00 1,98 1,98,164 34 6,9-5,0,00,00,00 -,155 35 43,6 70,0,00,50,50,416 36 59,9 60,0,00,00,00,296 37 46,5 47,5,00 1,98 1,98,302 38 35,6 55,0,00,00,00,345 Národný ústav certifikovaných meraní vzdelávania 36
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 39 35,6 42,5,00,50,50,337 40 43,1 47,5,00,50,50,339 41 58,9 62,5,00,00,00,448 42 40,1 45,0,00,00,00,353 43 52,0 47,5,00,00,00,308 44 32,7 17,5,00,00,00,149 45 21,8 35,0,00,00,00,278 46 20,3-5,0,00,00,00,053 47 33,2 27,5,00,00,00,262 48 34,2 75,0,00,99,99,552 49 38,6 30,0,00,99,99,190 50 21,8 45,0,00,00,00,426 51 4,5 5,0,50 5,45 5,94,088 52 13,4 32,5,50 20,79 21,29,332 53 27,2 45,0,50 3,96 4,46,240 54 2,5 10,0,50 15,84 16,34,253 55 4,0 17,5,50 19,31 19,80,344 56 4,0 15,0,50 23,76 24,26,368 57 27,7 30,0,50 5,45 5,94,152 58 63,4 67,5,50 3,47 3,96,459 59 50,5 87,5,50 6,44 6,93,568 60 14,4 35,0 2,97 30,69 33,66,424 61 4,0 12,5 4,46 5,94 10,40,246 62 4,5 10,0 5,94 10,40 16,34,120 63 23,3 32,5 5,94 7,92 13,86,201 64 11,4 10,0 6,93 5,94 12,87,170 65 53,0 25,0 7,43 5,94 13,37,053 66 1,0 2,5 8,42 10,89 19,31,110 67,0,0 8,91 10,40 19,31,000 68,5,0 10,40 3,47 13,86,058 69,0,0 12,38 8,42 20,79,000 70 75,7 52,5 12,38 1,49 13,86,332 71 45,5 65,0,00,50,50,314 72 55,0 77,5,00,50,50,410 73 46,0 70,0,00,50,50,362 74 40,6 57,5,00,99,99,354 75 49,5 35,0,00 2,48 2,48,204 76 17,8 2,5,00 3,47 3,47 -,089 77 37,1 65,0,00 1,98 1,98,384 78 23,8 35,0,00,99,99,292 Národný ústav certifikovaných meraní vzdelávania 37
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 79 36,1 20,0,00 3,47 3,47,202 80 24,3-2,5,50 1,49 1,98,008 81 17,8-5,0,50,50,99 -,025 82 19,8 20,0,50 1,49 1,98,080 83 27,7 2,5,50 1,98 2,48,012 84 29,7 15,0,50 1,49 1,98,060 85 19,8 12,5,50 1,49 1,98,043 86 5,0 20,0 1,49 36,14 37,62,207 87 11,9 37,5 1,98 44,55 46,53,339 88,0,0 2,48 37,62 40,10,000 89,0,0 2,97 46,04 49,01,000 90 2,0 10,0 2,97 47,03 50,00,255 91 7,9 20,0 2,97 46,04 49,01,244 92 46,5 27,5 3,47 2,97 6,44,313 93 48,0 47,5 3,47 1,98 5,45,338 94 45,0 55,0 3,47 3,47 6,93,475 95 65,3 45,0 3,47 2,48 5,94,389 96 41,1 57,5 3,47 4,46 7,92,473 97 64,9 50,0 3,47,00 3,47,394 98 55,0 65,0 4,46 1,49 5,94,468 99 52,5 37,5 4,46 1,49 5,94,377 100 53,5 47,5 4,46,99 5,45,435 V teste je 48 poloţiek, ktoré majú všetky parametre vyhovujúce (vo vyššie uvedenej tabuľke nemajú ţiadne políčko farebne zvýraznené). Národný ústav certifikovaných meraní vzdelávania 38
4.3.3 Ruský jazyk Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 1 66,7 62,5,00 2,38 2,38,324 2 90,5-12,5,00 2,38 2,38,068 3 66,7 100,0,00 4,76 4,76,589 4 59,5 37,5,00 2,38 2,38,349 5 81,0 37,5,00 2,38 2,38,357 6 92,9 25,0,00,00,00,411 7 95,2 12,5,00,00,00,223 8 92,9 12,5,00 2,38 2,38,216 9 78,6-12,5,00,00,00 -,079 10 100,0,0,00,00,00,000 11 9,5,0,00 2,38 2,38 -,198 12 88,1 25,0,00,00,00,451 13 33,3 87,5,00 11,90 11,90,394 14 85,7 12,5,00 2,38 2,38,138 15 85,7-12,5,00,00,00,013 16 52,4 62,5,00 4,76 4,76,494 17 54,8 37,5,00 9,52 9,52,468 18 66,7 50,0,00 2,38 2,38,373 19 69,0 62,5,00 4,76 4,76,368 20 52,4 75,0,00 2,38 2,38,363 21 78,6 50,0,00 4,76 4,76,408 22 9,5 50,0 2,38 78,57 80,95,493 23 61,9 37,5 2,38 19,05 21,43,256 24 2,4 12,5 2,38 61,90 64,29,381 25 52,4 12,5 2,38 30,95 33,33,179 26 19,0 37,5 4,76 54,76 59,52,396 27 19,0 75,0 4,76 11,90 16,67,352 28 40,5 62,5 4,76 35,71 40,48,345 29 26,2 62,5 4,76 9,52 14,29,385 30 2,4 12,5 4,76 26,19 30,95,381 31 81,0 25,0,00,00,00,185 32 78,6 37,5,00 2,38 2,38,283 33 9,5 12,5,00 2,38 2,38,352 34 54,8 75,0,00,00,00,625 35 71,4 50,0,00,00,00,221 36 52,4 62,5,00,00,00,381 37 31,0 25,0,00,00,00,188 38 54,8-12,5,00,00,00 -,022 Národný ústav certifikovaných meraní vzdelávania 39
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 39 50,0 12,5,00,00,00,084 40 97,6,0,00,00,00 -,098 41 38,1 25,0,00,00,00,150 42 78,6 37,5,00,00,00,323 43 76,2 37,5,00,00,00,250 44 59,5 75,0,00,00,00,499 45 57,1 37,5,00,00,00,256 46 92,9 37,5,00,00,00,262 47 78,6 25,0,00,00,00,055 48 61,9 37,5,00,00,00,235 49 95,2,0,00,00,00,028 50 52,4 100,0,00,00,00,493 51 47,6 62,5,00 4,76 4,76,292 52 28,6 12,5,00 2,38 2,38,126 53 64,3 25,0,00,00,00,282 54 23,8 12,5,00 4,76 4,76,194 55 4,8 12,5,00 4,76 4,76,353 56 40,5 87,5,00 9,52 9,52,548 57 52,4 50,0,00 11,90 11,90,467 58 45,2 50,0,00 9,52 9,52,500 59 33,3 37,5,00 14,29 14,29,437 60 28,6 25,0,00 4,76 4,76,280 61 14,3 37,5 2,38 7,14 9,52,415 62 78,6 62,5 2,38 2,38 4,76,436 63 14,3 25,0 2,38,00 2,38,262 64 35,7,0 2,38 4,76 7,14 -,062 65 7,1 25,0 2,38 2,38 4,76,275 66 4,8 12,5 2,38 9,52 11,90,353 67 4,8 25,0 2,38 9,52 11,90,565 68 4,8 25,0 2,38 9,52 11,90,315 69 59,5 100,0 2,38,00 2,38,473 70 54,8 87,5 2,38,00 2,38,652 71 71,4 12,5,00,00,00,158 72 85,7 25,0,00,00,00,271 73 83,3,0,00,00,00 -,075 74 23,8 12,5,00 2,38 2,38 -,064 75 42,9 25,0,00 4,76 4,76,280 76 81,0 37,5,00,00,00,168 77 28,6,0,00 2,38 2,38,080 78 52,4 50,0,00 4,76 4,76,262 Národný ústav certifikovaných meraní vzdelávania 40
Poloţka Obťaţnosť Citlivosť Nedosiahnutosť Vynechanosť Neriešenosť Point Biserial 79 47,6 50,0,00 4,76 4,76,289 80 19,0 62,5 2,38 7,14 9,52,646 81 7,1 37,5 2,38 16,67 19,05,446 82 31,0 12,5 2,38 9,52 11,90 -,029 83 19,0,0 2,38 7,14 9,52,076 84 21,4 25,0 2,38 7,14 9,52,279 85 16,7,0 2,38 11,90 14,29 -,070 86,0,0 7,14 73,81 80,95,000 87 19,0 25,0 7,14 64,29 71,43,378 88 38,1 62,5 7,14 52,38 59,52,374 89 2,4 12,5 7,14 78,57 85,71,272 90 11,9 50,0 7,14 59,52 66,67,468 91 26,2 50,0 9,52 47,62 57,14,260 92 28,6 12,5 11,90 7,14 19,05,152 93 42,9 37,5 11,90 7,14 19,05,092 94 52,4 37,5 11,90 2,38 14,29,443 95 35,7,0 11,90,00 11,90,029 96 33,3 25,0 16,67 2,38 19,05,164 97 33,3 25,0 16,67 2,38 19,05,192 98 33,3 50,0 16,67,00 16,67,349 99 28,6 37,5 19,05,00 19,05,109 100 31,0 37,5 19,05,00 19,05,080 V časti počúvanie bolo 9 poloţiek veľmi ľahkých, 6 veľmi obťaţných. V 13 poloţkách bola citlivosť pod 30 %. Šesť poloţiek malo vyše 20 % vynechanosť a 30 % neriešenosť. Deväť poloţiek malo hodnotu P. Bis. pod stanovenou hranicou 0,3. Časť gramatika obsahovala 4 poloţky veľmi ľahké a 8 veľmi obťaţných. V 20 poloţkách bola citlivosť pod hranicou 30 %. 22 poloţiek malo hodnotu P. Bis. pod hranicou 0,3. V časti čítanie bolo 8 poloţiek veľmi obťaţných a 3 veľmi ľahké. 17 poloţiek malo hodnotu citlivosti pod 30 %. Šesť poloţiek malo vysokú nedosiahnutosť (nad 20 %) a neriešenosť nad 30 %. V 22 prípadoch hodnoty P. Bis. boli pod hranicou 0,3. Národný ústav certifikovaných meraní vzdelávania 41