České vysoké učení technické v Praze, fakulta elektrotechnická Semestrální projekt B2 A7B39TUR Testová ní už ivátelske ho rožhrání prográmu ImgBurn Vypracovali: Olga Budnik Pável Kožokár Jiří Mátějká Aidana Mukhametkaliyeva Petr Píč
Obsah Obsah... 2 1. Úvod... 3 1.1. Cíl testu... 3 1.2. Program ImgBurn... 3 2. Popis testování... 4 3. Participanti... 5 3.1. Profil participantů... 5 3.2. Screener... 5 4. Dotazníky... 7 4.1. Pre-test dotazník... 7 4.2. Post-test dotazník... 7 5. Úkoly... 8 6. Testování... 9 6.1. Participant 1... 9 6.2. Participant 2... 12 6.3. Participant 3... 14 6.4. Participant 4... 17 7. Nálezy... 20 7.1. Analýza... 20 7.2. Nálezy... 23 8. Závěr... 23 2
1. Úvod 1.1. Cíl testu Hlavním cílem testování vypalovacího programu ImgBurn bylo zjistit, jaké má tento program nedokonalosti ve svém grafickém rozhraní a s jakými problémy se může řadový uživatel při práci s tímto programem setkat. Testování bylo zaměřené na základní funkce programu, především však na práci s iso (1) soubory. Test s uživateli je ideální k zjištění problémů, které opravdu trápí uživatele, a které mohou být z pohledu zkušeného uživatele přehlíženy. (1) Iso obraz je soubor, který představuje virtuální kopii skutečného CD. Mohou na něm tedy být uloženy různé složky a soubory, a to vše v jediném souboru. 1.2. Program ImgBurn Předmětem testování byl software pro vypalování CD/DVD ImgBurn. ImgBurn je flexibilní a výkonný program pro vypalování dat, který je na internetu zcela zdarma. Hlavní výhodou programu je i jeho vlastnost vytváření iso obrazů, takže program funguje jako zálohování dat. 3
2. Popis testování Usability lab Test probíhal v usability-labu ČVUT. Usability-lab je místnost, která je příčkou oddělená na dvě části. V jedné místnosti je moderátor a participant, v té druhé sedí testeři, kteří sledují práci participanta. Participanta snímá několik kamer, které zachycují jak veškerou práci na počítači tak i participantovi emoce. Kromě obrazu je také samozřejmě snímaný i zvuk. Participant by měl přemýšlet nahlas, což znamená říkat svoje myšlenkové pochody a komentovat právě vykonávanou práci. V místosti pro testery je několik počítačů, které zpracovávají data z vedlejší místnosti. I zde se nahrává zvuk, protože testeři by měli diskutovat o práci participanta. Použitý hardware Participant pracoval na počítači, který měl následující konfiguraci: Intel Core 2 4300 1.8GHz 2 GB RAM Windows 7 Enterprise sp1 Monitor Dell, rozliseni 1280x960 Použitý software Morae Observer Program určený ke sledování participantů a logování jejich činnosti během testu. Jazyk programu: angličtina Moare dává strukturovanou, detailní zpětnou vazbu, která je automaticky synchronizována umístěna v daném okamžiku na časové ose videa. ImgBurn Testovaný program pro vypalování CD a tvorbu ISO souborů verze v2.5.6.0 Jazyk programu: angličtina Nejdříve bylo potřeba připravit počítač participanta. Program Moare zde byl už nainstalován, program ImgBurn jsme nainstalovali vzápětí také. Pro přehlednost jsme také participantům vyčistili plochu počítače, abychom jim připravili co nejlepší podmínky pro práci. Na ploše byly vytvořeny 2 složky, pojmenované slozka_a a slozka_b. V pokynech jsme uvedli, že z obsahu složky A bude potřeba vytvořit image soubor, který bude poté uložen do složky B. Na začátku testování jsme každého participanta seznámili s úlohami, které měl participant plnit, a vyřešili jsme případné nejasnosti. 4
3. Participanti 3.1. Profil participantů Plánovaná skupina participantů Naším požadavkem bylo utvořit skupinu 5 lidí, kteří mají různou znalost práce na počítači a chtěli jsme aby mezi nimi byli ženy i muži. Minimální dobu, kterou by měl každý z participantů strávit na počítači jsme stanovili na 3 hodiny týdně. Participanti, kteří tráví na počítači méně, než tuto dobu pro nás byli nežádoucí. Vzhledem k okolnostem, že testovaný software je kompletně v angličtině, tak jedním z našich nevynucených požadavků bylo, aby každý z participantů uměl mluvit anglicky alespoň na komunikativní úrovni. Samozřejností byl také předpoklad, že všichni participanti doposud z program ImgBurn nepracovali. Přesné požadavky jsme specifikovali ve screeneru. 3.2. Screener Screner je dotazník, podle kterého se vybírají participanti. Má veřejnou i neveřejnou část. Veřejná je pro participanty, pomocí neveřejné části jsme participanty filtrovali a vybírali. Veřejná část screeneru Vaše pohlaví: muž žena Jste studentem? ano, studuji na základní škole ano, studuji na střední škole ano, studuji na vysoké škole ne Na jaké úrovni je Vaše angličtina? neumím anglicky začátečník pokročilý mluvím plynule Jak často používáte počítač? 2-3 hodiny týdně 3-12 hodin týdně 13-25 hodin týdně Jsem na počítači pořád počítač nepoužívám (v tomto případě ostatní otázky přeskočte) Jaké máte zkušenosti s počítačem? Jsem běžný uživatel, počítač používám k surfování na internetu, prohlížení fotek či filmů a k prácuji se základními programy (MS office, internetový prohlížeč a podobně) Jsem zkušený uživatel, počítač používám ve škole či práci. 5
Jsem programátor, s počítačem mám velmi dobré zkušenosti, běžně instaluji a používám různý doplňující software, samostatně řeším problémy na pc. Jaký nosič používáte k uchovávání dat? CD\DVD flash disk externí disk nezálohuji data na žádný nosič Neveřejná část screeneru Následující tabulka obsahuje požadované odpvoědi, podle kterých byli participanti vybráni. Výsledná skupina participantů Participanty jsme vybírali mezi našimi spolužáky a kamarády na základně screeneru. Dotazovali jsme se zhruba deseti lidí. Nakonec se nám podařilo sehnat pouze čtyři z požadovaných pěti participantů. Ti byli ve věku od 15 do 25 let a byli mezi nimi obě pohlaví. Každý z nich ovládal anglický jazyk lépe, než jsme požadovali jako minimum. S vybranou skupinou participantů můžeme být spokojeni. 6
4. Dotazníky 4.1. Pre-test dotazník Pro každého participanta jsou připraveny dva dotazníky. V prvním z nich připravujeme participanty na samotné tetování. Participant nám navíc ze svých odpovědí doplní informace ze screeneru. Do pre-testu můžeme zařadit i nějaké odborné pojmy, na kterých si otestujeme vědomosti participantů, případně jim můžeme poradit, aby nevznikaly chyby nesouvisející přímo s tetováním. S jakými programy na PC denně přicházíte do styku? Vypalujete data na CD\DVD? Jak často vypalujete? Jaký program používáte k vypalování? 4.2. Post-test dotazník Dotazník po testu slouží k zhodnocení programu. Participant zde může vyjádřit svůj objektivní názor na program a říci co mu líbilo, s čím byl spokojený nebo naopak. Zde je také čas na zodpovězení participantových otázek. Jak se Vám líbil program ImgBurn (od 1 do 5)? Co Vám nejvíce vadilo? Budete používat ImgBurn i nadále? 7
5. Úkoly Úkol 1 spustit program program. V tomto kroku by měl uživatel najít na pracovní ploše ikonu programu ImgBurn a spustit tento Úkol 2 změnit projektový adresář na plocha/slozka_b Projektový adresář se mění v nastavení programu, dostaneme se tam následovně: Menu > Tools > Settings Karta File Locations Ikona Project Files Úkol 3 vytvořit obraz obsahu složky A, uložit ho do složky B Na hlavní obrazovce programu ikona nadpsisem write image file to disk. Ikona s nadpism browse for a folder. V source vybrat všechny soubory ze složky A. V destination vybrat cílovou složku, tedy složky B. Úkol 4 otestovat vypálení obrazu na dis (parametr rychlost 10x) Na hlavní obrazovce program ikona s nadpisem write image file to disc. Kliknout na ikonu s popisem please select a file Nastavit rychlost na 10x a zaškrtnout checkbox test mode Kliknout na ikonu pro vypalování. 8
6. Testování Poznámka: v pre- a post- test interview písmenem O se značí observer (nebo tester), písmenem P se značí participant (nebo účastník testu). 6.1. Participant 1 Pre-test interview O: S jakými programy na PC denně přicházíte do styku? P: Photoshop, PSpad, Google Chrome. O: Vypalujete data na CD\DVD? P: Ano. O: Jak často? P: Jednou za měsíc. O: A používáte k tomu nějaký program? P: Ano, používám CDBurnerXP. 9
Log Úkol 1 - spuštění programu Úkol 2 změna projektového adresáře Úkol 3 - vytvoření ISO obrazu 10
Úkol 4 - vypálení ISO obrazu Post-test interview O: Jak se Vám líbil program ImgBurn (od 1 do 5, hodnocení jako ve škole)? P: Řekl bych, že 5. O: Co Vám nejvíce vadilo? P: Chybící tlačítko zpět mě pořád nutilo vypínat program a spouštět ho znovu. Také mi vadil zmatek v podpisech. O: Budete používat ImgBurn i nadále? P: Ne! 11
6.2. Participant 2 Pre-test interview O: S jakými programy na PC denně přicházíte do styku? P: Opera, MS Office, pár programů do školy. O: Vypalujete data na CD\DVD? P: Ne. Úkol 1 - spuštění programu Úkol 2 změna projektového adresáře Úkol 3 - vytvoření ISO obrazu 12
Úkol 4 - vypálení ISO obrazu 13
Post-test interview O: Jak se Vám líbil program ImgBurn (od 1 do 5, hodnocení jako ve škole)? P: 4 O: Co Vám nejvíce vadilo? P: Tomu programu jsem velmi špatně rozuměla, je trochu matoucí a musela jsem ho několikrát vypnout a znovu zapnout, abych provedla novou akci. O: Budete používat ImgBurn i nadále? P: Ne. 6.3. Participant 3 Pre-test interview O: S jakými programy na PC denně přicházíte do styku? Log P: Internetový prohlížeč, MS Office. O: Vypalujete data na CD/DVD? P: Ano. O: Jak často vypaluješ? P: Dřív jsem to dělala často, teď už párkrát za rok. O: A používáte k tomu nějaký program? P: Ano, používám Nero. Úkol 1 - spuštění programu 14
Úkol 2 změna projektového adresáře Úkol 3 - vytvoření ISO obrazu 15
Úkol 4 - vypálení ISO obrazu Post-test interview O: Jak se Vám líbil program ImgBurn (od 1 do 5, hodnocení jako ve škole)? P: Hm.. 3. O: Co Vám nejvíce vadilo? P: Chvíli mi trvalo, než jsem pochopila, co mám dělat a než jsem se v tom programu trochu vyznala. Ale jinak v pohodě, jen mi chybělo tlačítko zpět. O: Budete používat ImgBurn i nadále? P: Snad jo. 16
6.4. Participant 4 Pre-test interview O: S jakými programy na PC denně přicházíte do styku? P: Firefox, netbeans, MS office. O: Vypalujete data na CD/DVD? P: Ano. O: Jak často vypaluješ? P: Moc často ne, asi 1x za rok. O: A používáte k tomu nějaký program? P: Ano, používám standartní Windows rozhraní. Log Úkol 1 - spuštění programu Úkol 2 změna projektového adresáře 17
Úkol 3 - vytvoření ISO obrazu Úkol 4 - vypálení ISO obrazu 18
Post-test interview O: Jak se Vám líbil program ImgBurn (od 1 do 5, hodnocení jako ve škole)? P: 4 O: Co Vám nejvíce vadilo? P: Hodně se mi nelíbilo, že jsem měl ten vypalovací progam vypínat a znovu zapínat, když něco bylo špatně, a nemohl jsem se vrátit k předchozímu kroku. O: Budete používat ImgBurn i nadále? P: Ne, ne, ne nikdy. 19
7. Nálezy 7.1. Analýza Participant 1 Úkol 1 Uživatel neměl problém s daným úkolem. Úkol 2 Participant bez problémů našel potřebnou položku v menu, našel i správnou záložku. Problém nastal, když uživatel chtěl změnit projektový adresář. Nemohl najít místo, kde se mění adresář, a tak si znovu přečetl zadání a poté něco zkusil a ono to bylo správně. Úkol 3 Jako u předchozího úkolu i zde neměl uživatel problém s hledáním správné sekce. Problém nastal až při nastavování potřebných věcí. Participant omylem kliknul v okně a vyskočilo na něj okno s cílovou záložkou. Toto chovaní programu uživatele zmatlo, nečekal to. Nakonec provedl potřebné nastavení a spustil úlohu. Po spuštění programu se začali objevovat vyskakovací okna, pro uživatele to bylo docela otravné. U druhého vyskakovacího okna uživatel přepsal defaultní název souboru ISO. Takže po sérii vyskakovacích oken, participant splnil úkol. Úkol 4 Hned na začátku úkolu šel uživatel do špatné sekce. Zde narazil na problém, protože nenašel tlačítko zpět. Po chvíli hledaní tlačítka, uživatel restartuje program. Poté co si zvolil správnou sekci, nemohl najít místo pro vkládání souboru, proto využívá metodu Pokus, omyl. Při použití této metody omylem otevře CD-ROM, toto chovaní ho překvapilo, proto se rozhodl program spustit znovu. Po úspěšném provedení nastavení potvrdí úlohu a znovu se objevují informační hlášky. Uživatel je nečte a ihned potvrzuje. Program začne pracovat. I po doběhnutí do 100 %, program ukazuje činnost, uživatel neví, jak má postupovat dal. Tady byl další problém, odezva systému nebyla příliš intuitivní. 20
Participant 2 Úkol 1 Jako u předchozího participanta, tato část úlohy proběhla bez problému. Úkol 2 V daném úkolu měl participant velký problém s vybráním správné sekce. Nejdřív chvíli chaotický mačkala různá tlačítka. Nakonec to vzdává a ptá se vedoucího testu na správnou cestu. To nasvědčuje tomu, že menu programu není sestaveno příliš šťastně. Ani po nápovědě participant nevěděl přesně, zda se nachází ve správné sekci, proto se radši zeptal vedoucího. Když už byl ve správné sekci, tak bez problému nastavil potřebné věcí a úkol splnil. Úkol 3 Stejně jako u předchozího úkolu, participant dlouho neví kde je správná sekce. Zde se setkáváme s problémem chybějícího tlačítka zpět. Program je několikrát restartován. Po úspěšném nalezení sekce, participant nastavuje zdrojovou složku a snaží se nastavit cílovou složku. Několikrát otevírá a zavírá okno pro výběr cílové složky. Nakonec se rozhodné vytvořit ISO bez zvolení cílové složky. Program nedovolí provést úlohu, participant se vrací na začátek úkolu a provádí vše znovu. Tento problém je pravděpodobně způsoben, špatným popiskem v místě vkládaní souboru. Nakonec po úspěšném zvolení složek odesílá úlohu ke zpracování. Vyskočí okno pro potvrzení výběru, to však uživatele zaskočí a myslí si, že je něco špatně. Vedoucí ujišťuje participanta, že je vše v pořádku a participant úspěšně dokončuje úkol. Úkol 4 S posledním úkolem participant neměl problém, až na to, že zapomněl zaškrtnout testovací mód. 21
Participant 3 Úkol 1 Participant neměl žádný problém při plnění úkolu. Úkol 2 Participantovi chvíli trvalo, než si uvědomil, co to znamená projektový adresář a kde by se to mohlo nastavit. Úkol 3 Po jednom chybném kroku participant bez větších problémů plní úkol. Problém mu činila absence tlačítka zpět, proto musel program pouštět znovu. Úkol 4 Participant se pokoušel v okénku pro vytvoření ISO obrazu najít tlačítko pro vypálení obrazu. Po chvíli pochopil, že se musí dostat do hlavního menu. To se mu nepodařilo, proto musel program znovu zapnout. Participant 4 Úkol 1 Participant neměl žádný problém při plnění úkolu. Úkol 2 Participant omylem špatně kliknul, ale nenašel tlačítko zpět. Musel program dvakrát vypínat. Úkol 3 Participant ihned správně kliknul na tlačítko v hlavním menu. Podařilo se mu nastavit zdrojovou i cílovou složku. Po opětovném přečtení zadání úkolu se mu podařilo úkol dokončit. Zaváhal při potvrzování dialogu, kterému nerozuměl. Úkol 4 Participant hledal tlačítko zpět. Po vypnutí a zapnutí programu již úkol rychle dokončil. 22
7.2. Nálezy Chybějící tlačítko zpět v programu chybí tlačítka pro navigaci, pokud se dostaneme někam, kam nechceme a chceme se vrátit, tak musíme program otevřít a zavřít. Priorita: vysoká Informační okna Po nastavení parametru vypalování a zmáčknutí tlačítka vypálit na uživatele postupně vyskočí několik pop-up oken s nastavením. Všechno toto nastavení by se mohlo konfigurovat už před zmáčknutím tlačítka vypálit. Priorita: střední Jazyk Program je pouze v anglickém jazyku, bez možnosti změny. Priorita: nízká Nelogické popisy Některé sekce nastavení jsou nelogické, všichni participanti měli problém s hledáním kořenové složky projektu a změnění cesty této složky. Priorita: nízká 8. Závěr Při testování narazili všichni participanti na jeden závažný problém chybějící tlačítko zpět. Tato chyba je kritická a všem participantům prodloužila práci s programem minimálně na stráveného času. Všichni participanti totiž museli několikrát vypnout a zapnout program, což je velmi nelogické. Naštěstí se program spouští velice rychle. Pro mnoho uživatelů asi nebude pohodlné, že si nemohou změnit jazyk. Do hodnocení programu musíme ale zohlednit, že plná verze je zcela zdarma. Jako další plus vidím poměrně velikou rychlost načítání programu, nesetkáme se zde totiž s žádnou prodlevou. Na prodlevu narazíme až při samotném vypalování, kdy ukazatel stavu dávno ukazuje na 100%, nicméně program dobrých 30 sekund ještě nic nedělá, než vypíše hlášku o úspěšném dokončení. Možná by stačilo pouze dopsat výpis kontroluji zapsaná data. Myslíme si, že by bylo dobré provést další testování na navigaci programu (případně přidáních rychlých či oblíbených položek). Z odpovědí participantů vyplývá, že složité ovládání jednoduchých operací může mnoho uživatelů odradit. 23