Testování uživatelského mobilního telefonu Nokia C7-00 s operačním systémem Symbian^3 Jan Zikeš zikesjan@fel.cvut.cz semestrální práce A2 z předmětu A4B39TUR 1
Obsah 1 Úvod... 3 1.1. Popis mobilního telefonu... 3 1.2. Popis cílové skupiny... 3 1.3. Přehled use casů... 3 1.3.1. Use case 1: Napsání a posílání SMS zprávy za klidu:... 3 1.3.2. Use case 2:Napsání a poslání SMS zprávy za ztížených podmínek:... 3 1.3.3. Use case 3: Používání GPS navigace za použití originálního příslušenství (držáku):... 4 1.3.4. Use case 4: Používání GPS navigace bez použití originálního příslušenství:... 4 2 Use case 1 Napsání a posílání SMS zprávy za klidu... 4 2.1. Kognitivní průchod... 4 2.2. Heuristická evaluace... 9 2.3. Celkové vyhodnocení use casu 1... 11 3 Use case 2: Napsání a poslání SMS zprávy za ztížených podmínek... 12 3.1. Kognitivní průchod... 12 3.2. Heuristická evaluace... 14 3.3. Vyhodnocení use casu 2... 15 4 Use case 3: Používání GPS navigace za použití originálního příslušenství (držáku):... 16 4.1. Kognitivní průchod... 16 4.2. Vyhodnocení use casu 3... 18 5 Use case 4 Používání GPS navigace bez použití originálního příslušenství... 19 5.1. Kognitivní průchod... 19 5.2. Vyhodnocení use casu 4... 21 6. Závěr... 21 2
1 Úvod 1.1. Popis mobilního telefonu Semestrální práce se zabývá testem uživatelského rozhraní mobilního telefonu Nokia C7-00 s operačním systémem Symbian^3. Mobilní telefon Nokia C7-00 má dotykový displej velikosti 3,5" a pro usnadnění ovládání má navíc tři hardwarová tlačítka pod displejem a čtyři další na boku telefonu. 1.2. Popis cílové skupiny Tento telefon je určen především uživatelům ve věkovém rozmezí přibližně od 30 do 40 let, kteří mají většinou vysokoškolské vzdělání technického nebo ekonomického zaměření a mají již předchozí zkušenost s nejrůznějšími druhy mobilních telefonů. Tito uživatelé ho používají hlavně k psaní emailů, SMS zpráv, k telefonování a hojně je využívaná také vestavěná GPS. 1.3. Přehled use casů Následující čtyři use casy byly zvoleny, tak aby co nejlépe pokryly důležité funkce mobilního telefonu Nokia C7-00. 1.3.1. Use case 1: Napsání a posílání SMS zprávy za klidu: Tento use case se zaměřuje na napsání a odeslání SMS zprávy za klidu. To znamená, za běžných podmínek, kdy uživatel například sedí a téměř nic ho od tohoto úkolu nevyrušuje. Použití této funkce bude podle mého odhadu velmi časté a nedílnou součástí tohoto use casu bude také použití klávesnice na dotykovém displeji, které bude hojně využíváno i u dalších úkolů, jako je poslání emailu, zadání webové stránky, která se má vyhledat a mnoho dalších. 1.3.2. Use case 2:Napsání a poslání SMS zprávy za ztížených podmínek: Tento use case se bude zabývat stejným úkolem, jako již výše zmíněný use case 1. Jediným rozdílem budou podmínky, za kterých se uživatel bude snažit tohoto cíle dosáhnout. Nyní se bude jednat o podmínky ztížené. Jako modelový případ byla vybrána jízda tramvají ve stoje. Lze předpokládat, že velmi podobné podmínky budou na uživatele působit v mnoha dalších případech. 3
1.3.3. Use case 3: Používání GPS navigace za použití originálního příslušenství (držáku): Tento use case se zabývá otestování funkce GPS navigace v automobilu. Use case je důležitý, hlavně proto, že veliké množství uživatelů si dnes kupuje mobilní telefon i kvůli GPS navigaci. A dle serveru navigovat.cz bývá právě kvalitní navigace a mapy zdarma mnohdy rozhodujícím faktorem pro koupi telefonu. Tento test proběhne za použití originálního držáku. 1.3.4. Use case 4: Používání GPS navigace bez použití originálního příslušenství: V tomto use case půjde o stejný test jako v případě předchozím, ale s tím rozdílem, že tentokrát již nebude k dispozici originální držák. Na tento test má samozřejmě významný vliv i typ automobilu, ve kterém se uživatel nachází. V některých automobilech se nachází nejrůznější odkládací prostory, které mohou částečně suplovat originální držák. Tento test tedy byl proveden ve třech typech automobilů, a to jmenovitě Hyundai Accent (rok výroby 2005), Volkswagen Golf (rok výroby 2010) a Mitsubishi Outlander (rok výroby 2008). 2 Use case 1 Napsání a posílání SMS zprávy za klidu Pro otestování tohoto use case považuji za vhodné využít obě metody testování. Funkce psaní nové SMS zprávy bude daleko lépe vyhodnocena heuristickou evaluací, zbytek funkcí bude zase lépe vyhodnocen kognitivním průchodem. Z tohoto důvodu jsem se rozhodl provést test, jak kognitivním průchodem, tak i heuristickou evaluací. 2.1. Kognitivní průchod Otázka 0: Čeho chce uživatel dosáhnout? Otázka 1: Bude to, co je potřeba udělat, uživateli zřejmé? Otázka 2: Propojí si uživatel ikonu (tlačítko atd.) s úkolem, který chce vykonat? Otázka 3: Bude odezva, kterou uživatel obdrží, správná a přiměřená? Odpověď na otázku 0: Uživatel chce napsat SMS zprávu a následně jí odeslat. 4
Krok 1: Odemknutí telefonu Odpověď na otázku 2: Ne, k odemknutí telefonu jsou dvě možnosti, ale ani jedna z nich není na první pohled zřejmá. První možností, jak telefon odemknout, je posunutí posuvného tlačítka na boku telefonu (obrázek 1). Toto tlačítko není nijak označeno a bez jeho vyzkoušení je jen velmi těžké odhalit, k čemu by mohlo sloužit. Druhou možností je kliknutí na hardwarové tlačítko pod displejem telefonu a následné kliknutí na tlačítko odemknout na displeji telefonu (obrázek 2). Z tohoto HW tlačítka také není příliš zřejmé, k čemu slouží. Dále už je akce bez problémů. o Obrázek 1 5
Obrázek 2 Krok 2: Kliknutí na ikonu zprávy Krok 3: Kliknutí na položku nová zpráva Krok 4: kliknutí do pole zprávy Odpověď na otázku 1: Ne, uživateli nemusí být úplně zřejmé, že se potřebuje dostat do módu editace zprávy (obrázek 3). 6
Obrázek 3 Krok 5 a: editace zprávy ve svislé poloze 7
Krok 5 b: editace zprávy ve vodorovné poloze Problém občas nastává při nechtěném přechodu mezi body 5a a 5b. Tato situace může nastat například při snaze uživatele podívat se na hodinky. Hlavním problémem je, že se display občas nepřeklopí zpět do původního stavu a je s ním potřeba trochu zatřást, (obrázek 4). Krok 6: přidání adresáta Krok 7: odeslání zprávy 8
2.2. Heuristická evaluace V tomto případě budou použity standardní Nielsenovy heuristiky, tedy: Heuristika 1: Viditelnost stavu systému Heuristika 2: Propojení mezi systémem a skutečným světem Heuristika 3: Kontrola a svoboda rozhodování uživatele Heuristika 4: Dodržování soudržnosti a norem Heuristika 5: Prevence chyb Heuristika 6: Radši připomenutí než nutit uživatele si něco pamatovat Heuristika 7: Flexibilita a efektivita použití Heuristika 8: Estetický a minimalistický design Heuristika 9: Pomoc uživateli rozpoznat, diagnostikovat a zotavit se z chyb Heuristika 10: Nápověda a dokumentace Odemknutí telefonu Porušení bodu 4: Odemknutí se hledá těžko. Možná se tento způsob brzy stane standardem, ale nemyslím, že je tomu tak již v dnešní době (obrázek 1 výše). Přechod do módu editace zprávy Porušení bodu 1: Vypadá to, jakoby se uživatel již nacházel v módu editace, ale pořád to ještě mód editace není (obrázek 3 výše). Porušení bodu 3: Už v tomto bodě může ztratit kontrolu nad přetáčením displeje (obrázek 4 výše). Porušení bodu 5: V tomto stavu může dojít k nechtěnému odeslání zprávy (obrázek 5). 9
Obrázek 5 Editace zprávy ve svislé poloze Porušení bodu 2: Některé ikony, jako například ikona na změnu módu psaní, nejsou intuitivní (obrázek 6). Obrázek 6 Porušení bodu 3: Uživatel může ztratit kontrolu nad přetáčením displeje (zmíněno již výše). Porušení bodu 5: Následkem porušení bodu 3 může docházet k chybám. 10
Editace zprávy ve vodorovné poloze Porušení bodu 3: Uživatel může ztratit kontrolu nad přetáčením displeje (zmíněno již výše). Porušení bodu 5: Následkem porušení bodu 3 může docházet k chybám. 2.3. Celkové vyhodnocení use casu 1 Výše uvedené nálezy jsou seřazeny do tří skupin podle závažnosti. Kategorie 1 - chyby, které je nutné odstranit (bez jejich odstranění bude zařízení velmi těžko použitelné): Pro tento use case nebyl do této kategorie zařazen žádný nález. Kategorie 2 - chyby, které je doporučeno odstranit (jejich odstranění velmi usnadní práci se zařízením): Problém s odemykáním telefonu, který se nachází, jak v kognitivním průchodu, tak v heuristické evaluaci. Problém s přetáčením displeje, také se nachází, jak v kognitivním průchodu, tak v heuristické evaluaci. Kategorie 3 - chyby, které se můžou odstranit (jejich odstranění usnadní práci se zařízením): Problém s nejasností okolo módu editace Problém s možností nechtěného odeslání zprávy Neintuitivnost některých ikon 11
3 Use case 2: Napsání a poslání SMS zprávy za ztížených podmínek Protože use case zkoumaný v tomto bodě je velmi podobný předchozímu, bude znovu podroben jak kognitivnímu průchodu, tak heuristické evaluaci. Heuristická evaluace by nám měla pomoci opět hlavně ve vyhodnocení problémů spojených s psaním textu, kognitivní průchod pak ve všech ostatních případech. 3.1. Kognitivní průchod Odpověď na otázku 0: Uživatel chce napsat SMS zprávu a následně jí odeslat za ztižených podmínek (jízda v MHD). Krok 1: Odemknutí telefonu Viz odemknutí telefonu v use case 1 Krok 2: Kliknutí na ikonu zprávy zprávy. Odpověď na otázku 2: Ne, ikonu dvou žlutých obálek si sice uživatel jednoduše spojí se zprávou, ale v některých případech je již problém ji správně zmáčknout. Krok 3: Kliknutí na položku nová zpráva 12
Krok 4: kliknutí do pole zprávy Odpověď na otázku 1: Ne, uživateli nemusí být úplně zřejmé, že se potřebuje dostat do módu editace zprávy (obrázek 3). Krok 5 a: editace zprávy ve svislé poloze Krok 5 b: editace zprávy ve vodorovné poloze Odpověď na otázku 2: Ne, tlačítka jsou malá a za ztížených podmínek dochází k překlepu až v devíti případech z deseti (obrázek 7). Obrázek 7 13
Problém s přetáčením displeje je v tomto případě ještě větší, než v předchozím use casu, protože je daleko větší pravděpodobnost, že uživatel vykoná nějaký pohyb, který má za následek nechtěné otočení displeje (například chycení se rukou držadla v MHD). Krok 6: přidání adresáta Krok 7: odeslání zprávy Odpověď na otázku 2: Ne, uživatel si sice spojí ikonu odeslání s odesláním, ale tlačítko je poměrně nešikovně umístěno, takže za ztížených podmínek může docházet k jeho nechtěnému stisknutí (obrázek 5). 3.2. Heuristická evaluace Heuristická evaluace se zase bude řídit podle heuristik zmíněných v bodě 2.2. Odemknutí telefonu Viz odemknutí telefonu v bodě 2.2. Hlavní obrazovka, úkol kliknutí na ikonu zprávy Porušení bodu 3: Uživatel může ztratit kontrolu nad tím, které tlačítko mačká. Kliknutí do pole zprávy Porušení bodu 1: Vypadá to, jakoby se uživatel již nacházel v módu editace, ale pořád to ještě mód editace není. Porušení bodu 3: Už v tomto bodě uživatel může ztratit kontrolu nad přetáčením displeje. Za ztížených podmínek je tento bod ještě horší. Porušení bodu 5: V tomto stavu může dojít k nechtěnému odeslání zprávy. Nyní za ztížených podmínek je pravděpodobnost této nechtěné akce ještě vyšší. 14
Editace zprávy ve svislé poloze Porušení bodu 2: Některé ikony, jako například ikona na změnu módu psaní, nejsou intuitivní. Porušení bodu 3: Uživatel může ztratit kontrolu nad přetáčením displeje. Za ztížených podmínek je tento bod ještě horší. Porušení bodu 5: Následkem porušení bodu 3 může docházet k chybám. Editace zprávy ve vodorovné poloze Porušení bodu 3: Uživatel může ztratit kontrolu nad přetáčením displeje, dále i nad tím, které tlačítko zmáčkne, tlačítka jsou totiž poměrně malá (obrázek 7). Porušení bodu 5: Následkem porušení bodu 3 může docházet k chybám. Přidání adresáta Porušení bodu 5: V tomto stavu může dojít k nechtěnému odeslání zprávy, jehož pravděpodobnost je nyní ještě daleko vyšší (obrázek 5). 3.3. Vyhodnocení use casu 2 Celkové zhodnocení tohoto use casu je poměrně náročné, protože veliké množství problémů, které se při testování vyskytly, je prakticky neopravitelné. Některé z těchto nálezů budou uvedeny v kategorii 3, přestože mohou být závažnější a některé nebudou zmíněny vůbec, protože by se celkově dalo říci, že telefon s dotykovým displejem není do takto extrémních podmínek vůbec vhodný. Kategorie 1 - chyby, které je nutné odstranit (bez jejich odstranění bude zařízení velmi těžko použitelné): Pro tento use case nebyl do této kategorie zařazen žádný nález. Kategorie 2 - chyby, které je doporučeno odstranit (jejich odstranění velmi usnadní práci se zařízením): Problém s odemykáním telefonu, který se nachází, jak v kognitivním průchodu, tak v heuristické evaluaci. 15
Problém s přetáčením displeje, také se nachází, jak v kognitivním průchodu, tak v heuristické evaluaci. Problém s možností nechtěného odeslání zprávy nyní se objevuje již i v kognitivním průchodu. Kategorie 3 - chyby, které se můžou odstranit (jejich odstranění usnadní práci se zařízením): Problém s nejasností okolo módu editace Neintuitivnost některých ikon Velikost tlačítek (vadí pouze za ztížených podmínek a ve vodorovné poloze) 4 Use case 3: Používání GPS navigace za použití originálního příslušenství (držáku): Pro otestování use case číslo 3 bude použita metoda kognitivního průchodu, protože ta lépe odhalí případné nedostatky v uživatelském rozhraní, na které uživatel narazí při používání GPS navigace. Je tomu tak, protože použitím navigace se ve většině případů myslí zadání cíle a dojetí do tohoto bodu a jedná se tedy spíše o průchod. 4.1. Kognitivní průchod Odpověď na otázku 0: Uživatel chce, aby ho navigace dovedla do via Renon 2 v Bolzanu. Krok 1: Odemknutí telefonu Viz odemknutí telefonu v use case 1 Krok 2: Dostat se do menu 16
Odpověď na otázku 2: Ne, protože tlačítko vstupu do menu není nijak označeno. Je sice největším z HW tlačítek, ale není zřejmé, že slouží k přístupu do menu (obrázek 8). Obrázek 8 Krok 3: Kliknutí na položku mapy Krok 4: vybrání způsobu dopravy Krok 5 : nastavit cíl 17
Krok 6: zadání cíle Odpověď na otázku 2: Ne, zadání cíle do textového pole je intuitivní, ale při zadávání cíle za jízdy dochází k častým překlepům a odvádění pozornosti od řízení. Odpověď na otázku 3: Ne, po potvrzení cíle nastane velmi dlouhá doba bez odezvy (2 až 20 minut), teprve pak navigace začne navigovat (obrázek 9). Obrázek 9 4.2. Vyhodnocení use casu 3 Navigace po výše zmíněné chvíli čekání již naviguje bez problémů a vzhledem k tomu, že mě navedla, až na dálnici D5 nemám proč nevěřit, že bych dojel až do Bolzana. Ovládání 18
v držáku je poměrně dobré a za jízdy zvládnutelné (až na zadání cíle), nicméně je lepší a určitě bezpečnější si cestu předem připravit. Nálezy, které byly popsány během průchodu i evaluace, budou podobně jako u use casu 1 a 2 seřazeny do tří kategorií. Kategorie 1 - chyby, které je nutné odstranit (bez jejich odstranění bude zařízení velmi těžko použitelné): Problém s dlouhým čekáním na odpověď Kategorie 2 - chyby, které je doporučeno odstranit (jejich odstranění velmi usnadní práci se zařízením): Problém s odemykáním telefonu Kategorie 3 - chyby, které se můžou odstranit (jejich odstranění usnadní práci se zařízením): Problém se zadáváním cíle za jízdy 5 Use case 4 Používání GPS navigace bez použití originálního příslušenství Tento use case je velmi podobný předchozímu use casu a proto i pro tento případ bude vhodnější použití metody kognitivního průchodu. 5.1. Kognitivní průchod Odpověď na otázku 0: Uživatel chce, aby ho navigace dovedla do via Renon 2 v Bolzanu. Krok 1: Odemknutí telefonu Viz odemknutí telefonu v use case 1 19
Krok 2: Dostat se do menu Odpověď na otázku 2: Ne, protože tlačítko vstup do menu není nijak označeno. Je sice největším z HW tlačítek, ale není zřejmé, že slouží k přístupu do menu. Dále zde již nastává problém s tím, že zvládnutí této akce za jízdy je téměř nemožné a asi i nezákonné (zákaz držení mobilních telefonů a záznamových zařízení za jízdy) (obrázek 8). Krok 3: Kliknutí na položku mapy Odpověď na otázku 2: Ne, ikonu kompasu označenou nápisem mapy si uživatel spojí s danou akcí, ale zase zde nastává problém s manévrováním za jízdy. Krok 4: Vybrání způsobu dopravy Odpověď na otázku 2: Ne, uživatel si ikonu auta s nápisem autem s daným úkolem spojí, ale zase zde nastává problém s manévrováním za jízdy. Krok 5 : Nastavit cíl Odpověď na otázku 2: Ne, tlačítka jsou dobře popsaná, ale za jízdy zase nepoužitelná. Krok 6: Zadání cíle Odpověď na otázku 2: Ne, zadání cíle do textového pole za jízdy bez držáku je opravdu už hazard se životem. 20
Odpověď na otázku 3: Ne, po potvrzení cíle nastane velmi dlouhá doba bez odezvy (2 až 20 minut), teprve pak navigace začne navigovat (obrázek 9). 5.2. Vyhodnocení use casu 4 Navigace navádí bez problémů. Ale v případě, že uživatel jede sám bez spolujezdce, který by s navigací pracoval, je naprosto nemožné ovládat navigaci za jízdy (potvrdilo se ve všech třech výše zmíněných typech automobilů). Jediné, co připadá v úvahu, je nastavení destinace ještě před jízdou a dále už jen poslouchání hlasu navigace. Nálezy, které byly popsány během průchodu i evaluace, budou podobně jako u use casu 3 seřazeny do tří kategorií. Další nedostatky, které se vyskytly v důsledku nepoužití příslušenství, nebudou ve vyhodnocení zahrnuty, protože jejich odstranění je takřka nemožné. Kategorie 1 - chyby, které je nutné odstranit (bez jejich odstranění bude zařízení velmi těžko použitelné): Problém s dlouhým čekáním na odpověď Kategorie 2 - chyby, které je doporučeno odstranit (jejich odstranění velmi usnadní práci se zařízením): Problém s odemykáním telefonu Kategorie 3 - chyby, které se můžou odstranit (jejich odstranění usnadní práci se zařízením): Problém se zadáváním cíle za jízdy 6. Závěr Testování pomohlo odhalit několik chyb, některé z nich jsou závažné, některé jsou méně závažné. Odhaleno bylo také několik chyb, které jsou buď téměř neodstranitelné, nebo jsou vázány na použití přístroje v nestandardních podmínkách nebo bez použití výrobcem doporučeného příslušenství. Ostatní chyby nalezené a zahrnuté v jednotlivých zhodnoceních use casů byly seřazeny a finálně rozděleny do již známých tří kategorií. S chybami a nálezy by mělo být zacházeno podle toho, jak je uvedeno vždy v nadpisu dané kategorie, nebo v konkrétním popisu každého z nálezů. 21
Kategorie 1 - chyby, které je nutné odstranit (bez jejich odstranění bude zařízení velmi těžko použitelné): Problém s dlouhým čekáním na odpověď jedná se možná více o problém, který souvisí s výkonem přístroje než s uživatelským rozhraním, ale alespoň částečně by se dal řešit například nějakým výraznějším oznámením o tom, co se právě děje, tedy jinak než jen 20 minut svítícím nápisem čekání na GPS. Kategorie 2 - chyby, které je doporučeno odstranit (jejich odstranění velmi usnadní práci se zařízením): Problém s odemykáním telefonu jedná se o složitý problém, možná by stačilo tlačítko jen nějak označit. Problém s přetáčením displeje problém je jen velmi těžko řešitelný, řešením by mohla být například možnost zakázat otáčení displeje v nějakém nastavení. Problém s možností nechtěného odeslání zprávy bylo by dobré, aby se tlačítko nacházelo někde, kde není taková šance jeho nechtěného zmáčknutí. Nebo aby se po jeho zmáčknutí objevil dialog ujišťující se, jestli má být zpráva opravdu odeslána. Kategorie 3 - chyby, které se můžou odstranit (jejich odstranění usnadní práci se zařízením): Problém se zadáváním cíle za jízdy problém je na úrovni návrhu uživatelského rozhraní jen celkem těžko řešitelný, ale řešením by například bylo třeba hlasové ovládání. Problém s nejasností okolo módu editace nález, který není až tak závažný, možná by pomohlo jen označení stávajícího módu. Neintuitivnost některých ikon jedná se jen o dvě ikony, u kterých uživatel po chvíli přijde na to, k čemu slouží, ale daly by se nahradit něčím intuitivnějším. Velikost tlačítek (vadí pouze za pohybu a ve vodorovné poloze) Toto je jeden z obtížněji řešitelných nálezů, dalo by se použít nějakého profilu, který by změnil vzhled klávesnice ve vodorovné poloze. 22