České vysoké učení technické v Praze Fakulta elektrotechnická Testování přenosné konzole PSP (Semestrální projekt z předmětu TUR) Vypracoval Pavel Chráska 1
Obsah Úvod... 3 Popis přístroje... 3 Popis cílové skupiny uživatelů... 3 Přehled Use cases... 4 Připojení k internetu... 4 Přehrávání filmů... 4 Nastavení Času... 4 Uložení internetových stránek mezi oblíbené... 4 Návrh testů bez uživatele... 5 Provedení testů bez uživatele... 6 Připojení k internetu... 6 Jednotlivé kroky... 6 Testovací tabulka... 9 Odhalené chyby... 9 Přehrávání filmů... 10 Odhalené chyby... 10 Nastavení Času... 11 Jednotlivé kroky... 11 Testovací tabulka... 12 Odhalené chyby... 12 Uložení internetových stránek mezi oblíbené... 13 Jednotlivé kroky... 13 Testovací tabulka... 14 Odhalené chyby... 14 Shrnutí testování... 14 2
Úvod Popis přístroje Psp je kapesní herní konzole od Sony.V dnešní době existují 4 verze, první PSP Fat ( PSP-1000) byla vydána společností Sony 1. září 2005 v Evropě, druhá, výrazně vylepšená verze PlayStation Portable Slim & Lite ( PSP-2000) v září 2007, třetí PSP 3000 15.října 2008 a nakonec PSP Go 1.října 2009, které se od předchozích verzí výrazně liší odsouvacím displejem a absencí UMD mechaniky. PSP Go nemá za cíl nahradit PSP 3000, které se i nadále vyrábí, PSP Go je stylová alternativa.pro toto testování je vybraná konzole psp 2000,jelikož je zdaleka nejrozšířenější. Psp využívá TA-085 PCB motherboard, kapacita RAM je 64 MB Přepínač WLAN/Wi-Fi se přesunul na vršek konzole k UMD mechanice, UMD díky novému přepracování je nutné disk po odjištění mechaniky vysunout ven ručně. Jako datové médium konzole používá UMD disky a paměťové karty Memory Stick Pro Duo. Konzole je poháněna procesorem R4000 at 1~333 MHz. Obr.1 Popis konzole Popis cílové skupiny uživatelů Cílová skupina mého testování je člověk,okolo 16 let,dnešní generace,této věkové skupiny je značně znalá informační technologií,pro mé testování bude ale průměrný uživatel neznalí ovládání konzolí,tuto skupinu jsem si vybral protože tuto konzole bude vlastnit většinou právě tato skupina. 3
Přehled Use cases Připojení k internetu Konzole má wi-fi a tudíž je tu možnost se připojit k internetu.v tomto use case projdu standartní proceduru od vyhledání wifi sítě přes nastavení až k uložení sítě pro pozdější automatické připojení. Test bude provedem kognitivním průchodem. Přehrávání filmů Časem po upgradech firmware začala konzole kromě klasické mp4 podporovat i mnoho různých video souborů proto tento test bude zaměřen na samotné přehrávání filmů a interní psp přehrávač. Test bude proveden heuristickou evaluací. Nastavení Času Klasické nastavení času v konzolovém menu.test bude proveden kognitivním průchodem. Uložení internetových stránek mezi oblíbené Jak již bylo řečeno konzole má možnost připojení k internetu,což znamená že má i internetový prohlížeč.test bude v interním internetovém prohlížeči. Test bude provedem kognitivním průchodem. 4
Návrh testů bez uživatele Kognitivní průchod je metoda testování uživatelského rozhraní,při které se tester snaží vidět a posuzovat věci očima uživatel.cílem této metody je zjistit, zda je uživatel schopen zvládnout daný scénář, případně kde a jak se od optimálního průchodu odchyluje. V každém kroku si testující klade tyto otázky: Q1: Bude uživateli zřejmé, co má dělat? Q2: Spojí si uživatel správně popisek akce se svým cílem? Q3: Dostane uživatel dostatečný feedback? Na začátku každého případu použití se klade otázka Q0: Čeho chce uživatel dosáhnout? Heuristická analýza je jedna ze základních metod testování použitelnosti. Spočívá v procházení a testovacího programu stránek odborníky na použitelnost. Odborníci zkoumají, jestli program splňuje jednotlivá doporučení ohledně použitelnosti. Na konci je vytvořen seznam problémů a nedostatků řazený podle důležitosti.já konkrétně použiji heuristiku dle Jacoba Nielsena. 1. Viditelnost stavu systému 2. Spojení mezi systémem a reálným světem 3. Uživatelovo řízení a svoboda 4. Konzistentnost a standarty 5. Prevence chyb 6. Minimalizování zátěže uživatelovi paměti 7. Efektivita a flexibilita užívání 8. Minimalistický design 9. Pomoc uživateli rozpoznat a opravit chybu 10. Pomoc a dokumentace 5
Provedení testů bez uživatele Připojení k internetu Jednotlivé kroky Krok 1 Chceme nastavit nové připojení Obr 2.Nové připojení Krok 2 Najít síť Q2 Ne* *Uživatel je zvyklí na potvrzování nastavení herním tlačítkem x,zde je potvrzení x sice lze, ale nikde není naznačeno že to tak lze Obr 3.Metoda pro najití SSID Krok 3 Vybrat síť Q3 Ne* *Uživatel se dostane na obrazovku přejmenování SSID,tzn. Vytvoření přezdívky pro SSID,je to zbytečné vzhledem k možnosti přejmenovat nastavení Obr 4.Výběr sítě 6
Krok 4 Vytvoření přezdívky Q1 Ne* *Uživateli nemusí být jasné že se jedná o vytvoření přezdívky pro SSID,je to zbytečné,obrazovka spíše vypadá jako informace o SSID Obr 5.Vytvoření přezdívky SSID Krok 5 Výběr zabezpečení sítě Obr 6.Výběr security protokolu Krok 6 Zadání hesla k síti Obr 7.Zadání klíče 7
Krok 6b Zadání klíče Obr 8.Zadání klíče Krok 6c Zadání klíče Obr 9.Zadání klíče Krok 7 Potvrzení údajů Obr 10.Kontrola údajů Krok 8 Konečné uložení údajů Obr 11.Uložení 8
Konečná obrazovka nastavení internetového připojení s již vytvořeným profilem pro síť Homewifi. Obr 12.Závěrečná obrazovka Testovací tabulka Část průchodu Q1 Q2 Q3 Nové připojení Ano Ano Ano Jak najít SSID Ano Ne Ano Výběr sítě Ano Ano Ne Vytvoření přezdívky SSID Ne Ano Ano Výběr protokolu Ano Ano Ano Zadání klíče a) Ano Ano Ano Zadání klíče b) Ano Ano Ano Zadání klíče c) Ano Ano Ano Kontrola údajů Ano Ano Ano Uložení Ano Ano Ano Odhalené chyby Během testování byli nalezeny 3 chyby, konkrétně v části Jak najít SSID, Výběr sítě a Vytvoření přezdívky všechny 3 byli málo závažné. 9
Pavel Chráska Přehrávání filmů Obr 13. No info Obr 15.Info 2 Obr 14.Info 1 Odhalené chyby Porušení heuristiky číslo 1,tzn.Viditelnost stavu systému. Ikdyž je u přehrávačů žádoucí aby zobrazovali co nejméně událostí, alespoň při nějaké změně v ovládání(pohyb kursoru, stisknutí tlačítka,atd) by se měla zobrazit lišta se stavem přehrávaného souboru(délka aktuální čas,název,atd). Info zobrazené na Obr 15. je zobrazené pořád dokud ho uživatel neodnastaví v nastavení na Obr 14.. Porušení heuristiky číslo 6,uživatel si musí pamatovat jaké tlačítko je tzv. potvrzující a jaké je rušící. Uživatel musí i při zobrazení stavu přehrávaného souboru vědět jakým tlačítkem se přetáčí, zpomaluje rychlost přehrávání atd., kompletní ovládání je dostupné pouze v manuálu, uživatel nedostane žádnou nápovědu jak například zrušit pauzu a obnovit přehrávání. První chyba je mírně závažná jelikož pouze zhoršuje pohodlí při přehrávání, ale druhá chyba zásadně zhoršuje možnost přehrávání videosouborů pro začínajícího a středně pokročilého uživatele. 10
Krok 1 Krok 2 Krok 3 Nastavení Času Jednotlivé kroky Obr 16. Menu Obr 17.Menu nastavení Obr 18.Menu nastavení času Položka menu setting Q2 Ne* *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami doleva a doprava a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit Menu Data a času Q2 Ne* *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami dolů a nahoru a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit Nastavení Data a času Q2 Ne* *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami dolů a nahoru a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit 11
Krok 4 Jak čas nastavit Q1 Ne* *Chybí popisek akce,uživatel neví co nastavit manuálně či přes internet Obr 19.Jak nastavit čas Krok 5 Manuální nastavení Q2 Ne* *Chybí tlačítko na ukončení akce,některým uživatelům nemusí dojít že změna času se provádí šipkou nahoru a dolů Obr 20. Nastavení času Testovací tabulka Část průchodu Q1 Q2 Q3 Položka menu setting Ano Ne Ano Menu Data a času Ano Ne Ano Nastavení Data a času Ano Ne Ano Jak čas nastavit Ne Ano Ano Manuální nastavení Ano Ne Ano Odhalené chyby Během testu jsem nalezl 5 chyb,4 z nich spolu úzce souvisí, jedná se o absenci nápovědy ovládání, jedná se o mírně závažné chybi, které znesnadňují uživateli průchod akcí. Poslední chyba je absence informace o stavu systému,je to také mírně závažná chyba. 12
Uložení internetových stránek mezi oblíbené Jednotlivé kroky Krok 1 Otevření stránky Q2 Ne* *Chybí nápověda ke tlačítkům,uživatel neví co zmáčknout Obr 20.Načtení stránky Krok 2 Menu internetového prohlížeče Q2 Ne* *Chybí nápověda ke tlačítkům,uživatel neví co zmáčknout Obr 21.Menu Krok 3 Menu oblíbené Q1 Ne* *Není zde ikona pro uložení do oblíbených, uživatel neví jak dál Obr 22.Menu oblíbených Krok 4 Oblíbené Q3 Ne* *Stránka na obr.23 obsahuje seznam oblíbených plus záložky přidat do oblíbených, když na ni uživatel klikne otevře se mu seznam právě otevřených stránek, který ale vypadá pouze jako další již oblíbená položka. 13
Obr 23. Oblíbené Krok 5 Přidávání mezi oblíbené Q1 Ne* Q3 Ne** *Uživatel neví zdali je stránka google kterou chce přidat již není mezi oblíbenými. **Uživatel nedostane žádnou hlášku o tom zda byla stránka úspěšně přidána, pouze se vrátí na otevřenou stránku Obr 24.Přidávání mezi oblíbené Testovací tabulka Část průchodu Q1 Q2 Q3 Otevření stránky Ano Ne Ano Menu internetového prohlížeče Ano Ne Ano Menu oblíbené Ne Ano Ano Oblíbené Ano Ano Ne Přidávání mezi oblíbené Ne Ano Ne Odhalené chyby Během testu jsem našel značné množství chyb. První 2 chyby jsou mírně závažné a jsou způsobeny chybějící nápovědou k ovládání. Chyba v menu oblíbené je způsobena špatným popiskem a není závažná. Poslední 3 chyby jsou značně závažné protože prakticky znemožňují pozorovat stav ukládání stránky mezi oblíbené. Shrnutí testování Během testování jsem našel několik závažných chyb a celkem velké množství drobných chyb způsobených absencí nápovědy k ovládání. Tato absence je především daná cílovou skupinou uživatelů psp, která je obeznámena s konceptem ovládání rodiny konzolí playstation. Toto ovládání je v EU regionu založeno na klasické trojici křížek-potvrzení, kolečko-zrušení a trojúhelníček-nastavení, zatímco v Japonsku je to křížek- zrušení, kolečko-potvrzení a trojúhelníček-nastavení, proto jsem tyto chyby zařadil do mírně závažných. Chyby v Use-casu přehrávání filmů jsou závažné a pro nápravu bych doporučil přidání stavového panelu který zmizí po 5s od posledního stisku klávesy. V případě přidávání mezi oblíbené bych doporučil oddělit otevřené stránky od stránek oblíbených. 14