Testování Procesního portálu FEL ČVUT

Testování Procesního portálu FEL ČVUT ČVUT FEL - A7B39TUR Ondřej Mrákota Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 1/24

Testování Procesního portálu FEL ČVUT ČVUT FEL A7B39TUR Ondřej Mrákota Popis aplikace Cíl aplikace Charakteristika aplikace Cílová skupina Případy užití Náhled Metody testování Testování kognitivním průchodem Testování heuristickou evaluací Testované případy užití UC1 Najít konkrétní procesní diagram a stáhnout si ho k sobě na počítač UC2 Zjistit hiarchickou strukturu konkrétního oddělení UC3 Nahlásit chybu v diagramu odpovědné osobě UC4 Přidat požadavek na nový proces Testování UC1 Najít konkrétní procesní diagram a stáhnout si ho k sobě na počítač. Krok 1 přihlášení Krok 2 Vyhledat v menu služby Student bakalářského studia Krok 3 rozbalit v Průběh studia a kliknout na Projevení zájmu o obor Krok 4 kliknout na ikonku Exportovat do PDF UC2 Zjistit hiarchickou strukturu konkrétního oddělení Krok 1 přihlášení Krok 2 Kliknout v menu na organizační strukturu Krok 3 Rozkliknout plus u osoby Tajemník Ing. Igor Mráz UC3 Nahlásit chybu v diagramu odpovědné osobě Krok 1 Vyhledat proces, ke kterému diagram patří. Krok 2 Kliknout na ikonku Nahlásit neaktuálnost obsahu zobrazované služby Krok 3 Vyplnit informace o chybě do formuláře a odeslat UC4 Přidat požadavek na nový proces Krok 1 Kliknout na Úvod Krok 2 Kliknout na Evidence návrhů Krok 3 Založit nový požadavek Seznam nálezů Závěr Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 2/24

Popis aplikace Cíl aplikace Poskytuje informace o procesech na FEL ČVUT. Charakteristika aplikace Procesní portál FEL je informační systém, který poskytuje informace o procesech fungující na FELu. Má pomoci studentům a zaměstnancům zorientovat se v tom, jak to chodí na Fakultě pomocí přehledných procesních diagramů. Procesem se rozumí posloupnost úkonů(aktivit), která vedou k určitému cíli. Například procesem je postup schválení bakalářské práce. Web: https://www.fel.cvut.cz/procesy/ Cílová skupina Cílovou skupinou jsou uživatelé, kteří potřebují zjistit, jak něco na škole funguje. Sem patří hlavně studenti a zaměstnanci Fakulty. Ale také lidé mimo Fakultu jako zájemci o studium nebo novináři. Uživatelé rozdělení podle různých požadavků: studenti: bakalář, magistr prvák, zahraniční student (nastoupil do školy a neorientuje se, jak to chodí) prezenčni, kombinované, dálkové studium zaměstnanci: profesoři, doktorandi, děkan, proděkan, vedoucí katedry lide bez vztahu k CVUT: zájemci o studium novináři návštěvy (profesoři z jiné univerzity) externisté podnájemníci, dodavatelé, distributoři administrátoři a analytici úprava stránek přidávání dalších procesů (diagramů a dokumentů) vyřizování požadavků Případy užití Případy užití lze rozdělit do tří kategorií: hledání procesů nahlašování nekonzistencí a chyb vytváření požadavků na chybějící procesy Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 3/24

Hledání procesů je považováno za hlavní funkcionalitu aplikace. Případy užití hledání procesů se také liší pro různé kategorie uživatelů. Zaměstnanci, studenti a lidé mimo ČVUT budou každý velmi pravděpodobně hledat jiné procesy. Je důležité u testovaných případů užití napsat v zadaní konkretní typ uživatele, protože schopnosti a zkušenosti jednotlivých typů uživatelů se mohou lišit. Náhled Metody testování Testování kognitivním průchodem Metoda testování kognitivním průchodem spočívá v průchodu předem dané sekvence kroků (akcí) a vyhodnocování jejich jednoduchost nalezení a pochopení. Vžijeme se tedy do role uživatele a postupně procházíme všechny nadefinované kroky daného případu užití. U každého případu užití si nejprve položíme otázku: Q0: Čeho chce uživatel dosáhnout? Dále postupně v každém kroku daného případu užití odpovídáme na otázky: Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 4/24

Q1: Je uživateli zřejmé, co udělat? Q2: Spojí si uživatel správně označení akce se svým cílem? Q3: Dostane uživatel dostatečnou odezvu? Výsledkem je pak sada odpovědí na tyto otázky ke každému kroku. Tyto odpovědi pak použijeme k nalezení nedostatků a návrhu nějakých korekcí k zlepšení použitelnosti uživatelského rozhraní. Testování heuristickou evaluací Při testování heuristickou evaluací zkoumáme, jestli nebyla porušena předem definovaná pravidla, která se hodí pro daný testovaný objekt. Pro toto testování jsme zvolili pravidla od Jakoba Nielsena: H1 Viditelnost stavu systému H2 Propojení systému a reálného světa H3 Uživatelská kontrola a svoboda H4 Standardizace a konzistence H5 Prevence chyb H6 Rozpoznání namísto vzpomínání H7 Flexibilní a efektivní použití H8 Estetický a minimalistický H9 Pomoc uživatelů pochopit, poznat a vzpamatovat se z chyb H10 Nápověda a návody Testované případy užití UC1 Najít konkrétní procesní diagram a stáhnout si ho k sobě na počítač Tento UC patří do kategorie hledání procesů. Diagramy mají sloužit k jednoduchému zobrazení aktivit v procesu a mají usnadnit uživateli pochopení procesu. Diagramy byly do webové aplikace přidávány postupně tak, jak přicházeli požadavky na jejich modelování a jejich počet postupně rostl. To mohlo zapříčinit nejasné nebo chaotické třídění diagramů do kategorií. Proto je důležité vyzkoušet, jestli lze požadovaný diagram vyhledat. UC2 Zjistit hiarchickou strukturu konkrétního oddělení Toto je případ užití, který pokrývá starší část systému pod názvem organizační struktura. UC3 Nahlásit chybu v diagramu odpovědné osobě Pokud uživatel zjistí chybu v diagramu nějakého procesu, má možnost nahlásit tuto chybu odpovědné osobě. Jedná se o důležitou součást funkcionality aplikace, která udržuje konzistentnost diagramů. Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 5/24

UC4 - Přidat požadavek na nový proces Pokud uživatel požadovaný proces nenašel z důvodu, že jestě nebyl daný proces zpracován, může v systému vytvořit nový požadavek na proces. Proces bude po určité době analytikem zpracován a požadavek vyřizen. Testování UC1 Najít konkrétní procesní diagram a stáhnout si ho k sobě na počítač. Zadání: Student bakalářského studia vyhleda proces projevení zájmu o obor a diagram si stáhne k sobě na počítač ve formátu PDF. Q0: Čeho chce uživatel dosáhnout? Uživatel se nachází na domovské obrazovce a chce vyhledat diagram k určitému procesu a tento diagram si chce stáhnout k sobě na počítač pro pozdější užití. Kroky: 1. Kliknout na Přihlášení 2. Vyhledat v menu služby Student bakalářského studia 3. Rozbalit Průběh studia a kliknout Projevení zájmu o obor 4. Kliknout na ikonku Exportovat do PDF Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 6/24

Krok 1 - přihlášení Otázka Odpověď Popis Nález Řešení Q1 Ne neví, že se má přihlásit chybí informace, že by se měl přihlásit. změnit pořadí kroků Q2 Ano Přihlášení je označeno dostatečně. Q3 Ano Po přihlášení se objeví uživatelské jméno Q1 a Q2 Ne, protože uživatel není informován, že se pro tuto akci má přihlásit. Informace o tom, že je nutné se přihlásit získá až po hledání v menu (tedy až po kroku 2). Viz screenshot 1.3. Na odkaz STUDENT BAKALÁŘSKÉHO STUDIA nelze kliknout. Je zde ale obrázek zámku a růžová bublina s informací, že se má uživatel přihlásit. Řešením by bylo po kliknutí na odkaz STUDENT BAKALÁŘSKÉHO STUDIA přesměrovat uživatele na přihlašovací dialogové okno. Tím by se Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 7/24

prohodily krok 1 a krok 2. Screenshot 1.3 Krok 2 - Vyhledat v menu služby Student bakalářského studia Screenshot 1.4 Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 8/24

Otázka Odpověď Popis Nález Řešení Q1 Ano Má hledat správnou kategorii Q2 Ne Není jasné, kde hledat. Název kategorie služby je nejasný Změna názvosloví a kategorizace Q3 Ano po přejetí myši se objevují podmenu. Q2 Uživatel neví, že pod názvem služby se skrývají procesy a procesní diagramy. Název Služby je nejasný a neintuitivní. Diagram by se mohl také schovávat v záložce Interní procesy. Kategorie student a bakalářské studium jsou intuitivní, protože se vztahují k jeho typu uživatele. Krok 3 - rozbalit v Průběh studia a kliknout na Projevení zájmu o obor Otázka Odpověď Popis Nález Řešení Q1 Ano Má hledat správnou kategorii Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 9/24

Q2 Ne Není jasné, kde hledat. Požadovaný diagram by mohl spadat do několika kategorií. Změna názvosloví a kategorizace Q3 Ano po rozkliknutí se objevují podmenu. Q2 Projevení zájmu o obor může spadat do kategorie průběh studia, administrativni činnosti a také má vazbu ke kategorii SZZ a ukončení studia, závěrečné práce a zápisy a uznávání předmětů. Uživatel musí schvíli hledat než najde správný diagram. Krok 4 - kliknout na ikonku Exportovat do PDF Otázka Odpověď Popis Nález Řešení Q1 Ano stahne diagram Q2 Ne Pouze grafické ikonky. Ikonka neni intuitivní Přídání popisu a/nebo změna obrázku a Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 10/24

potlačení funkce Uložit jako... Q3 Ano diagram se stáhne Q2 Uživatel je student FEL, u kterého se předpokladají zkušenosti s počítači a proto by si měl spojit popis Exportovat do PDF s cílem stáhnout diagram. Grafická ikonka ale bez přejetí myši neobsahuje textový popis a samotný obrázek není dostatečně intuitivní. Pro uživatele je navíc intuitivnější kliknout na diagram pravým tlačítkem a vyvolat kontextovou nabídku s možností Uložit jako.... Funkce Uložit jako.. není vhodná, protože se uloží pouze obrázek. Diagram je ale interaktivní a tato interaktivita by tímto způsobem zmizela. Řešením by bylo zobrazení popisku bez přejetí myši nebo změnou obrázku na standardizovaný obrázek pro Stáhnutí (šipka dolů). Popisek by bylo vhodné upravit na Stáhnout interaktivní diagram. UC2 Zjistit hiarchickou strukturu konkrétního oddělení Zadání: Sekretářka pracující v sekretariátu děkana potřebuje zjistit svého přímého nadřízeného. Q0: Čeho chce uživatel dosáhnout? Uživatel potřebuje zjistit organizační vazby v rámci FELu. Kroky: 1. Kliknout na Přihlášení 2. Kliknout v menu na organizační strukturu 3. Rozkliknout plus u osoby Tajemník Ing. Igor Mráz Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 11/24

Krok 1 - přihlášení Otázka Odpově ď Popis Nález Řešení Q1 Ne neví, že se má přihlásit Q2 Ano Přihlášení je označeno dostatečně. chybí informace, že by se měl přihlásit. změnit pořadí kroků Q3 Ano Po přihlášení se objeví uživatelské jméno Q1 Stejné jako u UC1 krok 1. Uživatel neví, že se má přihlásit a mělo by se zaměnit pořadí kroků. Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 12/24

Krok 2 - Kliknout v menu na organizační strukturu Otázka Odpově ď Popis Nález Řešení Q1 Ano Uživatel hledá v organizační struktuře Q2 Ne Není jednoznačné, kde přesně hledat Pojem Organizační struktura není jednoznačný přejmenovat Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 13/24

Q3 Ano po kliknutí se objeví schéma organizační struktury Q2 Pojem Organizační struktura je víceznačný. Není jasné, čeho je to organizační struktura. Mohlo by se jednat třeba o organizační strukturu samotného portálu vývojového týmu. A uživatel by mohl předpokládat, že organizační struktury oddělení a kateder najde pod záložkou Služby nebo Interní služby. Řešením by bylo přejmenování pojmu na Organizační struktura FEL, to je jednoznačné pojmenování a lepší kategorizace ostatních položek. Krok 3 - Rozkliknout plus u osoby Tajemník Ing. Igor Mráz Otázka Odpově ď Popis Nález Řešení Q1 Ano hledaný člověk je někde v struktuře, Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 14/24

schovaný pod jedním z plusů Q2 Ne Nelze určit, kde hledat, musí se rozklikávat všechny plusy, dokud se nenarazí na správné oddělení. Q3 Ano Po kliknutí na plus se rozbalí daná podstruktura. Oddělení jsou schovány pod plusy Od začátku mít rozbaleny všechny plusy nebo vyhledávací pole Q2 Uživatel hledá odělení sekřetariát děkanátu. Toto oddělení je ale schované v salené struktuře pod jedním z plusů. Jméno vedoucí osoby nepomůže, protože vedoucí osoba není v tomto případě uživateli známa. Vedoucí osoba je naopak informace, kterou má uživatel za cíl zjistit. Rešením by bylo mít od začátku rozbalené všechny plusy. Lepším řešením by bylo přidat vyhledávací formulářové pole, které by pak rozbalilo správnou větev organizační struktury. UC3 Nahlásit chybu v diagramu odpovědné osobě Zadání: Student zjistil ve staženém diagramu Projevení zájmu o obor z UC1 v kroku 3 chybu v diagramu a chce na ní upozornit odpovědnou osobu. Q0: Čeho chce uživatel dosáhnout? Uživatel chce poslat zprávu o chybě v procesním diagramu odpovědné osobě. Kroky: 1. Vyhledat proces, ke kterému diagram patří. 2. Kliknout na ikonku Nahlásit neaktuálnost obsahu zobrazované služby 3. Vyplnit informace o chybě do formuláře a odeslat Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 15/24

Krok 1 - Vyhledat proces, ke kterému diagram patří. Otázka Odpově ď Popis Nález Řešení Heuristika Q1 Ano i Ne Na stránce je odkaz, co dělat. Lze zaměnit s odkazem na tvorbu nových požadavků Přejmenovat odkaz na tvorbu nových požadavků H6 Q2 Ne Člověk pro nahlášení musí vyhledat původní diagram. Domovská stránka nenabízí přímý odkaz dostat se na formulář Přidat odkaz na formulář k nahlášení chyby přímo na domovskou stránku. H6 Q3 Ano Po kliknutí se zobrazí požadovaný formulář Q1 a Q2 Aby mohl člověk nahlásit chybu v diagramu, musí vyhledat v kategoriích původní diagram a tam tuto funkci najít. Domovská stránka sice obsahuje nápovědu Jak nahlásit neaktuální proces, ale vyhledávání původního diagramu není pro uživatele komfortní. Domovská stránka navíc obsahuje odkaz Zavést požadavek nebo chybu do evidence návrhů, přes který se ale chyby a Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 16/24

neaktuálnosti pro procesy hlásit nemají. Uživatel se musí podívat do nápovědy, aby věděl, že musí vyhledat původní diagram. Krok 2 - Kliknout na ikonku Nahlásit neaktuálnost obsahu zobrazované služby Otázka Odpově ď Popis Nález Řešení Q1 Ano Hledá kontakt nebo formulář pro vyplnění zprávy Q2 Ne Není dostatečně vidět Grafická ikonka dostatečně nepopisuje svoji funkci. Přidat popisek Q3 Ano Po kliknutí se zobrazí požadovaný formulář Q2 Grafická ikonka dostatečně nepopisuje svoji funkci. Uživatel na ni musí přejet myší, aby se objevil dodatečný popisek Nahlásit neaktuálnost obsahu zobrazované služby. Řešením je zobrazovat popisek bez nutnosti přejet přes ikonku myší. Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 17/24

Krok 3 - Vyplnit informace o chybě do formuláře a odeslat Otázka Odpově ď Popis Nález Řešení Q1 Ano Má vyplnit formulář Q2 Ano Vše je srozumitelné Q3 Ano Po kliknutí se zobrazí, že byl formulář odeslán UC4 - Přidat požadavek na nový proces Zadání: Student nenašel hledaný proces a chce to nahlásit odpovědné osobě. Q0: Čeho chce uživatel dosáhnout? Uživatel chce poslat zprávu, ve které požaduje zpracovat hledaný proces. Kroky: 1. Kliknout na Úvod 2. Kliknout na evidence návrhů Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 18/24

3. založit nový požadavek 4. vyplnit a odeslat formulář Krok 1 - Kliknout na Úvod Otázka Odpově ď Popis Nález Řešení Q1 Ano i Ne Uživatel neví, že má hledat funcionalitu na domovské stránce Přidat na všechny stránky aplikace odkaz Nemůžete najít to, co hledáte? Q2 Ne Uživatel neví, že má hledat domovskou stránku pod záložkou Úvod. Pojem Úvod nemá intuitivní vazbu k domovské stránce. Přejmenovat nebo vytvořit odkaz na domovskou stránku z loga aplikace. Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 19/24

Q3 Ano Po kliknutí se zobrazí, že byl formulář odeslán Q1 Uživatel hledá ve webové aplikaci požadovaný proces. Na jakékoliv stránce se může rozhodnout, že hledání bylo neúspešné a že chce nahlásit požadavek na nový proces. Jediná stránka, která obsahuje odkaz na nový požadavek, je domovská stránka. Ostatní stránky aplikace uživateli nijak nenapovídají. Na druhou stranu se uživatel po ukončeném hledání nakonec intuitivně vrátí na domovskou stránku. Uživateli ale není zřejmé, co má dělat. Q2 Odkaz na domovskou stránku vede přes záložku Úvod. Uživateli není zřejmé, že má kliknout na tuto záložku. Řešením by bylo záložku přejmenovat nebo ji odstranit a vytvořit na ni odkaz z loga aplikace. Odkaz z loga je poměrně ustálenou praktikou, kterou zkušenější uživatelé znají. Krok 2 - Kliknout na Evidence návrhů Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 20/24

Otázka Odpově ď Popis Nález Řešení Q1 Ano Hledá odkaz na nový proces Q2 Ano Popis je dostatečný Q3 Ano Zobrazí se požadovaný formulář Krok 3 - Založit nový požadavek Otázka Odpově ď Popis Nález Řešení Q1 Ano Hledá odkaz na nový požadavek Q2 Ano Popis je dostatečný Q3 Ano Zobrazí se požadovaný formulář Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 21/24

Krok 4 - Vyplnit formulář Otázka Odpově ď Popis Nález Řešení Q1 Ano vyplní se formulář Q2 Ano popisky jsou zřejmé Q3 Ano objeví se informace, že byla zpráva úspešně odeslána. Seznam nálezů Nález Scénář Priorita Popis Heuristika nebo typ problému chybí informace, že by se měl UC1 krok 1, UC2 krok 1 střední Uživatel na začatku neví, že by se měl Uživatel neví, přihlásit, zjistí to až po hledání v menu. co má udělat, Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 22/24

uživatel přihlásit. Název kategorie služby je nejasný Požadovaný diagram by mohl spadat do několika kategorií. UC1 krok 2 vysoká Uživatel neví kde hledat, musí procházet celé menu. Je potřeba intuitivnější pojem, referenční přiručka a lepší kategorizace. UC1 krok 3 vysoká Uživatel neví, kde hledat, musí procházet celé menu. Je potřeba intuitivnější pojem, referenční přiručka a lepší kategorizace. Uživatel neví, kde hledat Uživatel neví, kde hledat Grafická konka bez popisku neni intuitivní UC1 krok 4, UC3 krok 2 střední Uživatel musí hledat, pod kterou ikonkou se funkcionalita skrývá. Uživatel neví, kde hledat. Pojem Organizační struktura není jednoznačný Oddělení jsou schovány pod plusy. Cíl lze zaměnit s odkazem na tvorbu nových požadavků Uživatel pro nahlášení musí vyhledat původní diagram. Uživatel neví, že má hledat domovskou stránku pod záložkou Úvod. Uživatel neví, že má hledat funcionalitu na domovské stránce UC2 krok 2 střední Uživatel bz mohl strukturu FELu hledat i pod interními procesy nebo službami. Zabránilo by tomu jednoznačnější pojmenování Organizační struktura FEL UC2 krok 3 nízká Uživatel musí rozklikávat všechny plusy, abz našel své požadované oddělení. UC3 krok 1 vysoká Uživatel si při hledání náhlašování chyby v diagramu může odkaz s funkcionalitou Nahlásit nový požadavek. UC3 krok 1 vysoká Uživatle pro nahlášení chyby musí nejdříve vyhledat původní diagram a u něj funkcionalitu najít. UC4 krok 1 nízká Uživatel neví, že má hledat domovskou stránku pod záložkou Úvod. UC4 krok 1 nízká Uživatel neví, že má hledat funcionalitu na domovské stránce Uživatel neví, kde hledat. Uživatel neví, kde hledat. H7 Uživatel neví, kde hledat. Uživatel neví, co má dělat Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 23/24

Závěr U aplikace se ukázalo, že má hlavní problém s kategorizací položek a je potřeba vynaložit hodně usilí najít požadovanou funkci nebo diagram. Zabránila by tomu změna kategorizace, přidání referenční přiručky a přejmenování některých pojmů. Testování Procesního Portálu FEL ČVUT, Ondřej Mrákota, 24/24