System usability scale: meradlo použiteľnosti
System Usability Scale (SUS) predstavuje spoľahlivý nástroj na meranie použiteľnosti. Bol vyvinutý v 80. rokoch John Brooke pre spoločnostť Digital Equipment Corporation, ako nástroj pre zistenie použiteľnosti počítačových systémov. V súčasnosti je táto metóda používaná vo fáze testovania a umožňuje hodnotiť širokú škálu produktov a služieb vrátane hardvéru, softvéru, mobilných zariadení, webových stránok a aplikácií. SUS má podobu dotazníka, ktorý pozostáva z 10 položiek týkajúcich sa použiteľnosti testovaného produktu. Každá položka má 5 možností odpovede, zoradené v stupnici od: rozhodne súhlasím až po rozhodne nesúhlasím, prostredníctvom, ktorých je možné ohodnotiť interakciu s produktom.
Výhody používania SU
Hlavné dôvody, prečo je SUS metóda preferovaná, sú:
Je použiteľná na širokú škálu produktov- metóda môže byť použitá pre rôzne typy technológií a systémov.
Je zadarmo- šablóna dotazníka je ľahko dostupná na internete.
Je testovaná a spoľahlivá- napriek tomu, že táto 10 položková stupnica vyzerá jednoducho, bola desaťročia overovaná tisíckami prieskumov v stovkách štúdií.
10 položiek SUS dotazníka
Ako sme už v úvode spomenuli SUS je tvorená 10 položkami na ktoré sa viaže 5 možných odpovedí, ktoré vyjadrujú spokojnosť používateľa.
V preklade sú to dotazy:
1. Produkt by som v prípade potreby rád/a použil/a.
2. Produkt je zbytočne komplexný a zložitý.
3. Produkt sa mi dobre používal.
4. Potreboval/a by som technickú podporu, aby som mohol/a produkt používať efektívne.
5. Rôzne funkcie produktu sú dobre spracované.
6. Produkt je nekonzistentný.
7. Povedal/a by som, že väčšina ľudí sa naučí s produktom pracovať rýchlo.
8. Produkt je ťažkopádny a ťažko sa ovláda.
9. Pri práci s produktom sa cítim pohodlne a isto.
10. Musím sa naučiť veľa vecí, aby som vedel/a s produktom pracovať.
Pre získanie spoľahlivých údajov by dotazník mal byť vyplnený minimálne piatimi používateľmi v časovom rozmedzí 1–2 minúty. Pre zabezpečenie integrity dotazníka je nutné zaistiť, aby sa nezhromažďovala žiadna iná spätná väzba okrem skóre v stupnici.
K dotazom SUS je možné pridať aj ďalšie dotazy, ktoré sa týkajú produktu a budú informačne prínosné. Bodovanie je založené na 5-bodovej Likertovej škále od najväčšieho nesúhlasu po najväčší súhlas. Stupnicu je možné upraviť spôsobom, že k určitým stupňom v stupnici sa pridajú označenia ako napríklad „rozhodne nesúhlasím“, „skôr nesúhlasím“, „neviem“, „skôr súhlasím“, a „rozhodne súhlasím“.
Ku každej odpovedi v stupnici je priradená hodnota, ktorá slúži na výpočet skóre SUS. Hodnoty predstavujú body, ktoré sú rozdelené nasledovne:
Rozhodne nesúhlasím: 1 bod
Skôr nesúhlasím: 2 body
Neviem: 3 body
Skôr súhlasím: 4 body
Rozhodne súhlasím: 5 bodov
Ako sa počíta SUS skóre?
SUS skóre vypočítame:
1. Sčítame celkové skóre pre všetky nepárne otázky a potom odpočítame číslo 5 od celkového počtu, aby sme dostali (X).
Nepárne — otázky číslo 1, 3, 5, 7 a 9
2. Spočítame celkové skóre pre všetky párne otázky, potom toto množstvo odpočítame od 25 a získate (Y).
Párne — otázky číslo 2, 4, 6, 8 a 10
3. Spočítame celkové skóre nových hodnôt (X + Y) a vynásobíme ho číslom 2,5.
Ako príklad môžeme uviesť:
Nepárne = (4 + 5 + 3 + 4 + 3) = 19–5 = 14
Párne = (2 + 1 + 3 + 1 + 1) = 25–8 = 17
Skóre SUS: (14 + 17) x 2,5 = 77,5
Podľa postupu spomenutej metodiky získame výsledok SUS skóre zo 100 (v našom prípade je to 77,5/ 100).
Interpretácia skóre
SUS nie je diagnostický nástroj, to znamená, že jeho cieľom nie je definovať konkrétne problémy, ale podať informácie, ktoré poukazujú na použiteľnosť produktu.
Priemerné skóre SUS je 68. Ak je skóre nižšie ako 68, pravdepodobne existujú vážne problémy s použiteľnosťou produktu, ktoré je potrebné preskúmať a vyriešiť. Ak je skóre vyššie ako 68 je možná potreba len menších vylepšení.
Príklad použitia SUS
Autori Kurtum a Bangor vo svojej štúdií (2013) testovali 14 rôznych produktov používaných na každodennej báze, na ktoré sa rozhodli uplatniť nástroj SUS. Do kategórie zaradili produkty ako Google, G-mail, z webových stránok najviac navštevovaný Amazon.com, zo softvérov Microsoft Office, konkrétne jeho programy Word, Excel, PowerPoint. Ďalej to boli produkty GPS, bankomaty (ATM), mikrovlnné rúry a mobily. Na testovaní sa podielalo približne 1 500 používateľov, ktorí prostredníctvom online formy vyplnili dotazník.
Získané údaje poskytovali odborníkom a výskumným pracovníkom nový súbor referenčných hodnôt, ktoré im pomohli pri určovaní toho, kam spadajú testované výrobky v rámci distribúcie známych, často používaných produktov.
Na záver môžeme hodnotiť System Usability Scale ako efektívny, rýchly a ľahký spôsob pochopenia toho, do akej miery používatelia vnímajú použiteľnosť produktu. SUS by však nemal byť jediný nástroj ktorý by slúžil na testovanie použiteľnosti produktu. Je odporúčané ho doplniť aj inými metódami, ktoré vedia problémy produktu definovať konkrétnejšie.
Zdroje
BANGOR, A. KORTUM, P. MILLER, J. Determining What Individual SUS Scores Mean: Adding an Adjective Rating Scale. Journal of Usability Studies [online] 2009. 4(3), 114–123 [cit. 2020–11–18] ISSN 1931–3357 Dostupné na: http://uxpajournal.org/wpcontent/uploads/pdf/JUS_Bangor_May2009.pdf
BROOKE, J. SUS: A Restrospective. Journal of Usability Studies [online] 2013. 8(2), 29–40 [cit. 2020–11–18] ISSN 1931–3357 Dostupné na: http://uxpajournal.org/wp-content/uploads/sites/8/pdf/JUS_Brooke_February_2013.pdf
KORTUM, P. BANGOR, A. Usability Rating for Everyday Products Measured with the System Usability Scale. Journal of Human — Computer Interaction [online] 2013. 29, 67–76 [cit. 2020–11–18] ISSN 1532–7590 Dostupné na: https://www.researchgate.net/publication/254304777_Usability_Ratings_for_Everyday_Products_Measured_With_the_System_Usability_Scale_SUS
ORN, A. The Pros and Cons of the System Usability Scale (SUS). Research Collective [online] 2017. [cit. 2020–11–18] Dostupné na: https://research-collective.com/blog/sus/
SMYK, A. The System Usability Scale & How it’s Used in UX. Medium [online] 2020. [cit. 2020–11–18] Dostupné na: https://medium.com/thinking-design/the-system-usability-scale-how-its-used-in-ux-b823045270b7
THOMAS, N. How To Use The System Usability Scale (SUS) To Evaluate The Usability Of Your Website. Usability Geek [online] [cit. 2020–11–18] Dostupne na: https://usabilitygeek.com/how-to-use-the-system-usability-scale-sus-to-evaluate-the-usability-of-your-website/