Como começar a utilizar métricas de avaliação de usabilidade

Fernanda Alves

Follow

Published in

SiDi Design

5 min readOct 24, 2022

--

A usabilidade é um dos principais fatores que contribuem para que as pessoas que interagem com artefatos digitais tenham uma boa experiência de uso com pouca ou nenhuma frustração. Por este motivo, é essencial que ao projetar interações e pensar na arquitetura de informação de uma interface, a pessoa Designer procure, além de atender às boas práticas de usabilidade, também acompanhar a vida do produto até onde for possível. Utilizando para isso, formas de medir e avaliar a usabilidade, seja de funcionalidades ou até do produto em sua totalidade.

Tendo em vista a importância de promover uma boa experiência de uso, neste artigo irei compartilhar conceitos de usabilidade, norma de usabilidade e também algumas métricas que ajudam a medir e avaliar a usabilidade em produtos digitais.

Antes de entender como utilizar métricas, precisamos visitar o conceito de métrica. Segundo Justin Mifsud, no artigo Usability Metrics — A Guide To Quantify The Usability Of Any System, “Uma métrica é um ‘sistema ou padrão’ de medida representado em unidades que podem ser utilizadas para descrever mais de um atributo. As métricas são muito úteis quando se trata de quantificar a usabilidade durante a avaliação de usabilidade de software, sites e aplicativos”

Como forma de promover um padrão e quantificar a usabilidade de um artefato, existe a norma ISO 9241–11, que além de definir o que é usabilidade, também explica como se pode identificar ou avaliar a usabilidade de um produto digital por meio do desempenho e da satisfação da pessoa que utiliza o artefato. A norma nos ajuda a entender sobre os três atributos principais envolvidos no contexto de usabilidade: eficácia (os usuários podem atingir seus objetivos com sucesso), eficiência (quanto esforço e recursos são gastos para alcançar esses objetivos), e satisfação (a experiência foi satisfatória) e é a partir desses três atributos que é possível entender e avaliar se os públicos do produto alcançam objetivos em um determinado ambiente, porém, ainda assim, a usabilidade só pode ser medida considerando também o contexto de uso.

Mesmo cientes da importância de medir e avaliar a usabilidade, muitas organizações, por motivos diversos, possuem desafios para priorizar esse aspecto. Porém, o site NNGroup, um líder no campo da experiência do usuário, afirma no artigo Usability Metrics, do NN/Group, que à medida que as organizações aumentam seus investimentos em usabilidade, coletar medições reais é o próximo passo natural. Medir a usabilidade pode trazer outros benefícios à organização e também ao produto, como:

Promover uma boa experiência de uso;
Identificar (e quantificar) problemas de usabilidade;
Comunicar, de forma clara e efetiva, a avaliação de usabilidade;
Acompanhar o progresso dos produtos;
Avaliar posição competitiva;
Tomar decisões;
Criar planos para o produto.

São benefícios como esses citados acima que nos ajudam como designers a conversar com stakeholders e também a explicar a importância em priorizar uma boa usabilidade desde as primeiras etapas de um projeto, transformando assim, esses stakeholders em advogados, não só dos interesses de negócio, mas também dos interesses dos usuários.

Como uma boa estratégia, considerando também a natureza e contexto do produto, o Designer pode optar por iniciar a utilização de métricas de avaliação de usabilidade com um formato mais enxuto, mostrando aos envolvidos que nem sempre precisamos de sistema complexo e custoso de avaliação para ter as primeiras percepções sobre como está a usabilidade de uma funcionalidade, por exemplo.

Duas formas, com um bom custo-benefício, de medir e avaliar a usabilidade é utilizando a Escala de Usabilidade do Sistema (SUS, System usability scale) ou a Métrica de usabilidade para experiência do usuário (UMUX-LITE, Usability Metric for User Experience — Lite Version).

SUS (System usability scale)

O SUS foi originalmente criada por John Brooke em 1986, como uma escala para avaliação após testes de usabilidade em sistemas como o VT100 Terminal (“Green-Screen”). O SUS é independente de tecnologia e desde então tem sido testado em hardware, software de consumo, sites, celulares, etc.

VT100 Terminal (“Green-Screen”) — Imagem por ajmexico

O SUS possui um questionário com 10 itens e uma escala de opções de 5 pontos onde, Discordo Fortemente(1) — Concordo Fortemente(5). As pontuações variam de 0 a 100 em incrementos de 2,5 pontos. Uma pontuação considerada média do SUS é em torno de 68.

Lista com as 10 perguntas propostas pelo SUS — https://www.nngroup.com/articles/measuring-perceived-usability/

UMUX-LITE (Usability Metric for User Experience — Lite Version)

A partir da necessidade de um formulário mais curto que o SUS, Finstad criou em 2010 a Métrica de Usabilidade para Experiência do Usuário (UMUX), visando ser semelhante ao SUS, porém mais curto e direcionado para a definição de usabilidade ISO 9241 (eficácia, eficiência e satisfação). O UMUX, em sua versão inicial, contém dois itens positivos e dois negativos com uma escala de resposta de 7 pontos.

Em uma segunda versão, para melhorar o UMUX, Lewis et al. propôs um questionário ainda mais curto, totalmente positivo, chamado UMUX-Lite, usando a mesma escala de 7 pontos com os dois itens a seguir:

Os recursos [deste sistema] atendem aos meus requisitos.

[Este sistema] é fácil de usar.

Sendo assim, O UMUX-LITE acaba sendo 80% mais curto que o SUS (questionário de 10 itens) além de comprovado que o UMUX-Lite pode prever os escores do SUS com cerca de 99% de precisão.

Para calcular o UMUX-LITE, você deve utilizar a seguinte fórmula:

Pontuação UMUX-Lite = ((Pontuação da pergunta 1)+(Pontuação da pergunta 2)-2)*100/12

Se você gostou de conhecer um pouco mais sobre o assunto, recomendo a leitura da página Medindo a Usabilidade: Do SUS ao UMUX-Lite da MeasuringU, onde você poderá aprofundar ainda mais o conhecimento.

Espero que o compartilhamento deste conteúdo ao apresentar um pouco sobre usabilidade e essas duas formas de quantificar e avaliar a usabilidade contribua ainda mais para seus estudos e jornadas onde quer que você esteja.

Se você já utilizou alguma dessas formas ou queira compartilhar suas experiências utilizando métricas de avaliação de usabilidade, comenta aqui, vamos trocar uma ideia?

A escrita deste artigo foi motivada por um estudo inicial feito para os grupos de trabalho de Design de interação e informação e UX Research, em conjunto com os Designers Sidclei Sobral, Caio Bezerra e Mayara Magalhães, meus colegas e companheiros queridos.

Como começar a utilizar métricas de avaliação de usabilidade

SUS (System usability scale)

UMUX-LITE (Usability Metric for User Experience — Lite Version)

Conteúdos complementares:

Written by Fernanda Alves