Исследование: отказ от привычных UX-паттернов

Перевод статьи Shay Ben-Barak на UX Magazine

Оперируя привычными элементами интерфейсов, пользователи знают, как ими пользоваться с максимальной эффективностью, и интуитивно предугадывают следующий шаг. Если лишить их такой возможности, могут появиться серьезные проблемы.

Во избежание неприятностей проектировщики стараются следовать общепринятым паттернам. Любой профессионал, принимавший участие в юзабилити-тестированиях, скажет, что излишний «креатив» негативно скажется на общем впечатлении, времени отклика и удовлетворенности. Также следует иметь в виду необходимость обучать пользователей взаимодействию с новыми решениями, в этом случае им придется выбросить из головы уже неактуальные знания. Это происходит медленно (в видео доступны субтитры).

Как сильно новые решения могут повлиять на микро взаимодействия и какую цену за это придётся заплатить? Shay Ben-Barak попытался ответить на эти вопросы в своём эксперименте.

Цели

Задача исследования: проанализировать как нестандартная раскладка цифр на панели набора номера телефона может повлиять на скорость работы и количество ошибок ввода.

Начальные положения:

• анализ скорости работы будет основан на разнице во времени, затраченном на использование общепринятой раскладки и новой
• исследованию на ошибки будут подвергнуты только те сеансы, где где было допущено свыше одной ошибки

Тестируем две раскладки: обычную и новую (тестовую), где цифры заполняют столбцы сверху вниз, слева направо.

Работа с привычным расположением клавиш должна быть естественной и быстрой из-за активной мышечной памяти.

Тестовая раскладка в свою очередь требует концентрации и визуального подтверждения команд от мозга пальцам (взгляд — идентификация — нажатие). Это займет больше времени и повлечет промахи.

Эксперимент

Для эксперимента Shay написал веб-приложение с jQuery keypad (интерфейс) и БД на MySQL (сбор статистики).

Таск для респондентов:

Участникам предложено набрать десятизначный номер телефона на обеих раскладках по очереди.

Чтобы проверить готовность участника и дать время приложению загрузиться полностью, был введен обратный отсчет на три секунды.

Метрики:

• время, затраченное на набор: промежуток от конца обратного отсчета до нажатия «done»
• количество нажатий «backspace»

Результаты первой итерации

Чтобы избежать проблем с работой jQuery, исследование проводили в chrome на одном и том же телефоне с android. Респондентов приглашали через WhatsApp и выискивали на DevFest Romania, где выступал автор.

Некоторые результаты были удалены из выборки:

• простые комбинации цифр (например 12345..)
• результаты с аномально большим временем ввода

Обработка 130 пар показала:

«Ср. знач. — среднее значение, «Ср. откл.» — среднеквадратическое отклонение

Выводы:

• с тестовой раскладкой в среднем возились на 35% дольше
• 50% респондентов потратили больше 10 секунд, набирая номер на тестовой раскладке
• только 20% респондентов потратили больше 10 секунд на стандартной раскладке

Интересный момент: 22 пары результатов из 130 (28%) вообще не сошлись с предложенным номером. Если на стандартной раскладке эксперимент прошёл идеально, то на тестовой — результат был настолько плохим, что респонденты отказывались продолжать попытки.

Результаты второй итерации

На втором круге респонденты пользовались своими телефонами. Это вызвало задержки в работе по техническим причинам, по сему автор удалил 7 результатов на стандартной раскладке дольше 16 секунд (потому что 16 > ср.знач.+ср.откл.).

Обработка 123 пар показала:

«Ср. знач. — среднее значение, «Ср. откл.» — среднеквадратическое отклонение

Выводы:

• с тестовой раскладкой в среднем разбирались на 46% дольше
• 50% респондентов потратили больше 10 секунд, набирая номер на тестовой раскладке
• только 15% респондентов потратили больше 10 секунд на стандартной раскладке

Обобщение результатов

На графике данные отсортированы по возрастанию времени работы со стандартной раскладкой. Видно, что увеличение времени работы с тестовой раскладкой коррелирует с количеством нажатий «backspace» с коэффициентом 0,77.

В 16 случаях работа с тестовой раскладкой была быстрее, чем со стандартной. Из графика ясно, что большая часть этих сеансов по времени заняла выше среднего значения времени использования стандартной раскладки. Это указывает:

• либо на технические проблемы
• либо на меньшую чувствительность респондента к изменению расположения клавиш, что вызвало результат обратный предполагаемому*

*Явление последнего пункта описывает кривая обучаемости.

Выводы

Результаты указывают, что небольшое и логичное изменение стандартной раскладки клавиатуры увеличило время выполнения стандартной задачи на 30–50%, а также количество исправленных и неисправленных ошибок.

Реакция пользователей на изменения:

• изменения игнорируют
• старые знания препятствуют усвоению новых

Мат. часть для любознательных и тех, кто забыл

Ср. знач. — среднее значение (среднее арифметическое). Равно сумме всех элементов множества, разделённой на их количество.

Медиана — отметка, делящая данные на две равные части. Другими словами, это значение с нулевым суммарным отклонением.

Ср. откл. — среднеквадратическое отклонение. Равно квадратному корню из среднего арифметического всех квадратов разностей между данными величинами и их средним арифметическим.

Корреляция — статистическая взаимосвязь двух или более случайных величин.

Коэффициент корреляции — это мера линейной зависимости двух или более случайных величин.