18 - Аналитические задачи
Аналитические задачи
Задачи определяются как последовательность взаимодействий, которые должны выполнить пользователи. Аналитические задачи позволяют измерить, сколько времени и кликов требуется пользователям для их выполнения.
Ключевые показатели эффективности (KPI) задач
После определения потока задач список задач обновится и покажет несколько KPI. Эти показатели помогают получить первое представление о том, соответствует ли поведение тестировщиков вашим ожиданиям.
Пример: Вы создали новый дизайн для приложения магазина и хотите оценить, как он работает. Вы проводите тесты и видите, что в среднем пользователи потратили 2:30 минуты. Это намного больше, чем ожидалось, поэтому стоит провести глубокий анализ и проверить подробную статистику, чтобы выяснить, связаны ли проблемы с отдельными пользователями, искажающими KPI, или это общая проблема.
Начало
Показатель начала (start rate) показывает, сколько пользователей смогли начать выполнение заданной задачи.
Пример: Предположим, у вас есть прототип с тремя экранами: A, B и C. Экран A связан с B, а B — с C. Также вы определили задачу, которая измеряет, переходят ли пользователи с B на C. Если тестировщик просматривает только экран A, эта тестовая сессия не считается начатой. Если тестировщик посещает A и B, сессия засчитывается как начатая. Низкий показатель начала указывает на то, что у пользователей возникают проблемы с навигацией в вашем дизайне. Они не смогли перейти на нужный экран.
Успех
Показатель успеха (success rate) показывает, сколько пользователей смогли завершить задачу после её начала.
Пример: Продолжим с приведённым выше примером. Предположим, у нас есть три тестировщика. Тестировщик X посещает только A, тестировщик Y — A и B, а тестировщик Z — A, B и C. В этом случае показатель начала будет 2/3, потому что тестировщики Y и Z смогли посетить экран B. Однако общее количество успехов равно 1, так как только тестировщик Z добрался до экрана C. Таким образом, показатель успеха составляет 1/2. В идеале вы хотите, чтобы все пользователи понимали ваш дизайн и могли завершить задачи. Чем выше показатель успеха, тем лучше ваш дизайн.
Продолжительность
Продолжительность задачи измеряет среднее время, которое пользователи тратят на выполнение задачи. Обычно короткая продолжительность указывает на то, что пользователи поняли ваш дизайн.
Пример: Продолжим с приведённым выше примером. Предположим, у нас есть 4 тестировщика, которые завершили задачу. Они потратили 10 с, 12 с, 10 с и 28 с. В этом случае средняя продолжительность будет (10 + 12 + 10 + 28) = 60 с, поделённые на 4, то есть 15 с. Обратите внимание, что продолжительность часто сильно варьируется между отдельными пользователями. Как видно из примера, первые три пользователя были довольно быстрыми, тогда как последний был медленным. В таком случае имеет смысл просмотреть записи экрана или графики пути пользователя, чтобы понять проблемы пользователя.
Можно нажать на значок, чтобы открыть подробный вид распределения продолжительности в виде точечной диаграммы.
Взаимодействия
Взаимодействия задачи измеряют среднее количество взаимодействий, необходимых пользователю для завершения задачи.
Пример: Продолжим с приведённым выше примером. Предположим, у нас есть 2 тестировщика, которые завершили задачу. Они сделали 5 и 15 кликов. В этом случае среднее количество взаимодействий будет (5 + 15) = 20, поделённое на 2, то есть 10 кликов. Как и в случае с продолжительностью, количество взаимодействий может сильно различаться между пользователями. Среднее значение может скрывать выбросы, которые интересны для дальнейшего анализа.
Можно нажать на значок, чтобы просмотреть распределение взаимодействий и выявить выбросы.
Графики задач
Вы можете получить более глубокое представление о распределении продолжительности и взаимодействий, нажав на кнопку. В диалоговом окне можно переключаться между точечными диаграммами и коробчатыми диаграммами.
Точечные диаграммы показывают продолжительность задачи в сравнении с количеством взаимодействий и позволяют легко заметить выбросы, например, пользователя, который потратил необычно много времени и кликов.
Нажатие на точку в точечной диаграмме откроет запись экрана, чтобы вы могли легко понять, где тестировщики столкнулись с трудностями.
Коробчатые диаграммы также показывают продолжительность и взаимодействия, но в более сжатом виде. Они визуализируют распределение и асимметрию данных, показывая среднее значение и квартили 75%.
No Comments