Пользовательское тестирование: что, когда, зачем

пользовательское тестирование
Статьи
Автор: Юлия Федотова
«Шеф-редактор блога GetGoodRank, веб-аналитик, блоггер.
Эффективность пользовательских тестов недооценивается оптимизаторами. Рассказываем, какие бывают типы тестов, в чем преимущества проверки сайта пользователями, как создать собственный тест»

Алгоритмы ранжирования поисковиков определяют накрутку факторов на раз-два. Искусственное «улучшение» поведенческих и социальных факторов хорошо срабатывает на старте проекта, чтобы показать, что новый сайт интересен пользователям. Когда же проект вступает в бой за позиции в ТОПе, накрутки становятся не только бесполезны, но и опасны.

Яндекс анализирует поведение посетителей и применяет к сайтам фильтр анти-ПФ. Алгоритм оценки поведения анализирует естественных пользователей и ботов, а также отличает настоящих клиентов (пришли на сайт по собственному желанию) от пользователей, выполняющих задание.

Естественным решением становится улучшение качества сайта для посетителя. Если пользователям все ясно, сайт удобен и прост, то посетители будут:

проводить на сайте больше времени

просматривать больше страниц

добавлять сайт в закладки/избранное

рекомендовать сайт другим пользователям через кнопки социальных сетей

возвращаться на сайт и конвертироваться

Почему пользовательское тестирование важно?

Поисковые системы применяют методы пользовательского тестирования для проверки новых опций, сервисов и сайтов «на прочность».

Яндекс использует лабораторию исследования интерфейсов, где проводятся модерируемые и немодерируемые тестирования новых функций, сервисов, страниц, приложений реальными пользователями. Яндекс рад видеть всех, кто хочет помочь сделать сервисы поиска лучше.

пользовательское тестирование в Яндекс

Google применяет пользовательский тест для оценки полезности и релевантности контента из выдачи по запросу. Пока что машина не способна различать тонкую грань между бесполезным, но умным и грамотным набором слов и действительно полезным и ценным для пользователя контентом. Оценки асессоров не влияют на позиции конкретного сайта, а определяют пользу проведенных изменений. Асессоры оценивают сайт по критериям, указанным в инструкциях. Инструкции в свою очередь отражают предположения Google о намерениях пользователя в выдаче.

Анализ данных из метрик (Яндекс.Метрика и Google Analytics) только покажет, что происходит, но не объяснит, почему. Можно вывести предположения, изменить сайт и снова собрать пользовательские данные. Если изменений в картине поведения не будет, значит вы не угадали.

Пользовательское тестирование предлагает не гадать, а руководствоваться ответами посетителей в оптимизации интерфейса и UX.

Виды пользовательских тестов

По организации

Модерируемое пользовательское тестирование

модерируемое пользовательское тестирование
Пользователь проходит тест под контролем модератора, который подсказывает участнику и не дает отвлекаться от поставленной цели. Полагается, что модерируемое тестирование выдает более полные и значимые результаты. Наблюдающий также оценивает мимику, жесты, позы пользователя в ходе теста, что говорит о комфорте, смущении, непонимании, раздраженности пользователя. Интерпретировать язык жестов и мимики может только квалифицированный специалист. А это добавит нолик к ценнику за проведение теста.

Модерируемый тест применяется:

  • на ранних стадиях создания проекта
  • для сложных продуктов, чтобы избежать ошибки и непонимания пользователя
  • для продуктов с повышенным уровнем секретности (продукты для внутреннего использования, новые концепты).

Недостатки модерируемого тестирования:

  • Естественное (подсознательное) поведение в корне отличается от того, как пользователь поведет себя под наблюдением постороннего человека.
  • Модератор может искусственно влиять на прохождение теста, подсказки мешают понять, насколько продукт/сайт прост и понятен посетителю. В реальной жизни пользователи изучают сайты без модераторов и подсказок. Присутствие наблюдателя компрометирует достоверность получаемых результатов.
  • Модерируемые тесты стоят дороже.

Немодерируемое пользовательское тестирование

немодерируемое пользовательское тестирование

Обеспечивают естественное взаимодействие пользователя с сайтом/приложением. Немодерируемые тесты легко провести удаленно, в отличие от контролируемых.

Преимущества немодерируемых тестов:

  • экономия времени — тест могут одновременно выполнять сотни пользователей
  • естественное взаимодействие с продуктом — удаленное тестирование оставляет пользователя в его естественном окружении, в котором ему привычнее использовать сайты и приложения

Чтобы получить максимум информации о пользователе в ходе теста, можно применять программы для записи экрана и звука, так вы получите четкую картинку (а не только ответы на вопросы) и живые комментарии пользователя.

Удаленное тестирование vs визит в офис

Во время удаленного теста участник находится в естественном окружении и ситуации, проходит тест, когда ему удобно. Не испытывает дискомфорт присутствия в новом помещении, взаимодействия с новыми людьми, использования нового, непривычного устройства для доступа в интернет (клавиатура, мышь, монитор).

Визит в офис для прохождения теста замедляет процесс и делает его дороже. Такой метод ограничивает пользовательское тестирование определенным количеством участников.

А/В тестирование

Суть А/В тестирования всем ясна. Создается две версии, на которые в равных частях распределяется трафик. Мы писали об А/В тестировании в нашем блоге.

Чтобы получить достоверный ответ пользователя, а не только зафиксировать его поведение в метриках, создается опрос на выходе пользователя с тестируемой страницы/сайта. Чтобы мотивировать пользователей ответить, предложите им плюшу — скидку или бонус к покупке, без регистраций и личных данных, просто так.

Преимущества А/В тестирования:

  • Екатерина Гладких (Яндекс) указывает, что поведение пользователя, выполняющего задание, в корне отличается от естественного, подсознательного использования сайта. Когда человек попадает на одну из версий, он не подозревает, что становится участником теста. То есть его поведение максимально естественно.
  • Позволяет опросить большое количество пользователей за короткий промежуток времени (если сайт посещаем).

Недостатки А/В тестирования:

  • не подходит для новых проектов, на которых нет трафика, либо же результаты для достоверной статистической выборки будут собираться очень долго.
  • важно правильно составить опрос после использования страницы сайта. Пользователи ленивы, отвечать на 100500 вопросов не станут. Малое количество вопросов не получит от пользователя нужную информацию.

По применяемому методу:

Тест 5 секунд — пользователю демонстрируется страница в течение 5 секунд, а затем задается ряд вопросов. Так тестируется запоминаемость дизайна, заметность элемента.

Тест кликов — проверяет простоту и понятность интерфейса и навигации для пользователя. Задания предлагают пользователю кликнуть по статическому изображению, чтобы перейти в раздел/добавить товар в корзину или убрать из корзины. Тест регистрирует клики и время на размышления.

Тесты с вопросами — пользователь изучает страницу и одновременно отвечает на вопросы. Для получения максимума информации пользователям предлагаются открытые вопросы, предполагающие ответ-размышление или объяснение, почему так, а не иначе.

Навигационные тесты — пользователь выполняет задание по нахождению определенных разделов, кнопок, товаров, категорий, страниц. Тест регистрирует, каким путем пошел пользователь, чтобы достичь указанной цели, сколько времени потратил, сколько лишних кликов сделал.

Как провести пользовательское тестирование

Хотите правду? Какой бы гайд по проведению пользовательского тестирования не попал вам в руки, все сводится к одному алгоритму:

Определить цели теста

Это должны быть простые вопросы по типу:

  • понимает ли пользователь, что предлагает сайт, за 5 секунд?
  • что отвлекает внимание пользователя?
  • удобно ли читать текст на сайте?
  • легко ли переходить из раздела в раздел, найти нужную информацию на сайте?
  • сколько времени требуется пользователю, чтобы достичь цели?

Создать тестовое задание

Чтобы получить максимальный фидбек от пользователей, в тест необходимо включить:

  • открытые вопросы — ответ на такой вопрос предполагает рассуждение, обоснование, сравнение со стороны пользователя. На такой вопрос нельзя ответить да или нет. — Какие кнопки вы считаете лишними на этой странице и почему?
  • закрытые вопросы — ответ на такой вопрос предполагает точное указание (дата, время, объект) или да/нет. — Какая страница Вам понравилась меньше всего? Вам понравился сайт?
  • вопросы с вариантами ответов — за каждым вопросом следует 2-3-5 вариантов ответов. Это позволяет распределить мнения пользователей между альтернативами, если другого не дано.

Формулируйте вопросы без подтекста. Не надо наводить пользователей на мысль.

Сравните:

Насколько новая версия страницы лучше/понятнее старой?

ИЛИ

Оцените новую и старую версии сайтов, какая из них проще для восприятия?

Соберите группу респондентов

Это самая сложная задача на этапе планирования пользовательского тестирования. Социальные сети во много помогают быстро найти, отфильтровать и связаться с нужной аудиторией (для проведения удаленных тестов).

Чтобы собрать группу для тестирования в офисе, проще обратиться в рекрутинговые агентства, привлечь друзей и знакомых из вашего города, кинуть клич через те же социальные сети. Основная проблема — большинство просто не явится на тестирование.

Проблема привлечения родственников, друзей и знакомых — они просто побоятся вас обидеть, их ответы могут быть предвзяты, основываясь на идее: если это сделал Вася, значит, это по умолчанию хорошо.

Привлечь к тестированию сотрудников — наиболее распространенное заблуждение. Почему, читайте в нашем блоге.

Важно привлечь достаточное количество участников. Полагается, что вы получили достаточно данных, когда ответы и комментарии пользователей начинают повторяться.

GetGoodRank рекомендует учитывать посещаемость сайта. Чем больше пользователей в день видят сайт, тем более дифференцирована аудитория и тем большее количество пользователей необходимо привлекать к проверке сайта.

Создать короткую инструкцию по прохождению теста для участников

Каким бы простым не было задание, все равно найдутся те, кто не справится, или кому будет не понятно, как выполнить тест, что значит термин.

Созданные инструкции и вопросы к тесту дайте на проверку сотрудникам. Лучше привлекать непрофильных сотрудников, которые меньше всего задействованы в создании и разработке продуктов, сайта/приложения (офис-менеджеры, секретари, бухгалтеры, HR’ы).

Это поможет заменить сложные термины и профессиональный сленг человеко-понятной лексикой.

Собрать и проанализировать данные

Это еще один сложный в реализации этап. Потому как вы получите лишь замечания пользователей, пожелания, количественные данные, но не прямые рекомендации.

Выводы:

Если сайт неудобен для пользователей, то даже при высокой посещаемости конверсий будет мало.

Пользовательское тестирование используют даже поисковики, чтобы понять, насколько их продукты соответствуют ожиданиям пользователей.

GetGoodRank — инструмент пользовательского тестирования сайта по критериям и факторам, влияющим на ранжирование в Яндекс и Google. Вы получаете результат с оценками сайта и конкурентов, а также инструкциями по оптимизации.

Добавить комментарий

Войти с помощью: 

Статьи по теме

средний чек
Статьи
8 способов увеличить средний чек на сайте
Чтобы сайт приносил прибыль, надо работать не только над качеством UI и UX, конверсией ...
пароль на сайте
Статьи
Пароль на сайте: как не понизить конверсию
Сайты предполагают регистрацию пользователей для сбора контактных данных, для оптимизац...