На сегодняшний день существует много методов UX-исследований, наряду с рекомендациями, когда их стоит использовать.
Многие методы являются перекрестными, включая операционализированные вопросы, эффективный сбор данных и извлечение максимума из того, что делают и говорят пользователи.
Ниже приведены 5 методов, которые, по нашему мнению, делают UX-исследование эффективнее и продуктивнее.
1. Используйте исследовательскую матрицу
Чтобы исследование отвечало на поставленные вопросы и завершалось принятием решения, можно использовать простую таблицу (или матрицу, потому что это звучит круче), которая совмещает вопросы исследования и средства по их достижению.
Чтобы создать матрицу исследования:
- Составьте список целей исследования и гипотез (например, с какими трудностями сталкиваются пользователи при покупке и установке вашего ПО для предприятия?)
- Расположите цели исследования, вопросы или гипотезы вверху матрицы
- Определите, как будут достигнуты цели или решены вопросы исследования. Это может включать специальные вопросы, наблюдения, задачи и комментарии без ограничений
- Убедитесь, что вы ничего не упускаете
- Уберите лишнее. Вопросы или задачи, которые не соответствуют исследованию, нужно убрать. (Вам в самом деле нужны 30 социально-демографических вопросов?)
2. Сократите неявку
К сожалению, люди не всегда являются, несмотря на обещания. Они могут быть заняты, забыть, отвлечься на что-то, и не участвовать в исследовании. Вот несколько шагов, как снизить число неявившихся участников:
- Установите контакт с участником как по телефону, так и по электронной почте
- Сообщите, что для проведения исследования специально отведено время (что без них никак не обойтись)
- Позвоните и напомните об исследовании (люди забывают)
- Дайте четкие инструкции (чтобы никого не упустить)
- Убедитесь, что участники знают, что ожидать (например, они будут использовать сайт или программу для поиска информации в интернете)
- Получите подтверждение (Получите подтверждение от участников в устной или электронной форме, чтобы вы могли на них рассчитывать)
- Пригласите больше участников. Как бы вы ни старались, у вас все равно будут участники, которые не явятся. Сократите их число, увеличив количество приглашенных участников
- Составьте плотный график. Даже несмотря на плотное расписание, у вас все равно будет свободное время. Предварительное планирование частично решает эту проблему
Почистите данные
По нашему опыту, приблизительно 10% ответов (часто диапазон составляет от 3% до 20%) в опросах и немодерируемых UX-исследованиях необходимо отфильтровать или убрать. Это обычно списанные, отвеченные на скорую руку, недостоверные ответы или вопросы, на которые участники не потрудились ответить. Все они представляет угрозу для достоверности исследования.
Простого правила по исключению участников не существует. Напротив, мы используем комбинацию следующих методов, чтобы распознать респондентов с недостоверными ответами, придерживаясь более и затем менее очевидных индикаторов. Этот процесс дает качественные действительные результаты исследований.
Респонденты, которые не соответствуют следующим требованиям, подлежат исключению из исследования.
Самые очевидные и простые методы определения
- Некачественные ответы: Участник, который дал много некачественных бессмысленных («йцук фыва») или часто повторяющихся («хорошо», «я не знаю») ответов, должен быть исключен
- Ненадлежащие ответы: Эти ответы не являются бессмыслицей, но и не непонятны (скопированные у невнимательного респондента)
- Вопросы с подвохом: Участник отвечает на вопрос с подвохом неправильно (например, выберите 3 в этом ответе). Но мы все делаем ошибки, поэтому нужно смотреть и на другие факторы перед исключением участника
- Ответы на скорую руку: Если вы предварительно проверили, сколько времени нужно на то, чтобы ответить на все вопросы, допустим, 15 минут, а респондент ответил за 2 минуты, он скорее всего дал ответы на скорую руку
Менее очевидные и более сложные методы определения
- Противоречивые ответы: Респондент соглашается с двумя противоречащими утверждениями, например «Сайт легкий в использовании» и «У меня возникли сложности при использовании сайта». Но люди делают ошибки или думают, что два утверждения не исключают друг друга. Поищите другие нарушения перед тем, как исключить участника
- Отсутствующие данные: Слишком много неотвеченных вопросов говорит о том, что этот опрос нужно выбросить, а некоторые статистические исследования требуют только полных данных
- Шаблон: Недобросовестные участники, в ответах которых прослеживается подозрительный шаблон (например, подчеркивание всех пятерок или троек или чередование цифр от пяти до одного)
- Запись экрана: Если в исследовании используется запись экрана, вы можете наблюдать, чем занимаются участники. Если они ничего не делают или сидят в соцсети, они являются кандидатами на исключение
- Специализированные вопросы: Если участники утверждают, что знакомы с фиктивными брендами и покупали продукцию, которой не существует на самом деле, или утверждают, что занимаю руководящую должность в IT-компании, но не могут ответить на базовые вопросы IT-сферы правильно, их следует исключить
Помните, что вы оцениваете людей, а не роботов, что люди устают, отвлекаются, им может стать скучно, но все они хотят добросовестно ответить на вопросы. Небольшой процент низкокачественных ответов неизбежен, даже у оплачиваемых респондентов, а цель – отделить тех, кто не старается ответить, от тех, кто немного отвлекся.
4. Составление программы исходных комментариев
Сбор неограниченных комментариев в онлайн исследовании (опросе или немодерируемом исследовании) помогает понять, что скрывается за цифрами. Мы провели эксперимент со сложными алгоритмами для парсинга полных ответов и установили, что пока нет ничего лучше, чем метод полного перебора и классифицирования комментариев. Несмотря на трудоемкость, дополнительные усилия дают представление, которое невозможно получить от автоматизированных алгоритмов. Вот процесс для составления программы и анализа полных ответов.
После быстрого просмотра неограниченных комментариев
- Отсортируйте и удалите пустые ответы и сгруппируйте схожие слова
- Сгруппируйте по темам
- Разбейте большие темы на подтемы
- Объедините темы, в которых мало комментариев в одну большую
- Посчитайте и изобразите графически. Посчитайте комментарии в каждой категории, чтобы определить частоту и изобразите графически
- Добавьте доверительный интервал. Рассчитайте распространенность среди населения, используя доверительный интервал
- Создайте переменную. Каждую тему можно перевести в переменную и использовать в статистическом анализе или перекрестной табуляции
5. Сделайте выводы из видео
С появлением удаленных тестовых платформ, таких как MUIQ, можно собрать видео сотен людей, пытающихся выполнить задачу, за короткий промежуток времени. На просмотр видео может уйти много времени. Вы скорее всего захотите потратить время по максимуму на систематическое изучение и выводы. Вот процесс, которого мы придерживаемся:
- Начните с рандомного (или псевдо-рандомного) образца видео. Просто не придерживайтесь никакой последовательности
- Запишите данные участника и задание. Вам потребуется эта информация позже
- Ищите признаки проблемы. Ошибки и сомнения – признаки проблем с интерфейсом
- Определите проблему. Что в интерфейсе вызывает проблему?
- Определите причину. Что в интерфейсе вызывает проблему?
- Повторите со следующим участником. Ищите шаблоны
- Установите частоту. Оцените распространенность проблемы
- Включите дополнительные выводы. Включите серьезность проблемы (поверхностная или глубокая), глобальное или местное влияние (влияет на одну страницу приложения или на все) и интервалы доверия (верхнюю и нижнюю границу влияния)
Источник: 5 TECHNIQUES TO MAKE YOUR UX RESEARCH MORE EFFECTIVE
