Гайд по Speed Dating с пользователями в онлайн-формате
Когда команде хочется больше исследовать, тестировать с пользователями больше сценариев и развивать исследовательские скиллы у продакт-менеджеров и дизайнеров, на помощь придёт регулярное тестирование гипотез в формате быстрых свиданий.
В разных компаниях это называется по-разному: Speed Dating, 1DayResearch, Designers do research, User Hour. Но смысл один: несколько дизайнеров и продактов встречаются с пользователями в формате быстрых свиданий, чтобы проверить свои решения. Так за полтора часа дизайнер может провести 6 юзабилити-тестов, а продакт — 6 мини-интервью.
Больше года назад мы вдохновились работой наших коллег-исследователей из других компаний и стали на регулярной основе практиковать Speed Dating в Дм-техе.
О преимуществах метода уже много сказано. В этой статье мы хотим детальнее поговорить именно об организации онлайн-встреч. Мы помним, как было нелегко, когда мы делали первые подходы к формату, и хотим помочь другим UX-исследователям, которые только запускают эту практику в свои процессы.
I. Выбрать сценарии для тестирования
Важно, чтобы сценарии, или кейсы, были достаточно короткими, так как сессия с одним респондентом длится не более 15 минут.
Также для такого формата нужно подобрать сценарии, которые будут релевантны для одной группы пользователей. Например, не получится протестировать сценарий онбординга для новичка и фичу для опытного пользователя. Потому что оба кейса будут тестировать одни и те же респонденты.
Мы обычно тестируем сценарии, которые релевантны для среднестатистического пользователя нашего продукта. Наверняка, в любом продукте таких много, но в e-commerce это точно хорошо работает.
В рамках одного User Hour можно протестировать до шести сценариев, но не стоит начинать подготовку, если у вас набралось меньше трёх.
II. Рассчитать время, необходимое на подготовку, и выбрать дату проведения
Мы поняли, что начинать готовиться к User Hour лучше за 2 недели до предполагаемой даты проведения. Но у каждой команды может быть свой ритм и свой тайминг.
Здесь лишь перечислим, какие этапы нужно не упустить:
- выбор сценариев,
- подготовка гайдов исследования,
- подготовка прототипов для тестирования,
- рекрут респондентов.
Вот наш таймлайн подготовки к User Hour:
III. Помочь дизайнерам и продакт-менеджерам с гипотезами и сценариями
Мы встречаемся с каждым участником User Hour, помогаем правильно сформулировать гипотезы и сформировать гайд исследования. Вместе продумываем задачи для респондентов и обсуждаем в каком виде должен быть собран прототип.
Перед самим User Hour делаем тестовые прогоны готового сценария, в которых исследователь выступает в роли респондента, а дизайнер — в роли исследователя.
Считаем, что таким образом убиваем 2 зайцев:
Во-первых, повышаем качество подготовки материалов исследования:
- исключаем грубые методологические ошибки,
- вместе обдумываем кейсы (одна голова хорошо, а две — лучше).
Во-вторых, помогаем дизайнерам и продактам развивать навык UX-исследований:
- умение проводить UX-исследования — неотъемлемая часть карт компетенций дизайнеров и продакт-менеджеров. Однако, на практике, если дизайнеры и проводят исследования, то чаще кустарными методами, далёкими от верной методологии. С помощью совместной проработки сценариев мы мягко и на практике прорабатываем навык проведения исследований. Например, обсуждаем, почему лучше не формулировать задачу неким образом и как сделать лучше, а после проведения тестирования помогаем с интерпретацией результатов.
IV. Технически подготовить респондентов, чтобы все прошло гладко
Так как формат подразумевает четкий тайминг, важно, чтобы все респонденты были технически подготовлены:
- настроили отображение касаний на своем смартфоне,
- установили необходимые для работы приложения,
- умели включать звук и видео в зуме,
- знали, как поделиться экраном,
- имели стабильный интернет.
Как показала практика, только текстовой инструкции обычно мало. Поэтому перед началом User Hour мы проводим технические онлайн-встречи с респондентами, на которых проверяем, что всё настроено и установлено. Если нет, помогаем настроить устройства.
В нашей UX-лаборатории поиском респондентов занимается внутренний рекрутер. Если в вашей компании этим занимается агентство, договоритесь с ним об обязательных технических звонках.
V. Найти пару запасных респондентов, на случай «отвалов»
Нередко респонденты отказываются от участия в исследовании в последний момент. Иногда просто не приходят и не выходят на связь.
Но в данном случае людей будет ждать целая команда дизайнеров и продактов, и важно, чтобы нужное количество респондентов было гарантировано.
Поэтому, помимо основных респондентов, мы приглашаем запасных.
Запасным респондентам предлагаем половину вознаграждения только за то, что во время исследования они будут на связи. Если кто-то из основных респондентов внезапно не сможет участвовать, мы можем быстро заменить его запасным.
Как правило, двух запасных респондентов достаточно.
VI. Подготовить подсказку по «рассадке»
Для успешного проведения User Hour нужно подготовить план перемещения участников по комнатам.
Основное правило такое: респонденты всегда остаются в одних залах, а участники команды перемещаются ведущим из зала в зал.
У нас достаточно часто дизайнеры тестируют свои решения в паре с продакт-менеджером, тогда перемещать их из зала в зал будем вдвоем.
Если мы набрали шесть кейсов для тестирования, то все временные слоты респондентов будут заняты. Если же с нашей стороны участников меньше, чем респондентов, то у респондентов появляются перерывы между сессиями.
Вот наша таблица перемещений с пятью кейсами на шесть респондентов:
В верхней строке указаны номера комнат и респонденты, в левой колонке — время начала встречи в комнате, в ячейках — план перемещений участников.
VII. Включить комнаты в зуме перед стартом User Hour
Теперь начинается самое интересное — а как организовать быстрые свидания в зуме? Ведь если вспомнить офлайн-формат быстрых свиданий, то там пары сидят за столиками и один из пары регулярно перемещается к столику следующего партнера.
В зуме это реализуется при помощи сессионных залов.
Перед стартом User Hour нужно включить сессионные залы в настройках Zoom.
Для этого откройте Zoom в браузере, перейдите в «Настройки», выберите «Конференция» и найдите пункт «На конференции (расширенные)».
Активируйте переключатель «Сессионный зал - Конференции» (Breakout room - Meetings).
Теперь при входе в конференцию Zoom в нижней панели инструментов будет доступна опция «Сессионные залы».
VIII. Провести вводную часть и проверить настройки
Теперь мы готовы начинать встречу. Для начала собираемся все вместе в одной конференции Zoom — респонденты, участники команды и UX-исследователь, который выступает здесь в роли ведущего-модератора.
Около получаса мы тратим на знакомство с респондентами, объяснение формата, техническую проверку, настраиваем участников на исследование и «топим лед».
В рамках технической проверки уточняем, все ли респонденты:
- поняли как включать звук,
- настроили отображение касаний по экрану смартфона,
- умеют делиться экраном в зуме,
- могут открывать ссылки на прототип из чата зума.
В это же время можно понять, что кто-то из респондентов не подключился, и оперативно заменить его на запасного.
Здесь же важно проверить, что у членов команды есть разрешение на запись локальных файлов. Это нужно, чтобы каждый записал свою часть исследования на свой компьютер, иначе не будет возможности сохранить видеозаписи.
Зайдите в пункт «Участники» в нижней панели Zoom и наведите курсор на участника, которому хотите дать права. Нажмите «Дополнительно» и далее — «Разрешить запись локальных файлов».
IX. Распределить участников по комнатам
Когда всё настроено, можно перемещать участников в отдельные комнаты. Для этого нажимаем «Сессионные залы» в нижней панели Zoom и настраиваем их в открывшемся окне.
Создаем шесть сессионных залов (по количеству респондентов), выбираем опцию «Назначать вручную» и жмём «Создать».
Назначаем комнаты участникам в соответствии с подготовленной ранее таблицей распределения и открываем залы. В каждый зал назначаются респондент и участники команды из первой строки:
Наводим курсор на зал в окне «Сессионные залы», жмём «Назначить» и выбираем респондента и участников, которых нужно переместить в эту комнату.
После того, как все распределены по комнатам, жмём «Открыть все залы».
X. Следить за таймингом и перемещать членов команды к новым респондентам
Исследователь-ведущий User Hour должен внимательно следить за таймингом и перемещать дизайнеров и продактов в новые комнаты каждые 15 минут.
Чтобы перемещение в новую комнату не было для участников неожиданностью, за 2 минуты до перемещения мы пишем всем сообщение такого плана: «Через 2 минуты перемещаю в новые комнаты». А когда подходит к концу финальная сессия, пишем сообщение: «Через 2 минуты завершаем и перемещаю в основной зал».
Написать сообщение во все сессионные залы можно с помощью функции «Транслировать сообщение». Для этого нажмите на пункт «Сессионные залы» в нижней панели Zoom и в модальном окне нажмите на кнопку «Транслировать», далее — «Транслировать сообщение».
XI. Помочь команде с анализом и выводами
Когда исследование завершено, участники команды выкладывают видеозаписи на сервер, анализируют полученные данные и формулируют выводы.
Исследователь может тоже просмотреть видеозаписи, чтобы быть в контексте происходящего на исследовании.
После обязательно проводим встречу с каждым участником, чтобы обсудить результаты.
Наши дизайнеры и продакт-менеджеры подходят по-разному к анализу данных. Кто-то получает удовольствие от глубокого анализа, после чего формирует полноценный отчет. Кто-то ограничивается краткими выводами. А кто-то полностью делегирует анализ исследователю.
Мы стараемся индивидуально подойти к каждому участнику и подстраиваемся под комфортный для них формат, не ограничивая какими-то правилами. Лишь даем рекомендации и показываем примеры отчётов.
Может быть, именно в этом и кроется секрет успеха. Ведь эта активность прижилась в нашей команде и ребята с удовольствием в ней участвуют.
XII. Провести ретро для улучшения формата взаимодействия
Мы проводили ретро по итогам дважды — после самого первого User Hour и практически через год применения этой активности на практике.
На ретро мы разбиваем процесс User Hour на этапы — подготовку, проведение и анализ данных. Обсуждаем отдельно каждый из них — что было хорошо, что плохо и что нужно учесть на будущее.
Каждый раз, благодаря команде, находим точки роста и стараемся улучшать процесс для наших ребят и респондентов.
Если собрать всех вместе на встречу ретро не удается, то важно собрать письменную обратную связь от дизайнеров и продакт-менеджеров. Это поможет сделать User Hour по-настоящему полезным и комфортным.
Надеемся, что этот материал был полезен для вас и вы вдохновитесь на то, чтобы организовать Speed Dating у себя в команде. Будем рады ответить на вопросы и комментарии. Желаем успехов!