Лавка Продуктовая

Игорь Соколов. Grammarly (но доклад про Genesis Media)

Кейс 1.

Naij.com — сайт номер 1 в Нигерии после соцсетей.

Запущен в 14 году. 15 млн уникальных в месяц. 50+ людей в продукте.

Эксперимент с а/б тестом

Проблема: Путь пользователя выглядит «главная - новость - главная - новость».

На первом экране непонятно что делать (эвристическая проблема). Слишком много рекламы.

Переставили блоки местами и на первом экране видно начало новости почти без уменьшения рекламной площади. Аккуратно и элегантно.

Ожидали что показатель отказов на главной упадет и повыситься глубина просмотров.

Фактический результат: без изменений.

Что делать дальше?

Ну давайте поддержим тест ещё. Может не привыкли...

Подержали. Изменений нет.

Ну давайте увеличим долю теста.

Результат такой же.

Что дальше?

Перепроверим систему а/б тестов.

Все работает. У менеджеров есть правило: Если у вас есть старый интерфейс, который работает, который обкатан, его надо оставить. Оставили старый.

Выводы

Переоценили степень новизны пользователей. Пользователи и так знают кто мы такие.

Переоценили степень того, насколько людям нужна подсказка. Ценность того, чтобы сразу показать — падает.

Мы недооценили степень Mobile Nativity. Пользователи в Нигерии привыкли к обилию рекламы в интернете. Они привыкли проскраливать первый экран.

Кейс 2. Sphinx

Приложение в области игровых медиа

Это медийные продукты в которых есть игровая механика.

Какие цели у продуктовой команды когда выходит на новый рынок без лидера и без правил игры? Сделать продукт, который понравится. Остальное вторично.

Как такое тестировать? Нет лидера, нельзя стырить первую версию интерфейса.

Сначала делаем коридорное тестирование. Обкатывает сценарий для пользовательского теста.

Делали высокодетализированный прототип, потому что важно в этой сфере добиться эмоции. Насколько кайфово пользоваться.

Я считаю себя супер экспертом по юзабилити. Мой дизайнер тоже супер в UI. Завышенные оценки.

Ни один из 10 сценариев нормально не мог пройти коридорное тестирование.

Крайне сильно переоценили крутость своих решений. 2 месяца, прототипы, дизайн мышление, эмпатия.

Большие выводы

1. Бренд и положение на рынке очень сильно влияет на то, как вы рассматриваете свои решения. Эвристики разбиваются об то, что новые пользователи уже не новые.

2. На разных гео огромная разница в пользовательском опыте взаимодействия в интерфейсах.

3. Пользовательское ux тестирование стоит дешевле а/б тестирования. Прототип в продукте стоит дороже чем дизайнерский прототип

4. Мы все плохо угадываем как поведут себя пользователи