Product GROWTH Designer
Ultimate Guitar
Самый популярный сервис табов и аккордов в США. Я работала в growth team основной задачей которой была быстрая проверка большого количества гипотез. Нашей целью было увеличивать ARPU за счёт увеличения количества доступов, которые оформляют пользователи.

Основные метрики
ARPU
Конверсия в доступ
Конверсия из триала в подписку
Мои челленджи
1. Мне нужно было генерировать по 10 гипотез в неделю, 3 из которых должны быть сильными. Гипотезы должны быть направлены на увеличение конверсии и ARPU. При этом нужно прорабатывать и запускать около 5 гипотез в неделю.

2. Так как нет культуры UX исследований, нужно было придумывать другие источники получения качественных знаний
Что такое креативность?
Первые нескольких месяцев работы прошли в Hard Core режиме. Я постоянно пробовала и ошибалась. Генерила много идей, но они были либо не достаточно хорошими, либо не давали роста, хотя казались логичными и удобным.

В этот момент я задумалась о том, что такое быть краетивным на самом деле. Вроде бы если ты дизайнер, то ты уже по умолчанию креативный. Но я ошибалась.

После всей боли и страданий от недостаточно качественных идей, теперь я понимаю, что креативность это отдельный навык. Прокачки и поддержание которого требует постоянного внимания.

Я изучила много разной литературы, статей и видео. Следующее две ссылки считаю самыми сильными материалами. Больше всего мне помогли именно они.

Книга: Crossfit for your brain
Фильм: Why Are We Creative? The Centipede’s Dilemma
Мои источники гипотез
  • Data
    Использовала результаты предидущих экспериментов.
    Так же анализировала, сегментировала данные, искала отклонения или тенденций в поведении пользователей. Исследовала точки падения конверсии и путей приводящих к целевым действиям.
  • Feedback
    Изучала что нам пишут пользователи в AppStore, GooglePlay и на сайте. Наблюдала за обращениями в службу поддержки и через систему вовлечения новичков.

  • Apps
    Ежедневно прокачивала насмотренность и изучала активационные механики, в особенности компаний из TOP grothw. Подробно наблюдала за их экспериментами для понимания какие механики работают или не работают у других.
  • Анализ психологии пользователей
    Более половины платящих пользователей начинающие музыканты. Я общалась с преподавателями музыки и изучала сервисы помогающие новичкам сделать первые шаги. Общалась с потенциальными пользователями нашего сервиса для выявления целей, мотивов и задач, которые они хотели бы решить через UG
  • Декомпозиция и комбинаторика
    Внимательно изучала текущие экраны, определяла текущие логические связи, как они влияют на восприятие и предлагала гипотезы основанные на композиционном изменение акцентов на экранах.
  • Потенциальный функционал
    Проверка потенциальных фич, которые сложно разрабатывать, в которые есть Вера, но нет уверенности, что их стоит делать. С помощью создания фейк доров можно проверить к ней интерес аудитории
Design process
Generation of ideas
Я обдумываю, анализирую, внимательно изучаю полученную информацию из исследований.

По моему опыту самые интересные и успешные эксперименты получаются, когда в результате исследования двух разных источников можно найти подтверждение одной и той же идеи.

В результате делаю описание которые состоит из: В какой части продукта изменение?, Что до? Что после?, Как пользователь попадает на экран?, Что менеям?, Что оставлем?, Какой будет текст?, Почему это сработает?

И делаю быстрый мокап на котором отражена главная мысль.
Обсуждение и оценка гипотез
Командный процесс обсуждения гипотез с командой в результате, которого выбираются самы сильные гипотезы по системе оценки ICE.

Так же перед оценкой гипотезы обсуждаются на логичность. Вописании гипотезы должны быть все ответы на вопросы из предидущего пункта.
Проработка гипотезы
Перед запуском гипотезы я создаю артефакт который будет объясняет мой ход мысли. Суть гипотезы должна быть понятна любому человеку, который раньше про неё никогда не слышал.

В описание входит:
Результаты исследования и источников на которых основана гипотеза. Аргументы почему гипотеза должна сработать и почему может не сработать.

На этом этапе в процессе более глубокого анализа иногда происходить переосмысление гипотезы и отказ её реализации
A/B testing
Важно правильно спланировать эксперимент. Поэтому я заранее планировала за какими метриками надо наблюдать и какой результат ожидается, аналитик помогал мне в этом. И он так же рассчитывал какое количество пользователей нам будет достаточно для эксперимента и количество дней он должен работать.

Подведение итогов
После запуска я и другие члены команды начинали следить за экспериментом. Иногда требуется дополнительная декомпозиция данных и уточнение результатов, тогда я ставлю задачу аналитику.

Если гипотеза дала хорошие результат либо принимается решение о её полной раскатке, либо запуск ещё одной итерации, если есть идеи и потенциал ещё увеличить метрику.

Если гипотеза не дала желаемый результат, то перепроверяем эксперимент и если есть идеи как можно сильно улучшить планируем следующую итерацию.

Записываю выводы и шарю результат на компанию. В выводах описан предположен о том, почему гипотеза сработала или почему нет, и что можно было бы улучшить в следующий раз.
Main user motivations
Это не про решение проблем, это про цель пользователя, его мечты и желания
As a result
34% growth ARPU
by 70+ A/B experiments

What do you really want?

+14% ARPU

Персонализация приложения
+11% ARPU
Визуальный тур
0% ARPU