Откуда берутся сами результаты и как ветка Ульвика соседствует в анкете с силами переключения, мы разобрали в статье о jobs to be done в количественном опросе. Здесь разбираем только расчёт.
Что нужно на входе
Карта возможностей (outcome-driven innovation, ODI) строится по списку желаемых результатов, то есть строк, которые описывают, как человек меряет успех в своей задаче. У списка три требования.
- Строка начинается с глагола изменения: «сократить», «снизить», «повысить», «не допустить». «Удобное приложение» описывает атрибут, а не результат, и его нельзя оценить как изменение.
- В строке нет решения и бренда. «Сократить время оформления заявки в приложении» меряет приложение. Сменит клиент канал, и строка умрёт, хотя задача останется.
- От 8 до 20 строк. Если строк меньше восьми, индекс вырождается в обычную важность. Список проходят дважды, поэтому на двадцати строках респондент делает 40 оценок подряд, и это предел.
Результаты берутся из интервью, а не пишутся за столом. Как выглядят формулировки на примерах из знакомых категорий, мы показали в статье jobs to be done: примеры.
Два вопроса по одному списку
В анкете две батареи по одному и тому же списку, в одном и том же порядке кодов.
- Важность. «Насколько для вас важно или не важно каждое из этого, когда вы закупаете продукты на неделю? Оцените по шкале от 1 до 6, где 1 значит совсем не важно, а 6 значит очень важно».
- Достижение. «Насколько хорошо или плохо это получается у вас сейчас? Оцените по шкале от 1 до 6, где 1 значит совсем не получается, а 6 значит получается полностью».
Порядок батарей: сначала важность, потом достижение. Если сначала спросить, что сейчас плохо, респондент завысит важность именно этих строк.
Шкала 1–6, без середины. У Ульвика в оригинале пятибалльная шкала. Мы работаем с шестибалльной: нейтральная середина собирает заметную долю ответов, и доли по краям перестают различать строки. Индекс от этого не меняется по устройству, меняется только то, какие коды считаются «верхними».
Почему top-2-box, а не среднее
В индекс идут не средние баллы, а доли top-2-box: процент ответивших 5 или 6. Среднее 4,5 может получиться и когда все ответили 4–5, и когда половина поставила 6, а половина 3. Для решения это разные ситуации. Доля «очень важно» и доля «получается хорошо» читаются однозначно и складываются в индекс без оговорок.
Доли переводятся в шкалу 0–10: 84% становится 8,4. Индекс тогда лежит в диапазоне 0–20. Это не процент, и на слайд он идёт числом с одним знаком после запятой.
Формулы Excel
Допустим, ответы лежат на листе «Данные»: одна строка соответствует одному респонденту (строки 2–401), в столбцах B:I важность восьми результатов, в столбцах J:Q достижение тех же результатов в том же порядке. Расчёт ведётся на листе «ODI», одна строка на результат, в столбце A стоит номер результата от 1 до 8, в том же порядке, что столбцы данных. Формулы берут нужный столбец через INDEX по этому номеру, поэтому пара «важность и достижение» не может разъехаться. Для первого результата (строка 2):
В англоязычном Excel разделителем аргументов служит запятая, в русскоязычном точка с запятой.
Три детали, на которых чаще всего ошибаются.
База: ответившие в обеих батареях. Индекс считается построчно, и человек, который оценил важность, но бросил анкету на достижении, в расчёт не идёт. Отсюда второе условие в каждом COUNTIFS.
MAX обязателен. Если результат достигается лучше, чем он важен, разница отрицательна, и без MAX индекс опустится ниже важности. Результат, которым довольны, не даёт возможности, но и не отнимает её.
Зона считается от округлённого числа. Иначе индекс 9,97 напечатается как 10,0, а в зоне окажется «переобслужено», и клиент справедливо спросит, почему.
Для следующих результатов строка копируется вниз без правок: меняется только номер в столбце A, и INDEX(Данные!$B$2:$I$401;;$A3) сам берёт второй столбец важности (C), а INDEX(Данные!$J$2:$Q$401;;$A3) берёт второй столбец достижения (K). Пустой аргумент строки в INDEX означает «весь столбец диапазона».
Условный пример: продуктовый маркетплейс, восемь результатов
Условный пример. Задача: «закупить продукты на неделю для семьи». Опрошено 400 человек, все ответили в обеих батареях. Строки отсортированы по индексу.
Проверим верхнюю строку: 9,0 + max(9,0 − 2,8; 0) = 9,0 + 6,2 = 15,2.
Что из этого следует. Главная возможность не в скорости, а в свежести: результат важен 90% и достигается у 28%. Вторая: замены без согласования. А вот скорость привоза, которую команда такого сервиса обычно ускоряет первой, уже переобслужена: важна 72%, и 68% довольны. Ещё десять минут разницы в доставке этих людей не удержат.
Заметьте четвёртую строку. Возврат важен меньше скорости, но из-за низкого достижения его индекс выше. Именно ради таких перестановок индекс и считают: по одной батарее важности скорость стояла бы выше возврата.
Зоны карты и как их читать
Карту рисуют точечной диаграммой: по горизонтали важность, по вертикали достижение, обе в шкале 0–10. Каждая точка обозначает один результат. Чем ниже и правее точка, тем выше индекс.
Нижнюю зону на защите результатов часто обсуждают дольше верхней. Там видно, что команда уже докручивает то, что аудитория считает закрытым, и деньги можно перенести.
Чего индекс не покажет
- Почему результат недообслужен. Индекс говорит, где проблема, но не почему. Объяснение даёт качественный этап или открытый вопрос после батарей.
- Надёжность на малой базе. Строки с базой меньше 100 человек мы перечисляем отдельно и в выводы не берём: разница в пару пунктов индекса на такой базе неотличима от случайной.
- Решение за вас. Индекс 15,2 не значит, что задача решаема за разумные деньги. Карта сужает выбор, а не делает его.
Если заявленной важности нет веры (например, в списке много «гигиенических» результатов, которые все отмечают как очень важные), к тем же формулировкам добавляют MaxDiff: он заставляет выбирать и различает строки, которые шкала склеивает.
Как мы это делаем
Карту возможностей мы собираем в три шага. Список результатов берётся из интервью с покупателями, и его вы читаете и согласуете вместе с анкетой до поля; если нужна казахская версия, формулировки на казахском казахоязычные исследователи пишут как второй оригинал, чтобы «сократить» и «не допустить» значили на двух языках одно и то же. Батареи важности и достижения стоят до первого упоминания брендов. В дашборде каждая строка идёт с базой, долями, индексом и зоной, а под таблицей идёт контрольная строка с базами и список строк, которые не прошли порог в 100 человек.
Карта в дашборде открывается по срезам: например, семьи с детьми и без. Но срез показывается, только если в нём хватает людей. Ради этого выборку мы считаем от самой узкой группы, которую вы захотите сравнивать, а не от общего числа анкет. Доступ к дашборду остаётся у вас после проекта.
По теме
Обсудим ваше исследование. Расскажите, какое решение нужно принять, и мы предложим метод, выборку и сроки.