Словарь метрик: единые определения для всех

Понедельник, утренняя встреча руководителей. Руководитель продаж называет конверсию примерно в треть; маркетолог открывает тот же экран той же системы и говорит про десятую часть. Правы оба: первый смотрит долю выигранных квалифицированных сделок, второй — долю всех заявок с сайта, дошедших до покупки. Сорок минут уходят на спор о том, чья цифра верна, и ни минуты на вопрос повестки, который звучал как «увеличивать ли рекламный бюджет». Решение переносят на следующую неделю, где те же две цифры сталкиваются снова. Сезонное окно для кампании за это время закрывается.

Словарь метрик — это короткий документ, в котором в одном месте и в одной форме записано, что означает каждая цифра, используемая в компании. Его задача не учить терминам, а прекращать споры. Ниже сначала разбираем механику того, как один экран выдаёт две цифры, а затем по порядку: из чего складывается полное определение, как временное окно тихо портит показатель, какие решения на самом деле меняет спор о знаменателе, почему у метрики должен быть один владелец, где словарю жить, что происходит с историей при смене определения, чего стоит перестараться, как собрать словарь за две недели и по каким признакам понять, что он работает.

ОпределениеЧислительЗнаменательОкноОхватВладелец

Как один экран выдаёт две разные цифры

Расхождение цифр рождается обычно не из ошибок в данных, а из двух разных расчётов под одним именем. Точек расхождения немного, их можно пересчитать: числитель, знаменатель, временное окно, фильтр охвата и сама считаемая сущность. Стоит различаться одной из пяти, и два отчёта никогда не совпадут, при этом оба останутся технически верными. Проблема не в отчётности, а в наименовании.

Считаемая сущность — пункт, который упускают чаще всего. Если за месяц по одной компании открыли три сделки, то на вопрос «сколько клиентов мы получили» ответ будет три при подсчёте сделок и один при подсчёте компаний. Если один и тот же человек заполнил две формы, число лидов удваивается за ночь. Как это различие меняет реальную отдачу воронки, мы разбираем в материале о конверсии из лида в клиента.

Второй частый источник — фильтры. Остаются ли в выборке тестовые записи, внутренние заявки, формы, заполненные собственными сотрудниками, и отменённые заказы? Два отчёта, отвечающих на этот вопрос по-разному, дадут разные цифры даже на одном и том же запросе. Фильтр — невидимая половина определения, и почти нигде он не записан.

Третий источник обсуждают реже, а держится он упорнее: единицы и календарь. Когда сделки, закрытые в разных валютах, складывают в один итог, выбор между курсом на дату закрытия и средним за месяц делает один и тот же квартал двумя разными по величине. То же касается часовых поясов и того, с какого дня начинается неделя. Пока эти детали не вписаны в определение, никто не замечает ошибки, потому что ошибки и нет — есть два разных правила.

Что обязано содержать определение

Определить метрику — не значит записать её формулу. Формула составляет в лучшем случае половину; вторая половина отвечает на вопрос, по каким записям и за какой отрезок времени она считается. Восьми пунктов ниже достаточно, чтобы закрыть определение для спора, и пропускать любой из них нельзя.

• Название: имя должно быть уникальным; слово «конверсия» само по себе не название, а «конверсия из квалифицированной сделки в клиента» — название.
• Числитель: что именно считается — сделка, компания, человек, строка заказа?
• Знаменатель: на что делим, какие записи попадают в это множество и какие не попадают никогда?
• Временное окно: записи группируются по дате создания или по дате закрытия и на сколько дней растянуто окно?
• Охват и фильтры: тестовые записи, внутренние заявки, отмены и собственные сотрудники внутри выборки или вне её?
• Источник: из какой системы и из каких полей берётся цифра и чьи данные главнее, когда две системы противоречат друг другу?
• Владелец и свежесть: кто вправе менять определение, как часто обновляется цифра и с какой задержкой?
• Известная граница: чего эта цифра не показывает? Под каждым определением нужна строка-предупреждение.

Все восемь пунктов занимают на одну метрику шесть-семь строк. Длинное определение не читают, а непрочитанное определение всё равно что отсутствующее. Если определение не сжимается до такого объёма, дело обычно не в формулировках: слишком сложно устроена сама метрика.

Как временное окно тихо портит показатель

Время — самая забываемая и самая дорогая составляющая определения. Конверсию можно посчитать двумя способами: какая доля сделок, закрытых в этом месяце, выиграна, или какая доля сделок, открытых в этом месяце, выиграна в итоге. Первое — отчёт за период, второе — когорта. На длинном горизонте они сходятся, но в растущей компании месяцами расходятся всерьёз.

Направление расхождения тоже непостоянно. В быстрорастущей команде расчёт по периоду занижает конверсию, потому что знаменатель наполняется сделками, которые ещё не успели дозреть. В сжимающемся периоде тот же расчёт её завышает. Руководство, не знающее об этом, давит на отдел продаж ровно в те месяцы, когда он работает лучше всего. С какой точки отсчитывают метрики длительности, разбираем в материале о длине цикла сделки: от первого касания или от создания сделки — одна и та же команда выглядит быстрой или медленной.

Доля чего именно

Спор о знаменателе выглядит мелочью, а решает, какую работу вы будете делать. Два разумных прочтения одной метрики почти всегда указывают на две разные статьи бюджета. Таблица собирает пять метрик, которые сталкиваются чаще прочих, и то, что меняет каждое разделение.

Метрика	Два спорных прочтения	Что меняет разделение
Конверсия	Все заявки или квалифицированные сделки	Рекламный бюджет или обучение продавцов
Активный клиент	Покупал за 90 дней или имеет действующий договор	Видимый размер оттока
Цикл сделки	От первого касания или от создания сделки	Кому записывают время ожидания
Средний чек	Все выигрыши или без повторных заказов	Реалистичность плана по новым клиентам
Отток	По числу клиентов или по выручке	Какой сегмент стоит защищать

В каждой строке оба прочтения защитимы. Если считать отток по числу клиентов, потеря мелких выглядит тревожно; если по выручке, уход одного крупного заполняет всю картину. Как читать оба взгляда вместе, разбираем в материале о оттоке выручки и оттоке клиентов, а вопрос о том, какие расходы входят в стоимость привлечения, — в материале о стоимости привлечения клиента.

Оба определения могут быть верными, но не под одним именем

Обычный рефлекс — выбрать одно из двух конфликтующих определений и запретить второе. Чаще всего это ошибка. Маркетингу нужен широкий знаменатель, чтобы видеть отдачу канала, продажам — узкий, чтобы видеть собственную. Правильное решение не объединять, а развести по именам. Конверсия из заявки в клиента и конверсия из квалифицированной сделки в клиента — две разные метрики, и обе спокойно живут в словаре рядом. Спор порождает не наличие двух расчётов, а то, что оба втиснули под одно слово.

Метрика без записанного определения — это столько разных метрик, сколько человек её считает.

У каждой метрики должен быть один владелец

Владелец — не тот, кто чаще всех пользуется метрикой, а тот, кто вправе менять её определение. Определение без имени владельца за полгода незаметно уезжает: кто-то добавил фильтр в отчёт, кто-то расширил знаменатель, никто не заметил, и цифра медленно поменяла смысл. Владение принадлежит одному человеку: определение, отданное комитету, не обновляется никогда.

Передача владения тоже должна быть записана. Когда автор метрики уходит из компании или меняет роль, определение остаётся бесхозным и сдвигается при первой же мелкой правке. Команды, включающие владение метриками в чек-лист передачи дел, редки — и это те самые команды, у которых через год цифры означают то же самое.

Вторая задача владельца — защищать заполнение полей, на которых стоит определение. Карточка сделки с пустым полем источника тихо ломает конверсию по каналам, и по отчёту этого не увидеть. Поэтому работа над словарём идёт рука об руку с дисциплиной полей; обязательные поля, проверки и устранение дублей мы разбираем в материале о качестве данных в CRM.

Где словарю жить

Большинство словарей метрик умирают внутри красивого документа. Его пишут, рассылают, читают в первую неделю, а потом не открывают. Причина не в лени, а в расстоянии: человек, который смотрит на цифру, и человек, который читает определение, — один и тот же человек в один и тот же момент, но на разных экранах. Определение в двух кликах от цифры не читают вовсе.

Решение — перенести определение к цифре. Под каждой плиткой дашборда должно стоять определение в одну фразу, ссылка на подробности и дата последнего изменения. Как вписать это в компоновку, разбираем в материале о дизайне панели продаж, а какой график на какой вопрос отвечает — в материале о чтении отчётов CRM. Отдельный документ-словарь полезен только как источник за этими ссылками; сам по себе он не выживает.

Что происходит с историей при смене определения

Определения меняются, и должны меняться: меняется бизнес, меняются каналы, меняется продукт. Опасность не в изменении, а в его молчаливости. Стоит незаметно сузить знаменатель, и прошлые месяцы за ночь становятся лучше, а объяснить почему никто не может. Доверие к данным исчезает именно так, за один шаг.

Здоровый порядок состоит из трёх частей. Пометьте изменение датой, публикуйте старый и новый ряды рядом хотя бы один период и, если собираетесь пересчитывать историю, объявите об этом и не удаляйте прежний ряд. Как обращаться с таким швом при сравнении с собственным прошлым, разбираем в материале о внутреннем бенчмарке. Недатированная смена определения делает непригодным любое последующее чтение динамики.

Чего стоит перестараться

Словарь метрик легко превращается в самостоятельный проект. Словарь на шестьдесят определений рождается мёртвым: его не читают, не обновляют, и через полгода он становится источником неверных ответов. Граница простая: если метрика не меняет ни одного решения, её не определяют, а убирают с дашборда. Метрика без привязанного к ней решения — шум, как бы аккуратно её ни описали.

Команде из восьми-десяти человек обычно хватает восьми определений: тех цифр, которые выводят на экран на ежемесячной встрече руководителей. С ростом компании список удлиняется сам, но поводом для удлинения должен служить спор. Новое определение добавляют потому, что двое прочитали одну цифру по-разному, а не потому, что она может пригодиться позже.

Как собрать словарь за две недели

Первая неделя уходит на инвентаризацию. Откройте презентации для руководства и регулярные отчёты за последние три месяца, выпишите каждую встречающуюся там цифру и отметьте случаи, где одно имя закрывает разные расчёты. Список обычно оказывается короче ожидаемого, а число совпадений имён — выше. Стартовый набор показателей, которые считают базовыми, приведён в материале о ключевых показателях продаж.

Заодно на этом шаге задайте правило именования. Метрики одного семейства, собранные под общим префиксом, делают список читаемым по алфавиту и снимают спор о том, куда отнести новое определение. Правило может быть простым: сначала измеряемая сущность, затем измеряемый переход, в конце охват. Именно этот незаметный шаг оставляет словарь находимым через полгода.

Вторая неделя уходит на письмо, но автор не должен сидеть за столом один. Для каждого определения позовите двоих, кто этой цифрой пользуется, и закройте формулировку при них. Возражения, прозвучавшие на такой встрече, — репетиция всех возражений, которые иначе придут позже. Под каждым закрытым определением добавьте строку о том, чего цифра не показывает; со временем именно она становится самой читаемой частью словаря.

По каким признакам понять, что словарь работает

Критерий простой и безжалостный: сможет ли новый сотрудник на первой неделе воспроизвести цифру, ни у кого не спрашивая? Если да, определение полное. Если нет, недостаёт не документа, а самого определения. Второй критерий — время встреч: если минуты, уходящие на спор о верности цифры, сокращаются, словарь делает свою работу.

Третий признак — падение числа запросов на индивидуальные отчёты. Команды перестают просить собственную цифру ровно тогда, когда начинают доверять общей. Как регулярные рассылки сводок питают это доверие, разбираем в материале о запланированных и автоматических отчётах: то, что все видят одну цифру одновременно, важно почти так же, как само определение.

Схема, в которой определения стоят рядом с цифрами, фильтры зашиты в отчёт, а один и тот же показатель доходит до всех в одном виде, превращает словарь из документа в рабочую привычку. В Rocketly пользовательские отчёты, панели и запланированные сводки работают на одной модели данных: создайте бесплатный аккаунт и соберите собственные определения метрик.