Как составлять вопросы опроса клиентов

Утро понедельника, сервисная компания на сорок человек открывает результаты квартального опроса клиентов. На плитке дашборда 4,3 из 5, кварталом раньше было 4,2. Никто в комнате не может сказать, что означает это движение. Маркетолог называет это улучшением, руководитель по работе с клиентами напоминает, что в том же месяце два клиента не продлили договор. Опрос уходит по графику уже два года, ответы копятся, и ни одно решение за это время из-за них не изменилось. Дорого обходится не время на сбор, а то, что вопросы составлены так, что причине ухода этих двух клиентов просто некуда попасть.

Составление вопросов выглядит как работа с текстом. На деле это работа с измерением, а формулировка — это настройка прибора. Дальше по порядку: когда вопрос перестаёт измерять, какое решение должно существовать до его написания, как выбирать шкалу и подписывать деления, как узнавать наводящие и двойные вопросы, как порядок сдвигает ответ, где место открытому вопросу, когда и кому отправлять опрос, кто не отвечает вовсе и как ответы превращаются в решения.

1Решение2Черновик3Тест4Триггер5Анализ6Действие

Когда вопрос перестаёт измерять?

Вопрос перестаёт измерять в тот момент, когда ответ отражает ожидания автора сильнее, чем опыт респондента. «Довольны ли вы нашим сервисом?» — хрестоматийный пример: даже недовольный клиент чаще всего скажет «да», потому что фраза звучит как стук в дверь, а отказать неудобно. На выходе получается высокая и ровная линия, которая всех успокаивает и ничего не сообщает.

Вторая поломка тише. Вопрос действительно измеряет, только измеряет бесполезное. «Как вам наш сайт?» даст честный ответ, с которым завтра утром никто ничего не сделает. Каналы сбора обратной связи и логику замкнутого цикла мы разбираем отдельно в материале о сборе обратной связи; здесь речь о самой фразе, которая по этому каналу идёт.

До формулировки: какое решение изменит этот ответ?

Рядом с каждым вопросом должна появиться строчка, написанная раньше самого вопроса: что я поменяю, получив ответ? Если ответ — «ничего», вопросу в опроснике не место. Один этот фильтр сокращает большинство анкет примерно вдвое, и сокращает ровно те места, куда никто не заглядывал. Есть и побочная выгода: короткие анкеты чаще дочитывают, поэтому данные по оставшимся вопросам приходят чище.

Работает фильтр так: прочитайте вопрос с двух концов. Допустим, все поставили максимум — что вы сделаете? Допустим, все поставили минимум — что вы сделаете? Если оба ответа совпадают или оба сводятся к «соберём совещание», вопрос решений не производит. Та же дисциплина действует в продажах: в материале о вопросах для первой встречи хороший вопрос определяется так же — по тому, меняет ли ответ направление разговора.

У этого подхода есть предел, и его стоит назвать прямо. Когда вы ещё не знаете, чего именно не знаете, писать вопросы от решения бесполезно. Если вы впервые продаёте новую услугу, вы и вопросов ещё не знаете. На этой стадии вместо опроса проведите пятнадцатиминутные неструктурированные разговоры. Опрос измеряет уже имеющуюся гипотезу; порождать гипотезы он умеет плохо.

Качество вопроса определяется не красотой фразы, а тем, какое решение меняет полученный ответ.

Шкала: сколько делений и какие подписи?

Спор о шкале обычно начинается с «пять или семь» и начинается не с того. Решает не количество делений, а подписи. Если подписаны только края, каждый сам решает, что значит середина, и часть разброса приходит не из опыта, а из разного толкования. Полностью подписанная шкала заметно снижает этот шум.

Второе правило: не меняйте направление шкалы внутри одного опроса. Когда в одном вопросе лучшее — это минимум, а в следующем — максимум, часть респондентов этого не замечает и отмечает ровный вертикальный столбец. В данных это выглядит как стабильный клиент, а на деле это невнимательность, которая тихо стягивает среднее к центру. Чем именно расходятся NPS, CSAT и CES, мы сравниваем в материале об измерении удовлетворённости.

Шкалой вопрос не исчерпывается. У всего, что уходит в рассылку, есть шесть частей, и пропущенная часть всегда всплывает в данных.

• Основа: одно предложение об одной вещи, без оценочных прилагательных и по возможности короче десяти слов; на длинную формулировку отвечают по её второй половине.
• Временное окно: к какому событию и к какому периоду относится вопрос; без этого каждый выбирает окно сам, и одинаковые оценки измеряют разное.
• Шкала: число делений и направление, одинаковые по всему опросу.
• Подписи: слово для каждого деления; если подписаны только края, различия в середине смешиваются с различиями в толковании.
• Запасной вариант: ответ «не пользовался» или «не знаю» для тех, у кого нет опыта; он идёт отдельной строкой и не попадает в среднее.
• Обязательность: обязательный вопрос даёт ответы, но не даёт данных; оставьте таким только тот единственный, без которого анкета теряет смысл.

Нейтральная середина и вариант «не знаю»

Убрать середину — не значит заставить сомневающегося определиться; это значит сделать его выбор случайным. Настоящее различие проходит между нейтральностью и незнанием. «Ни доволен, ни недоволен» — это позиция. «Я этим не пользовался» — не позиция. Когда оба варианта падают в одну ячейку, среднее загрязняется догадками людей без опыта.

Как узнать наводящий вопрос?

Наводящие формулировки редко рождаются из умысла. Они рождаются из близости: тот, кто любит продукт, и вопрос напишет любя. Способ проверки простой: прочитайте вопрос вслух и почувствуйте, куда клонится ответ. Если внутри есть прилагательные и наречия — новый, улучшенный, быстрый, удобный, беспроблемный, — наводка почти наверняка внутри. В таблице ниже пять типовых конструкций и их исправленные версии: оценочное слово вынуто из вопроса и оставлено ответу.

Вопрос, который не измеряет	Что сломано	Рабочая версия
Понравилась ли вам новая панель?	Симпатия предполагается заранее	На каком шаге новой панели вы задержались дольше всего?
Наша команда была быстрой и вежливой?	Два разных предмета в одном ответе	Оцените скорость ответа и тон общения двумя вопросами
Как вам поддержка за прошедший год?	Слишком широкое окно памяти	Оцените, как решили ваше последнее обращение
Порекомендуете ли вы нас другу?	Ответ «да или нет» не даёт шкалы	Насколько вероятно, что вы порекомендуете сервис коллеге?
Какими функциями вы пользуетесь?	Неполный список даёт неполные данные	Какие задачи вы решали этим инструментом за последние тридцать дней?

Четвёртая строка объясняет, почему у стандартных метрик формулировка зафиксирована: сопоставимость живёт ровно до тех пор, пока текст не двигают. Логику самой метрики мы разбираем в материале о том, что такое NPS и как его считают. Как только вы переписали стандартный вопрос, чтобы он звучал красивее, вы потеряли право сравнивать его со своей же историей.

Двойные, презумптивные и слишком давние вопросы

Двойной вопрос спрашивает о двух вещах и принимает один ответ. «Установка была простой и быстрой?» не оставляет выхода тому, у кого было просто, но медленно, а вам не позволяет понять, на какую половину человек ответил. Правило простое: если в формулировке два свойства соединены союзом «и», разделите вопрос надвое.

Презумптивный вопрос считает сделанным то, чего человек мог не делать. Спросите, нашёл ли он нужное в базе знаний, — и тот, кто её ни разу не открывал, либо пропустит вопрос, либо додумает ответ. Правильная конструкция двухступенчатая: сначала отсекающий вопрос, потом детали. Опрос от этого не удлиняется, потому что ответивший «нет» деталей просто не увидит.

Память — самая коварная из трёх проблем. Люди не помнят разговор с поддержкой годичной давности; они помнят своё сегодняшнее отношение к нему. Широкие ретроспективные окна дают ответы, но эти ответы — настроение, а не измерение. Привязывайте вопрос к конкретному и недавнему событию: последняя доставка, последнее обращение, последний визит.

Порядок вопросов меняет ответ

Эффект порядка — один из самых недооценённых в опросах. Если общий вопрос об удовлетворённости стоит после детальных, человек отвечает под влиянием того, о чём только что думал. Напомнили про задержку доставки тремя вопросами подряд — и общая оценка зафиксирует повестку последних десяти секунд, а не состояние отношений. Поэтому общий вопрос идёт первым.

Та же логика касается эмоционально нагруженных пунктов. Поставьте поле для жалобы в начало — и остальная анкета наполнится его тоном. Если хотите узнать, сколько стоит вам порядок, отправьте две версии параллельно в один период и сравните: логика A/B-тестирования в текстах опросов работает так же, разница лишь в размере выборки.

Открытый вопрос: один, в конце и узкий

Открытый вопрос — самая ценная и самая растрачиваемая часть опроса. «Хотите что-то добавить?» чаще всего оставляют пустым, а если не оставляют, написанное не читают. При этом хорошо очерченный открытый вопрос приносит слова, которых не даст ни один закрытый: клиент называет проблему своим языком, использует термины, которых нет в вашем словаре, описывает сценарии, которых вы не предполагали.

Рабочая схема такая: один открытый вопрос на анкету, в самом конце, с узкой рамкой. Что заняло у вас больше всего времени или что бы вы изменили, будь у вас одна попытка. И дайте себе обещание читать. Если не назначены человек и периодичность разбора ответов, вопрос лучше не задавать вовсе.

Когда и кому отправлять опрос?

Опросов два типа, и при смешивании ломаются оба. Событийный идёт сразу после конкретного взаимодействия и спрашивает именно о нём: доставка, обращение, монтаж. Регулярный идёт по календарю и спрашивает об отношениях в целом. Первый работает на свежей памяти, второй — на накопленном впечатлении, и вопросы, позаимствованные у одного, размывают другой.

Момент отправки важнее, чем кажется. Вопрос про усилие уместен сразу после взаимодействия, потому что вы измеряете именно тогдашнее трение. А вопрос «действительно ли проблема решена» сразу задавать не стоит: то, что казалось решённым, нередко возвращается через пару дней. Какой вопрос уместен в какой точке контакта, разумнее решать вместе с картой пути клиента.

Поставьте и потолок частоты. Без правила, запрещающего второй опрос одному человеку внутри заданного окна, самые активные клиенты станут самыми опрашиваемыми и первыми перестанут отвечать. Ответы на опрос — тоже персональные данные: как хранить запись и сколько её держать, определите в рамках, описанных в материале о CRM и защите персональных данных, и сверьте свою схему с юристом.

Кто не отвечает? Самая тихая ошибка опроса

Сильнее всего результат искажает не плохая формулировка, а те, кто не отвечает вовсе. Готовность отвечать выше на краях: писать хотят и восторженные, и разъярённые. Тихое большинство, то есть основная масса отношений, чаще всего остаётся невидимым. Поэтому смотрите не на среднее, а на распределение: двугорбая картинка одним взглядом показывает то, что ровное среднее скрывало.

Вторая тихая ошибка — сам список рассылки. Если опрос уходит только на контакт из счёта, вы никогда не слышите того, кто пользуется услугой ежедневно, и расхождение между их ответами системное, а не случайное. Чтение результатов вместе с сегментацией клиентов превращает фразу «удовлетворённость упала» во фразу «удовлетворённость упала в конкретном сегменте». Первая решений не порождает, вторая порождает.

Как довести ответ до решения

Настоящая проверка опроса проходит не на экране с результатами, а в следующие две недели. Если заранее не назначено, кто и в какой срок связывается с поставившим низкую оценку, опрос производит только архив недовольства. Как устроен такой индивидуальный возврат, мы описываем в материале о восстановлении сервиса; ключевая настройка — срок реакции должен быть короче периодичности опроса.

На стороне агрегатов размечайте ответы фиксированным набором тем и не меняйте этот набор в течение года. Команды, придумывающие новые метки каждый квартал, тренда не видят — они копят несвязанные снимки. Сбор ответов у уходящих клиентов через отдельный канал — отдельная дисциплина, её устройство мы разбираем в материале об опросе при уходе клиента.

С чего начать

Быстрее всего продвинуться не написанием нового опроса, а сокращением существующего. Возьмите каждый вопрос и спросите себя, видели ли вы за последние полгода, чтобы его ответ изменил хоть одно решение; те, по которым ответить нечего, удалите. Оставшимся приведите шкалы к одному направлению, допишите подписи делений, добавьте запасной вариант там, где нужен опыт, и оставьте ровно один открытый вопрос. Перед запуском дайте анкету пятерым, но не молча: попросите каждого прочитать вопрос вслух и своими словами сказать, о чём его спрашивают.

Вопрос окупается тогда, когда ответ ложится в карточку клиента и всплывает на следующем разговоре. В Rocketly ответы можно привязать к карточке, низкие оценки автоматически превращать в задачу ответственному, а тематические метки отслеживать в отчётах от периода к периоду; создайте бесплатный аккаунт и соберите свой цикл обратной связи.