Бест Сервис.Журнал · Методика

Исследование тайным покупателем: как получить данные, на которые можно опереться

Проверяйте качество исследования до запуска: сценарий, подбор исполнителей и контроль данных определяют ценность будущих решений.

Экспертиза Бест Сервис · 6 мин чтения

Аналитик сопоставляет анкету, материал визита и аудиозапись для контроля качества данных

На основании отчёта вы можете изменить обучение, пересмотреть стандарт или поставить задачу руководителю филиала. Цена ошибки здесь выше стоимости одной анкеты. Поэтому к качеству исходных наблюдений стоит предъявлять такие же требования, как к информации в управленческом отчёте.

Исследование тайным покупателем в Бест Сервис включает подготовку и контроль на каждом этапе. Мы согласуем сценарии, инструктируем проверяющих и проверяем собранные данные. Разберём, какие решения делают выводы полезными и что заказчику важно уточнить заранее.

Определите единицу наблюдения и границы вывода

Решите, что считается одной проверкой: отдельный звонок, визит, консультация конкретного сотрудника или несколько связанных обращений одного клиента. Если звонок и визит объединены в сценарий, их можно анализировать по этапам, но не следует без пояснения считать двумя независимыми клиентами.

Затем определите, о чём нужен вывод. Наблюдение о конкретном визите, вывод о точке за период и оценка сети — разные уровни. Чем шире утверждение, тем важнее охват и план распределения проверок. Нельзя переносить результат одного удобного обращения на все смены и каналы.

Распределите проверки по значимым условиям

Составьте перечень объектов и условий, которые могут влиять на обслуживание: формат точки, регион, день недели, время, загрузка, канал, тип обращения. Необязательно одинаково подробно охватывать всё. Выбор зависит от исследовательского вопроса, но он должен быть явным.

Например, если нужно понять работу сети в обычном режиме, визиты только в часы минимальной нагрузки дадут неполную картину. Если задача — проверить сложный сценарий, его результаты полезно показывать отдельно от простых консультаций.

Пример распределения визитов

Для сети из 12 точек можно рассмотреть схему из четырёх визитов на точку с распределением по будням, выходным и периодам нагрузки — всего 48 визитов. Такая схема задаёт охват условий, но не гарантирует статистическую точность и не доказывает устойчивый рейтинг сотрудников. Пригодность объёма оценивают под конкретное решение.

Если часть объектов отбиралась из-за повышенного риска, укажите это в отчёте. Среднее по такой группе не стоит выдавать за среднюю оценку всей сети. Выборка «где больше жалоб» полезна для диагностики проблем, но отвечает на свой отдельный вопрос.

Превратите оценочные слова в наблюдаемые действия

Фразы «продавец был профессионален» и «консультация прошла качественно» допускают разные трактовки. Для сопоставления лучше фиксировать действия: сотрудник уточнил задачу, объяснил различия, предложил следующий шаг.

Неоднозначный вопросБолее точная формулировкаЧто добавить
Сотрудник был внимателен?Уточнил ли сотрудник условия использования товара?Записать заданный вопрос
Быстро ли обслужили?Сколько времени прошло до начала консультации?Определить начало отсчёта
Хорошо ли ответили на возражение?Ответил ли сотрудник на названное сомнение по существу?Зафиксировать сомнение и ответ
Завершили ли продажу?Предложил ли сотрудник предусмотренный сценарием следующий шаг?Перечислить допустимые варианты

Субъективное впечатление тоже может быть полезно. Оставьте его отдельным вопросом и не подменяйте им факт выполнения стандарта. Покупателю могла понравиться беседа, хотя обязательные условия заказа так и не были объяснены.

Разведите «нет», «не применимо» и «не удалось оценить»

«Нет» означает, что действие требовалось и была возможность его наблюдать, но оно не произошло. «Не применимо» — критерий не относится к этому сценарию. «Не удалось оценить» — данных недостаточно, например разговор прервался по внешней причине.

Последний вариант нельзя автоматически превращать в положительный ответ или исключать без контроля. Иначе неполные проверки могут искусственно улучшать оценку. Для каждого статуса задайте правило: уточнение, отдельная отметка в отчёте, повторный визит или признание результата непригодным.

Статусы ответа в анкете: да, нет, не применимо и не удалось оценить
Разные причины отсутствия выполненного действия требуют разных правил обработки данных.

Согласуйте формулу до получения результатов

В простой модели выполненный пункт получает 1 балл, невыполненный — 0. Итоговая доля выполнения рассчитывается только по применимым критериям с достаточными данными. Если важность действий различается, можно использовать веса, но их значения и смысл нужно согласовать заранее.

Оценка = сумма полученных баллов / сумма максимально возможных баллов по включённым критериям × 100%

Пример расчёта: в анкете 12 равнозначных критериев. Два неприменимы, восемь выполнены, два не выполнены. Оценка — 8 / 10 × 100% = 80%. В отчёте рядом следует показать знаменатель: 10 оценённых применимых пунктов.

Отдельно договоритесь, как считать результат сети. Среднее оценок точек и доля выполнения по всем наблюдениям могут различаться, если точки проверялись неодинаковое число раз. Первый подход даёт точкам равный вес, второй сильнее учитывает точки с большим количеством наблюдений. Выбор должен соответствовать вопросу исследования.

Проверяйте исходные данные до сводного анализа

Контроль начинается с простых вопросов: тот ли адрес, время и сценарий, завершено ли обращение, заполнены ли обязательные поля. Затем проверяют смысловую согласованность: не противоречит ли комментарий выбранному ответу, подтверждают ли материалы описанный эпизод.

Попросите подрядчика выделять причины отклонения проверок и сохранять объяснения исправлений. Для заказчика полезны не только число принятых анкет, но и сведения о пропусках, повторных визитах и спорных случаях. Такая прозрачность помогает понять ограничения итоговой картины.

Сравнивайте периоды в сопоставимых условиях

Если после обучения общий балл вырос, проверьте, не менялись ли состав точек, сценарии, время визитов и формула. Иногда улучшение объясняется тем, что из анкеты убрали сложные критерии или во второй волне чаще проверяли сильные филиалы.

Сохраняйте номер версии анкеты и общий набор показателей. При изменении программы покажите старые и новые критерии отдельно. Для малых объёмов полезнее разбирать конкретные наблюдения и повторяемость проблемы, чем строить точный рейтинг по разнице в несколько баллов.

Те же требования к сопоставимости действуют при сравнении сервиса с конкурентами: сначала определите общую клиентскую задачу и критерии, затем сравнивайте наблюдения.

Как отличить убедительное наблюдение от субъективного впечатления

Сравните две записи: «продавец плохо консультировал» и «не уточнил размеры, предложил три модели без объяснения различий». Вторая позволяет проверить критерий и разобрать навык. Для исследования Бест Сервис существенны и действия, и клиентское впечатление, но в отчёте они должны отвечать на разные вопросы.

Попросите показать, как из записи проверяющего получается итоговый вывод. Есть ли описание ситуации, выполнен ли сценарий, понятен ли источник оценки? Такой разбор одного примера часто полезнее длинного перечня обещаний о качестве. Он помогает заранее договориться о том, какие данные ваша команда сможет использовать.

Пять вопросов к итоговому выводу

  1. Понятно ли, какие объекты и условия охвачены?
  2. Есть ли число наблюдений рядом с процентами?
  3. Объяснены ли пропуски и исключения?
  4. Можно ли перейти от вывода к исходным эпизодам?
  5. Соответствует ли масштаб утверждения масштабу данных?

Если ответы положительные, результат легче использовать в управлении. Следующий шаг — перевести отчёт в конкретные действия. Основу инструмента можно взять из примера анкеты тайного покупателя, адаптировав её под ваш сценарий.

Бест Сервис — от задачи к исследованию

Заложите качество результата в программу исследования

Сообщите, какие решения предстоит принять по итогам проверок. Согласуем критерии, контроль материалов и формат отчёта, который позволит обосновать эти решения.

Получить предложение по исследованию
← Все статьи журнала