CSAT: что говорят ответившие и чего мы не знаем об остальных

Начните с вопроса и единицы наблюдения

Определите, что хотите узнать: оценку конкретного визита, решение обращения или отношение клиента к компании в целом. Ответ на один вопрос не заменяет другой. Человек может быть доволен общением и недоволен результатом ремонта; объединение таких оценок скрывает предмет изменения сервиса.

Запишите точную формулировку, шкалу и правило положительного ответа до начала сбора. В учебном примере далее используются только два содержательных ответа: положительный и отрицательный. Для пятибалльной шкалы отдельно потребуется определить, какие значения входят в положительную категорию и что происходит с нейтральным ответом.

Единицей может быть визит, обращение или уникальный клиент. Если один человек совершил пять покупок и ответил пять раз, отчёт по визитам и отчёт по людям дадут разный вес его мнению. Выберите нужную единицу заранее и не меняйте её при сравнении филиалов.

Сохраните три последовательных знаменателя

Первый набор — вся заранее определённая исследуемая группа. Второй — элементы этой группы, которым действительно предложили опрос. Третий — элементы с пригодным содержательным ответом на выбранный вопрос. Эти множества должны быть связаны, но не обязаны совпадать.

Для такого процесса полезны три отдельных показателя:

• охват приглашения: приглашённые / вся исследуемая группа;
• доля ответивших среди приглашённых: ответившие / приглашённые;
• положительная оценка среди ответивших: положительные / ответившие.

Zendesk для Tickets dataset документирует аналогичные разные отношения: % Satisfaction surveyed, % Satisfaction rated и % Satisfaction score. Последний делит положительно оценённые обращения на оценённые, а не на все обращения. Это определения конкретного набора данных, не универсальное правило подсчёта уникальных клиентов. Zendesk: метрики Support.

Доставку приглашения при необходимости показывайте ещё одним состоянием. Отправка, доставка, открытие ссылки и содержательный ответ не равнозначны. Если данные о доставке недоступны, нельзя объявлять её успешной или незаметно исключать такие приглашения из отчёта.

Учебный пример: 90% положительных при 20 ответах

Все числа вымышлены. Исследуемая группа содержит 100 завершённых визитов, каждый принадлежит отдельному клиенту. Поэтому только в этом примере количество визитов совпадает с количеством людей. К единому контрольному моменту приглашены 80 клиентов; причины отсутствия приглашения у остальных 20 сохранены отдельно.

Из 80 приглашённых ответили 20: 18 положительно и двое отрицательно. Получаем:

• охват приглашения: 80 / 100 = 80%;
• доля ответивших среди приглашённых: 20 / 80 = 25%;
• доля ответивших во всей группе: 20 / 100 = 20%;
• CSAT ответивших: 18 / 20 = 90%.

Проверка состава: 18 положительных + 2 отрицательных + 60 приглашённых без ответа + 20 неприглашённых = 100. У 80 клиентов мнение по выбранному вопросу неизвестно. Эти люди не становятся отрицательно настроенными из-за молчания, но и положительный ответ им приписать нельзя.

Подпись «90% всех клиентов довольны» не поддерживается данными. Корректная подпись сообщает предмет: «90% положительных среди 20 ответивших; приглашены 80 из 100 клиентов исследуемой группы». Это позволяет увидеть и наблюдение, и ограничение его охвата.

Что означают границы 18–98%

Без дополнительных предположений можно рассмотреть два крайних заполнения неизвестных ответов. Если все 80 неизвестных оказались бы отрицательными, положительных во всей группе было бы 18 из 100, или 18%. Если все оказались бы положительными, получили бы 18 + 80 = 98 из 100, или 98%.

Интервал 18–98% — логические крайние значения для этой известной группы и бинарного вопроса. Это не доверительный интервал, не прогноз и не заявление, что крайние исходы одинаково вероятны. Он показывает, насколько мало имеющиеся ответы ограничивают вывод обо всех ста клиентах.

Нельзя выбрать середину диапазона и назвать её оценкой. Для такого вывода нужна дополнительная обоснованная модель. Также нельзя автоматически перенести 90% ответивших на неизвестные случаи: готовность отвечать может быть связана с впечатлением, каналом или доступностью контакта.

AAPOR подчёркивает, что одна response rate не определяет наличие или величину смещения из-за неответов. Важно знать исходы элементов выборки и причины отсутствия ответа. Поэтому низкий отклик требует разбора, но сам по себе не доказывает конкретную величину ошибки. AAPOR: Standard Definitions.

Разберите, где теряются сведения

Для неприглашённых выясняйте наблюдаемую причину: сбой процесса, отсутствие допустимого канала, техническая ошибка или заранее установленное ограничение. Не объясняйте всё низкой заинтересованностью клиентов. Если приглашение вообще не отправлено, проблема относится к охвату процесса, а не к поведению получателя.

У приглашённых без ответа различайте доступные технические сведения и предположения. Недоставка может быть подтверждена каналом; нежелание участвовать обычно нельзя вывести из отсутствия клика. Причина «неизвестно» лучше выдуманного объяснения, которое направит улучшения не туда.

Сравните состав ответивших и общей группы по уже разрешённым рабочим признакам, например виду услуги и точке. Если сложные обращения почти не представлены, это повод проверить приглашение и доступность вопроса. Простое перевзвешивание по известному составу не гарантирует устранения различий между ответившими и молчащими внутри каждой группы.

Зафиксируйте окно и правило изменения ответа

Для каждого отчёта нужны исследуемый период, дата среза и время, предоставленное на ответ. Вчерашние визиты имеют меньше возможностей ответить, чем визиты недельной давности. Сравнение филиалов должно учитывать одинаковое окно, иначе разница может отражать только момент выгрузки.

Допустим, после первоначального среза пришли ещё десять ответов из тех же 80 приглашённых: восемь положительных и два отрицательных. Теперь положительных 26 из 30, то есть около 86,67%; отклик среди приглашённых равен 30 / 80 = 37,5%. Группа не изменилась, изменился объём наблюдаемой информации.

Если один человек исправил прежнюю оценку, это не новый независимый голос. Задайте правило отчёта: первоначальная оценка, последняя допустимая на дату среза или отдельный анализ изменений. Сохраняйте историю, чтобы вчерашний итог можно было объяснить после сегодняшнего исправления.

Не подменяйте исследование сбором публичных отзывов

Внутренний опрос помогает понять опыт и найти проблему. Если клиент сообщает о нерешённом вопросе, для его обработки нужен согласованный путь с ответственным. Само наличие высокой общей оценки не закрывает конкретную жалобу.

Процесс публичных отзывов имеет отдельные правила. Не используйте результаты частного опроса, чтобы приглашать к публичному отзыву только довольных. Нейтральное приглашение и различие между отправкой и фактическим отзывом разобраны в руководстве по запросам отзывов.

Не превращайте небольшой самоотобранный набор оценок в автоматическое решение о сотруднике. Для рабочего разбора нужны контекст услуги, достоверные исходы и проверка причин. Опрос показывает заявленное мнение ответивших; он не доказывает, кто вызвал изменение оценки.

Данные и приёмочный чек-лист

Храните единицу исследования, основание включения, версию вопроса, приглашение, канал, доступный результат доставки, ответ и время. Ограничьте доступ к персональным комментариям. Если опрос анонимный, не обещайте точное соединение каждого ответа с CRM и явно укажите ограничения проверки повторов.

1. Исходный состав воспроизводится как 100 = 18 + 2 + 60 + 20.
2. Отдельно выводятся охват 80%, отклик 25% и CSAT 90%.
3. Повторное приглашение не увеличивает число приглашённых людей.
4. Молчание не записывается как положительная или отрицательная оценка.
5. Исправленный ответ учитывается по выбранному правилу среза.
6. Разные формулировки и шкалы не объединяются без объяснения.
7. Границы 18–98% подписаны как логические крайние значения.
8. Отчёт по визитам не переименовывается в отчёт по уникальным клиентам.

В SABSUS проверьте связь CRM и отчётов с доступными сведениями опроса. Наличие встроенной анкеты, точной доставки и такого расчёта не предполагается.

Частые вопросы

Молчание означает нейтральную оценку?

Нет. Это отсутствие наблюдаемого ответа. Нейтральная оценка является отдельным выбранным значением, если оно предусмотрено вопросом.

Низкий отклик делает CSAT бесполезным?

Он остаётся описанием ответивших и источником конкретных проблем. Ограничены выводы обо всей группе без дополнительных оснований.

Можно сравнить два филиала только по CSAT?

Сначала сопоставьте вопрос, шкалу, единицу, состав клиентов, окно и отклик. Одинаковый процент не гарантирует одинаковую полноту сведений.

Источники

• Zendesk: Metrics and attributes for Zendesk Support.
• AAPOR: Standard Definitions.

Проверено 9 октября 2026 года. Группа клиентов, проценты и крайние исходы являются учебным примером.