Измерение результатов: считайте свою неделю, не чужой процент

volbor не публикует здесь среднюю конверсию клиентов и не обещает, что очередь станет быстрее на какую-то долю. Результат запуска — это сравнение вашей недели до и после по правилам, которые вы записали заранее. Если правила не записаны, отчёт покажет активность, а не улучшение.

Смотреть имеет смысл три вещи: у диалога есть владелец, автоматический ответ не вызвал повтор «это не то», вопрос человека не остался без следующего шага.

НачатьПодробнее
  1. 01
    Смотрят число сообщений

    бот может написать много и не закрыть вопрос. Рост ленты не равен пользе.

  2. 02
    Сравнивают с чужим кейсом

    у другой смены другой канал и другой чек. Цифра без вашей базы ничего не решает.

  3. 03
    Нет недели «до»

    включили всё сразу и не знают, сколько диалогов и раньше оставалось без ответа.

  4. 04
    Считают обещание бота фактом

    «ответ за минуту» в приветствии не становится измерением, пока вы не смотрите фактический первый ответ человека там, где бот передал диалог.

С какими проблемами сталкивается замер «на глаз»

  1. 01

    Смотрят число сообщений

    бот может написать много и не закрыть вопрос. Рост ленты не равен пользе.

  2. 02

    Сравнивают с чужим кейсом

    у другой смены другой канал и другой чек. Цифра без вашей базы ничего не решает.

  3. 03

    Нет недели «до»

    включили всё сразу и не знают, сколько диалогов и раньше оставалось без ответа.

  4. 04

    Считают обещание бота фактом

    «ответ за минуту» в приветствии не становится измерением, пока вы не смотрите фактический первый ответ человека там, где бот передал диалог.

Ключевые сценарии разбора недели

  1. 01

    1. Отметьте, что было до запуска

    Хотя бы семь дней: сколько обращений без ответа до конца дня и сколько повторов одного и того же вопроса. Это ваша база. Без неё аналитика не с чем сравнивать.

  2. 02

    2. Назначьте владельца каждому новому диалогу

    Доля диалогов, у которых к концу дня есть человек или осознанно закрытый автоматический ответ, важнее общего числа сообщений. Диалог без владельца — дыра, даже если бот что-то написал.

  3. 03

    3. Разберите повторы после бота

    Если клиент пишет снова сразу после автоматической реплики, фразу уберите или сузьте. Это качественная проверка базы, а не повод добавить ещё ответов.

  4. 04

    4. Не добавляйте канал в ту же неделю

    Иначе вы не отличите эффект приветствия от эффекта нового входа. Второй канал — после того, как три пункта выше вы можете назвать словами.

Чего эта страница не считает

Деньги, которые «принёс бот», здесь не выводятся. Если вам нужна арифметика одного примера для своей смены, посчитайте её сами: число потерянных обращений, доля, которая стала бы заказом, и ваш чек. Это пример вашей тетради, не телеметрия volbor. В продукт такую формулу не зашивайте как обещание.

Таймер срока ответа полезен, только если часы человека уже есть в плане запуска. Иначе просрочка означает «ночью никого не было», а не «инструмент медленный».

Частые вопросы

Какой отчёт открыть первым?

Тот, где видно неотвеченное и владельца. Красивый сводный график без этих двух срезов можно отложить.

Нужно ли целиться в конкретный процент?

Нет, пока нет вашей недели «до». Цель «как у рынка» без вашей базы — лозунг.

Что делать, если стало хуже?

Верните боту более узкий список ответов и оставьте человека на остальных. Не добавляйте модули, пока повтор после автоматической реплики не снизился на ваших же диалогах.

Можно ли верить цифре из рекламы другого продукта?

Нет как доказательству для вашей смены. Сравнивайте свои два отрезка с одним и тем же правилом подсчёта.

Кто смотрит итог?

Владелец очереди из плана запуска. Если итог смотрят все, его не смотрит никто.

Полезные ссылки и связанные решения

  • АналитикаЗачем нужно: увидеть неотвеченное и владельцев на ваших диалогах.
    Что будет, если не внедрить: неделя останется пересказом смены.
  • План запускаЗачем нужно: заранее назвать, что считаете успехом первой недели.
    Что будет, если не внедрить: отчёт откроют без вопроса, на который он отвечает.
  • База знанийЗачем нужно: править фразу, после которой клиент пишет снова.
    Что будет, если не внедрить: замер покажет повтор, а текст ответа останется прежним.
  • Таймеры SLAЗачем нужно: увидеть просрочку относительно часов, которые вы сами задали.
    Что будет, если не внедрить: о скорости будут спорить без общей отсечки.
  • Проектирование поддержкиЗачем нужно: отличить вопрос бота от вопроса человека, иначе оба попадут в одну цифру.
    Что будет, если не внедрить: в «отвеченные» попадут диалоги, которые клиент не считает закрытыми.
  • Поддержка как сценарийЗачем нужно: проверить, что измеряемый шаг совпадает с тем, что видит клиент.
    Что будет, если не внедрить: оптимизируют внутренний счётчик, а не ответ.