Взвешенная оценка оператора: как выбрать веса и посчитать балл

Короткий ответ

Во взвешенной оценке оператора влияние каждого критерия или раздела на общий балл определяется его значимостью для клиента, бизнеса и риска. Пропущенное приветствие и неверно названная клиенту цена не равноценны, а форма с равными весами считает их одинаково. Выбор весов — лишь половина работы: заранее нужно записать и знаменатель (на что делится балл), и то, как исключаются критерии «неприменимо», и как показывается охват оценки.

Почему равные веса вводят в заблуждение

Возьмём форму из десяти критериев по 10% каждый и два иллюстративных звонка. В звонке C оператор пропустил приветствие и представление, остальное верно. В звонке D всё верно, кроме того, что клиенту назвали старую цену. При равных весах C получает 8/10 = 80%, а D — 9/10 = 90%. Звонок с неверной ценой выглядит лучше.

Если руководитель по такому рейтингу поговорит с оператором из звонка C, он упустит настоящий риск — неверное обязательство перед клиентом. Веса нужны именно для исправления этого искажения.

Как выбирать веса

1. 1Ранжируйте влияниеДля каждого раздела спросите: если это не сделано, что теряется для клиента, выручки или юридического риска? Сначала ранжируйте словами, без цифр.
2. 2Используйте мало уровнейТрёх-четырёх уровней веса достаточно (например 10, 20, 25, 35). Цифры вроде 37% или 13% создают видимость точности, но обосновать их нельзя.
3. 3Сделайте сумму 100Веса разделов в сумме дают 100; внутри раздела критерии могут делить вес поровну.
4. 4Проверьте на сценарияхПосчитайте несколько звонков, которые вы заранее считаете «плохими» и «хорошими». Если результат противоречит вашему суждению, сначала проверьте критерий, а не вес.
5. 5Зафиксируйте версиюИзменение весов — новая версия формы; со старыми баллами напрямую не сравнивается.

Иллюстративная форма и правило расчёта

Пример формы — пять разделов по два критерия. Веса: начало 10, понимание потребности 25, точность ответа 35, соблюдение процесса 20, завершение 10 — всего 100.

• Для каждого критерия: «да» = 1, «частично» = 0,5, «нет» = 0
• Результат раздела = среднее по критериям × вес раздела
• Критерий «неприменимо» исключается и из числителя, и из знаменателя; если неприменим весь раздел, из знаменателя уходит и его вес
• Итоговый балл = набранный вес ÷ оценённый вес × 100
• Оценённый вес показывается отдельно — это охват оценки

Пошаговый расчёт

Звонок A (применимы все критерии): начало 2/2 «да»; потребность — одно «да», одно «нет»; точность — одно «да», одно «частично»; процесс 2/2 «да»; завершение — одно «да», одно «нет».

1. 1Начало(1 + 1) ÷ 2 = 1,0 × 10 = 10
2. 2Потребность(1 + 0) ÷ 2 = 0,5 × 25 = 12,5
3. 3Точность(1 + 0,5) ÷ 2 = 0,75 × 35 = 26,25
4. 4Процесс(1 + 1) ÷ 2 = 1,0 × 20 = 20
5. 5Завершение(1 + 0) ÷ 2 = 0,5 × 10 = 5
6. 6Итого10 + 12,5 + 26,25 + 20 + 5 = 73,75 — знаменатель 100, охват 100%

Звонок B такой же, но в этом типе звонков подтверждение личности и обязательное раскрытие не требуются — раздел процесса «неприменим». Набранный вес 10 + 12,5 + 26,25 + 5 = 53,75, оценённый — 80. Балл: 53,75 ÷ 80 × 100 ≈ 67,2.

Во взвешенном расчёте звонок C получает 90, а D — 82,5: рейтинг исправлен. Но D всё ещё выглядит высоко. Это показывает предел весов: серьёзное нарушение одними весами не поймать, для него нужно отдельное правило критической ошибки.

Показывайте результаты разделов, а не только итог

Взвешенный итог удобен для сравнения, но оператора ничему не учит. Балл 73,75 у звонка A говорит «средне»; результаты разделов говорят другое: начало и процесс полностью, точность 75%, потребность и завершение 50%. Разговор с оператором строится на этих двух слабых разделах.

Поэтому держите в отчёте три слоя: итоговый балл (для рейтинга), проценты по разделам (для темы обучения) и статусы критериев с доказательствами (для самого разговора). То же разделение полезно для среднего оператора за месяц: оно может быть 80, но если раздел «точность ответа» стабильно ниже 60, это самое важное, что скрывают веса.

Пограничные случаи

• Все критерии «неприменимо» — балл не рассчитывается; звонок отмечается как «не оценён», а не как 0 или 100
• Охват ниже порога компании — балл показывается с пометкой «ограниченный охват» и не входит в среднее оператора
• Не хватает доказательств (качество звука, говорящий не определён) — статус «невозможно оценить», а не «нет»; исключается из расчёта и считается отдельно
• Обратный вопрос («пришлось ли клиенту повторять») — переворачивается до расчёта, чтобы «да» всегда было хорошим результатом
• Критическая ошибка — обрабатывается отдельным правилом, независимо от взвешенного расчёта

Ограничения

Веса — это решение, а не истина. Чужие веса или пример формулы поставщика не отразят ваш риск. Как только веса меняются, баллы напрямую не сравниваются с прошлым периодом. И никакая система весов не делает балл единственным основанием для решения об операторе — она лишь показывает, на какой звонок и критерий смотреть.

Балл в Vexvon Audio Analyzer

Vexvon Audio Analyzer даёт каждому шагу статус «выполнено», «частично», «пропущено» или «неприменимо» и рассчитывает балл 0–100 из этих статусов; «неприменимо» никогда не засчитывается против оператора. Назначать критериям отдельные веса продукт сегодня не позволяет — если вам нужен взвешенный расчёт, как выше, считайте его по статусам шагов в своём отчёте.

О содержании формы — в материале оценочный лист оператора, о формулировке критериев — в материале что такое AI-анализ звонков.

Первый шаг

Ранжируйте разделы своей формы по риску словами, выберите три-четыре уровня веса и посчитайте пять звонков прошлого месяца и с равными весами, и со взвешенными. Если рейтинг меняется, веса работают. Другие материалы — в рубрике оценка операторов; чтобы выстроить расчёт вместе, свяжитесь с нами.

Продолжение темы: неприменимо в оценке звонков, критические ошибки оператора.