Baseline: что было до изменений
Baseline — исходный уровень показателя до теста или внедрения. Без него нельзя честно сказать, улучшилась ли ситуация. Если до автоматизации менеджеры тратили 18 часов в неделю на ручную работу, именно это число становится точкой сравнения.
Baseline должен быть измерен тем же способом, которым будет измеряться результат после изменений. Иначе сравниваются разные показатели.
KPI: что именно измеряем
Хороший KPI связан с целью и доступен для регулярного контроля. Для продаж это может быть конверсия в оплату, для сервиса — доля переделок, для технологии — время обработки или стоимость одного результата.
Не стоит делать KPI из любого доступного числа. Число должно помогать принять решение или увидеть проблему раньше денег в P&L.
Порог решения
До запуска задайте порог: какое изменение считается достаточным. Например: экономия не менее 12 часов в неделю, снижение пропущенных обращений на 30%, загрузка поста не ниже 55% или срок обработки не более 15 минут.
После теста результат сравнивают не с ожиданием, а с порогом. Это снижает соблазн объяснять неудачный тест красивыми промежуточными метриками.
Обсуждение
Комментарии пока недоступны. Если вы заметили неточность или хотите поделиться опытом, напишите редакции.