Модуль 5.5 · Урок 3
Метрики адаптации
25 мин
Практика
Содержание
- Чему вы научитесь
- Три слоя метрик
- Метрики использования
- Процент активных пользователей
- Частота использования
- Разбиение по отделам
- Метрики качества
- Correct usage rate
- Completion rate
- Метрики удовлетворения
- NPS для AI-инструмента
- SUS (System Usability Scale)
- Кривая Роджерса: кто когда адаптируется
- Стратегия для каждой группы
- Dashboard: что отслеживать еженедельно
- Шаблон
- Три сценария и действия
- Ключевые выводы
5.5 /
Урок 3 из 4
Чему вы научитесь
- Измерять адаптацию AI через три слоя метрик
- Рассчитывать NPS и SUS для AI-инструментов
- Применять кривую Роджерса для планирования внедрения
- Собирать dashboard для еженедельного мониторинга
Три слоя метрик
«Что измеряется, то управляется.» Без метрик вы не знаете — работает AI-проект или нет.
flowchart TD
A["Использование<br/>Кто, как часто, для чего"] --> B["Качество<br/>Правильно ли используют,<br/>помогает ли"]
B --> C["Удовлетворение<br/>Нравится ли, рекомендуют ли,<br/>продолжат ли"]Метрики использования
Процент активных пользователей
Формула: активные пользователи за 30 дней / целевая аудитория × 100%
Целевые значения:
| Период | Target | Комментарий |
|---|---|---|
| Месяц 1–2 | 20–30% | Первопроходцы, чемпионы |
| Месяц 3–4 | 50–60% | Ранние последователи |
| Месяц 6–9 | 75–85% | Большинство |
| Месяц 12 | 90%+ | Почти все |
Частота использования
Разбивайте пользователей на группы:
- Daily (3+ раза в неделю) — AI встроился в работу
- Weekly (раз в неделю) — используют выборочно
- Monthly (пару раз в месяц) — ещё не привыкли
- Inactive — не используют
К месяцу 6: 50–60% daily, 20–30% weekly.
Разбиение по отделам
| Отдел | Target Users | Active % | Daily % | Действие |
|---|---|---|---|---|
| Sales | 50 | 72% | 45% | Лидеры — делиться опытом |
| IT | 80 | 95% | 78% | Помогают другим |
| HR | 20 | 35% | 15% | Нужна поддержка |
| Finance | 30 | 20% | 5% | Срочная работа |
Метрики качества
Correct usage rate
Из всех использований — в скольких результат был полезен?
Как измерять: опрос пользователей раз в месяц:
- «Результат был полезен, использовал как есть» — 60%
- «Полезен, но пришлось серьёзно править» — 20%
- «Бесполезен» — 20%
Целевые значения: месяц 1–2: 40–50%, месяц 6+: 75–85%.
Completion rate
Начинают использовать AI 100% → завершают запрос 85% → применяют результат 70%.
Если completion rate < 50% — плохой UX или недоверие.
Метрики удовлетворения
NPS для AI-инструмента
Net Promoter Score — один вопрос, шкала 0–10:
«Насколько вероятно, что вы порекомендуете этот AI-инструмент коллеге?»
- 9–10: Промоутеры (рекомендуют)
- 7–8: Пассивные
- 0–6: Критики
NPS = % Промоутеров − % Критиков
| NPS | Интерпретация |
|---|---|
| < 0 | Проблема: люди активно против |
| 0–20 | Нормально, есть недовольные |
| 20–50 | Хорошо: большинство довольны |
| 50+ | Отлично: люди в восторге |
SUS (System Usability Scale)
10 стандартных вопросов, шкала 1–5. Даёт оценку 0–100.
Ключевые вопросы (адаптация для AI):
- Я хотел бы использовать этот инструмент регулярно
- Инструмент излишне сложен
- Инструмент легко использовать
- Мне нужна техническая поддержка
- Функции хорошо интегрированы
Интерпретация: < 50 — борьба, 50–70 — приемлемо, > 70 — интуитивно.
Кривая Роджерса: кто когда адаптируется
flowchart LR
A["Инноваторы<br/>2.5%<br/>Месяцы 0–2"] --> B["Ранние<br/>последователи<br/>13.5%<br/>Месяцы 2–4"]
B --> C["Раннее<br/>большинство<br/>34%<br/>Месяцы 4–8"]
C --> D["Позднее<br/>большинство<br/>34%<br/>Месяцы 8–14"]
D --> E["Отстающие<br/>16%<br/>14+ месяцев"]Стратегия для каждой группы
| Группа | Стратегия | Инструменты |
|---|---|---|
| Инноваторы (2.5%) | Дать свободу, сделать чемпионами | Ранний доступ, эксперименты |
| Ранние последователи (13.5%) | Обучить и дать видимость | Кейс-стади, публичное признание |
| Раннее большинство (34%) | Quick wins, истории успеха | Демо от коллег, обучение |
| Позднее большинство (34%) | Социальное давление, гарантии | «Все уже используют», поддержка |
| Отстающие (16%) | Не тратить непропорционально | 90% adoption = успех |
Dashboard: что отслеживать еженедельно
Шаблон
| Категория | Метрика | Текущее | Цель | Тренд |
|---|---|---|---|---|
| Использование | Активные пользователи % | 55% | 75% к мес. 6 | ↑ |
| Daily users % | 30% | 50% к мес. 6 | ↑ | |
| Качество | Correct usage rate | 65% | >75% | ↑ |
| Completion rate | 72% | >70% | → | |
| Удовлетворение | NPS | +18 | +30 | ↑ |
| SUS score | 62 | >70 | ↑ | |
| Сопротивление | Support tickets | 80 | мониторинг | ↑ |
| Workarounds | средние | мониторинг | → |
Три сценария и действия
Сценарий 1: Плохой инструмент
- Низкий usage, низкий correct usage, NPS < −20
- Действие: сменить инструмент или процесс подготовки данных
Сценарий 2: Плохой change management
- Низкий usage, но те кто используют — довольны
- Действие: больше коммуникации, обучения, работы со страхами
Сценарий 3: Оба
- Всё плохо одновременно
- Действие: пауза, анализ, возможно перезапуск
Попробуйте сами
- Выберите один AI-инструмент, который вы внедряете (или планируете)
- Определите 6–8 ключевых метрик из трёх слоёв
- Установите целевые значения на 3, 6 и 12 месяцев
- Создайте простой dashboard в Google Sheets
- Определите пороги «тревоги»: при каком значении метрики вы действуете?
Ключевые выводы
- Три слоя метрик: использование → качество → удовлетворение. Смотрите на все три
- NPS — быстрый индикатор здоровья проекта. Провал на месяц 4–5 нормален
- SUS (10 вопросов) — стандартный способ измерить удобство
- Кривая Роджерса: разные стратегии для инноваторов, большинства и отстающих
- Dashboard обновлять еженедельно. Без мониторинга — деградация незаметна