Экономическая модель должна сравнивать текущий процесс, обычную автоматизацию и ИИ-сценарий на одинаковом объёме операций и одинаковом горизонте.
Сначала посчитайте текущий процесс
Нужна базовая линия: сколько операций выполняется, сколько времени занимает каждая, сколько стоит час участников, какова доля повторной работы и цена пропущенной ошибки.
Без этой базы невозможно отличить реальный эффект от субъективного ощущения, что система стала «быстрее».
- Количество операций за период
- Среднее время обработки
- Стоимость рабочего времени
- Доля ошибок и возвратов
- Потерянная выручка или SLA
Разделите эффект на четыре категории
Экономия времени — только одна часть. Дополнительно учитываются снижение ошибок, рост пропускной способности, ускорение выручки и снижение риска.
Каждая категория должна иметь формулу и источник данных. Нельзя одновременно засчитать освобождённые часы как экономию фонда оплаты и как дополнительную выручку без проверки доступной загрузки.
- Снижение трудозатрат
- Снижение ошибок
- Дополнительная пропускная способность
- Снижение риска и потерь
Учтите полную стоимость владения
В TCO входят аудит, разработка, интеграции, инфраструктура, лицензии, модельные вызовы, подготовка данных, тестирование, мониторинг, поддержка и переобучение пользователей.
Для LLM отдельно закладываются повторные вызовы, рост контекста, ручная проверка, хранение журналов и резервный сценарий при недоступности модели.
Посчитайте стоимость ошибки
Одинаковая точность может быть приемлемой для черновика письма и недопустимой для финансового решения. Ошибки делятся по типам и последствиям, а не сводятся в одну среднюю цифру.
Для критичных действий стоимость ложноположительного и ложноотрицательного результата считается отдельно.
- Исправимая ошибка
- Ошибка с задержкой процесса
- Финансовая или юридическая ошибка
- Утечка или нарушение доступа
Пилот должен отвечать на экономический вопрос
До старта задаются пороги: минимальное снижение времени, допустимая стоимость одной операции, предел ручной проверки и максимальная доля критичных ошибок.
Если пороги не достигнуты, пилот останавливается или меняется архитектура. Продолжение проекта не должно зависеть от впечатления от демонстрации.