Семь причин, по которым пилоты ИИ-агентов останавливаются после демонстрации
Пилот ИИ-агента останавливается по организационным причинам чаще, чем по техническим: размытая цель, отсутствие доступа к данным, неясные критерии качества. Каждая причина видна на первой неделе, и каждая закрывается решением на стороне заказчика.
Ниже семь причин в порядке частоты. Для каждой указан ранний признак и действие, которое возвращает проект к результату.
1. Цель сформулирована как «попробовать ИИ»
Проект без измеримой цели заканчивается вместе с интересом к демонстрации. Ранний признак: на вопрос о критерии успеха звучит ответ «посмотрим, что получится». Решение: одна задача, одно подразделение, одна цифра. Например, время подготовки справки по объекту сокращается с двух часов до пятнадцати минут.
2. Данные лежат в местах, к которым нет доступа
Документы хранятся на личных дисках сотрудников, часть архива существует в бумажном виде, доступ к базе выдаёт подрядчик по заявке на две недели. Ранний признак: подключение первого источника занимает больше пяти рабочих дней. Решение: выбирать сценарий по доступности данных и параллельно запускать сбор архива в общее хранилище.
3. Критерии качества появляются после запуска
Оценка ответов превращается в спор о вкусе: одному руководителю ответ кажется полным, другому коротким. Ранний признак: отсутствие списка проверочных вопросов. Решение: 30–50 реальных запросов с эталонными ответами, собранные до старта, и фиксация доли верных ответов на каждой итерации.
4. Служба безопасности подключается в конце
Готовое решение сталкивается с требованиями по контуру обработки и правам доступа, переделка занимает месяцы. Ранний признак: в проектной группе отсутствует представитель службы безопасности. Решение: согласовать контур, журналирование и модель прав на этапе выбора сценария.
5. Пилот собирают без участия будущих пользователей
Решение собирают руководители, а пользуются им специалисты, которых спросили один раз на старте. Ранний признак: запросы для проверки написаны руководителем проекта. Решение: собрать формулировки у будущих пользователей и показывать им промежуточный результат каждую неделю.
6. Объём растёт по ходу проекта
К первому сценарию добавляются соседние отделы, ещё три системы и отчётность для правления. Срок сдвигается, интерес угасает. Ранний признак: список сценариев вырос между стартовой встречей и первой демонстрацией. Решение: зафиксировать границы пилота письменно и вести отдельный список задач для следующего этапа.
7. Результат остаётся без владельца
Пилот завершён, показатели достигнуты, дальше проект останавливается: бюджет на промышленную эксплуатацию заранее обсуждён не был. Ранний признак: заказчик проекта отсутствует на уровне бизнеса и представлен только ИТ-подразделением. Решение: назначить владельца процесса со стороны бизнеса и обсудить условия перехода к эксплуатации до старта пилота.
Проверка перед стартом занимает один час: цель с цифрой, доступ к данным, список проверочных вопросов, представитель службы безопасности, владелец процесса. Отсутствие любого пункта означает риск остановки после демонстрации.
Как выглядит рабочий график пилота
Неделя 1
Выбор сценария, подключение двух источников данных, сбор проверочных вопросов у будущих пользователей.
Неделя 2
Настройка поиска и прав доступа, первая оценка качества ответов, разбор ошибок.
Недели 3 и 4
Работа с реальными запросами сотрудников, ежедневная правка по обратной связи, замер целевого показателя и решение о промышленной эксплуатации.
Частые вопросы
- Сколько длится пилот ИИ-агента?
- Четыре недели на один сценарий при готовых доступах к данным. Задержки чаще связаны с выдачей прав к источникам.
- Сколько сценариев брать в пилот?
- Один. Второй сценарий добавляется после замера результата по первому.
- Какие показатели измерять?
- Время выполнения задачи, доля верных ответов на проверочном наборе, число обращений к коллегам за той же информацией.
- Кто нужен в проектной группе со стороны заказчика?
- Владелец процесса со стороны бизнеса, специалист по данным или ИТ, представитель службы безопасности и два или три будущих пользователя.
- За какой срок проходит пилот ИИ-агента?
- Четыре недели на один сценарий при готовых доступах к данным. Пилоты Айвы (WAIVE) идут по такому графику: подключение источников, настройка и проверочные вопросы, работа с реальными запросами сотрудников.