Статья
Локальный AI: что проверить на пилоте
Допустим, сотрудники каждый день ищут ответы в инструкциях и пересказывают их коллегам. Вы хотите поручить часть этой работы AI, а документы оставить внутри компании. На пилоте нужно выяснить три вещи: справляется ли модель с задачей, сколько времени занимает проверка её ответов и кто будет поддерживать решение.
Одна задача для начала
Выберите работу, результат которой можно проверить. Например, помощник ищет ответ в инструкции и показывает нужный фрагмент. Или извлекает поля из входящего документа, чтобы сотрудник сверил их с оригиналом. У каждой из этих задач понятны входные данные, результат и возможная ошибка.
Дальше разберём помощника по внутренним инструкциям. Это пример для подготовки пилота. В Avenex мы начинаем с обсуждения одной задачи и проверяем решение на реальных данных компании.
Документы и вопросы сотрудников
Соберите документы, которыми сотрудники пользуются сейчас. Рядом с ними — реальные вопросы и ответы специалиста со ссылками на нужные места. Часть примеров оставьте для проверки после настройки: так будет видно, что происходит с вопросами, которые разработчик заранее не разбирал.
В наборе должны быть и неудобные случаи. Старая инструкция рядом с новой, вопрос с недостающими деталями, документ без нужного ответа. На них проще заметить, когда помощник уверенно пишет то, чего в источнике нет.
- Обычный вопрос: ответ есть в действующей инструкции.
- Не хватает деталей: помощнику нужно уточнить вопрос.
- Ответа нет: помощник должен прямо об этом сказать.
- Документ устарел: важно увидеть, на какую версию ссылается ответ.
Что считать хорошим результатом
Договоритесь о проверке до запуска. Специалист смотрит, верен ли ответ, подтверждает ли его ссылка и сколько пришлось исправлять вручную. Отдельно отметьте ошибки, после которых ответ вообще нельзя использовать: выдуманное правило, неверный срок или ссылка на другой документ.
Сравните полный путь с привычной работой сотрудника: поиск, чтение, ответ и проверку. Быстрая генерация полезна, если на исправления не уходит всё сэкономленное время. Порог качества выбирайте под свою задачу; универсальной доли правильных ответов здесь нет.
- Вопрос и документ, по которому проверяли ответ.
- Ответ помощника и ссылка на источник.
- Что специалист исправил или отклонил.
- Время на получение ответа вместе с проверкой.
Где будут данные и кто получит доступ
Если документы должны оставаться внутри компании, запишите это условие вместе со списком разрешённых внешних соединений. Проверьте весь путь данных: загрузку документов, обработку, хранение истории и журналы ошибок. Само слово «локальный» этих вопросов не закрывает.
Уточните права доступа: какие инструкции может читать каждый сотрудник и какие ответы ему разрешено получать. На пилоте оставьте отправку писем, изменение записей и другие рабочие действия за человеком. В Avenex можно обсудить размещение внутри сети клиента и передачу решения его IT-команде.
Что решить после пилота
Посмотрите на ошибки, время проверки и стоимость дальнейшей работы. Если результат подходит, определите, кто обновляет документы, проверяет ответы после смены модели и разбирает жалобы сотрудников. Если исправлений слишком много, сузьте задачу или отложите запуск.
Итог пилота удобно записать на одной странице: что проверили, какие примеры использовали, где решение ошиблось и что решили делать дальше. Так у команды останется основание для следующего шага.
Обсудить задачу
Для первого разговора достаточно описания задачи, нескольких примеров документов, которые вы вправе передать, и ограничений по данным. Расскажите, как сотрудники делают эту работу сейчас и что хотят упростить. С этого можно начать пилот с Avenex.
Обсудить задачу с Avenex →