Демо Flow Lab, сделанное без заказчика. Компания Tallowby Freight вымышленная. Как сделано и сколько стоит

Tallowby Freight · Ассистент по регламентам

Спросите о правилах компании и получите отрывок регламента, страницу и версию.

Сотрудники спрашивают своими словами. Ассистент ищет ответ в PDF-регламентах компании и показывает найденный отрывок дословно, со ссылкой на страницу. Замененные версии он берет только для вопросов о прошлом. Если ответа в документах нет, ассистент говорит об этом прямо.

Это техническое демо. Чат на странице показывает только поиск по документам. Ответы полной цепочки с языковой моделью записаны заранее и показаны в разделе «Проверено, а не обещано».

Задать вопрос

Выберите пример или напишите вопрос своими словами.

Как это работает

Пять шагов, и каждый можно проверить отдельно. В проекте для клиента те же шаги можно подключить к SharePoint, Google Диску или общей папке.

Читает PDF

Текст читается по страницам. Код документа, версию, дату вступления в силу и статус ассистент берет из служебного блока самого документа.

Делит на разделы

Каждый раздел с нумерованным заголовком (4., 4.2) становится отдельным отрывком. У отрывка остается номер страницы, поэтому ссылка открывает нужную страницу.

Понимает слова сотрудников

Поиск понимает разговорные слова. Список таких слов составлен вручную: бензин → пробег, стащили → кража. Еще поиск сверяется с вопросами, которые модель заранее написала к отрывкам: это около тысячи примеров. Слова с опечатками он тоже узнает.

Цитирует, а не гадает

Ассистент показывает сам отрывок из документа. Если найденный отрывок плохо подходит к вопросу, ассистент сообщает, что ответ не найден.

Проверяет версию

Замененные версии ассистент берет только для вопросов о прошлом. Если правило изменилось, он показывает прежнюю формулировку с датой, когда она перестала действовать.

Ниже проверены два способа ответа: поиск без модели и вся цепочка с языковой моделью. После загрузки страницы поиск работает в вашем браузере, без запросов к серверу и без API-ключей. Он настроен осторожно. В проверке ниже он отвечает «не нашел» и на вопросы, у которых в документах есть ответ (таких несколько). В этих случаях он перечисляет, где ответ может быть. В проекте для клиента после поиска работает языковая модель: она читает пять найденных отрывков и отвечает цитатой с номером раздела.

Проверено, а не обещано

Проверка состоит из 40 вопросов, которых поиск не видел при настройке. Английские вопросы написал ИИ-ассистент в отдельном чате: он видел документы, но не код. Русские вопросы переписаны обычным разговорным русским в другом отдельном чате, тоже без доступа к коду. Поиск для русской версии не менялся до первого запуска проверки. Среди вопросов есть ловушки: темы вне документов и правила, изменившиеся между версиями. Левая колонка показывает, как отвечает поиск в вашем браузере. В правой собраны ответы языковой модели, записанные заранее: она отвечала только по пяти отрывкам, которые нашел поиск. Каждая цитата модели сверяется с документом слово в слово, и все промахи обеих колонок перечислены ниже.

Что добавляет проект для клиента

Демо показывает ту часть, от которой зависит доверие сотрудников к ответам. Все остальное добавляется в проекте для клиента.

Последние версии ваших документов

Ассистент подключается к SharePoint, Google Диску, Notion или общей папке. Когда вы загружаете новую версию документа, она заменяет старую, и переносить текст вручную не нужно.

Короткие ответы со ссылкой на источник

Языковая модель пишет два-три предложения по найденным отрывкам. Если сослаться не на что, она не отвечает.

Где сотрудники задают вопросы

Страница во внутренней сети, Slack, Teams или Telegram. Доступ по ролям: водители не видят документы только для финансового отдела.

Большие библиотеки

Когда страниц больше нескольких сотен, к поиску по словам добавляется смысловой поиск (эмбеддинги) и пересортировка лучших отрывков. Тот же набор вопросов проверяет и такой поиск, поэтому выигрыш измеряется, а не предполагается.

Сканы и таблицы

Сканы сначала проходят распознавание текста. Таблицы сохраняются построчно. В этом демо так записан лимит расходов на гостиницу в Лондоне.

Ежемесячная поддержка

Журнал вопросов сотрудников, в том числе тех, на которые в документах нет ответа. Каждый месяц к набору проверочных вопросов добавляются новые, а темы без ответа передаются владельцу документа.