Сотруднику нужно найти полис клиента, связанные обращения и ранее подготовленные предложения. Если для каждого вопроса приходится просить инженера написать запрос, ответ задерживается ещё до начала разбора. Страховая компания GEICO описала ИИ для поиска клиентских данных, который принимает обычный вопрос и возвращает сведения из корпоративной системы.

Как устроен ИИ для поиска клиентских данных

В техническом разборе GEICO от 3 ноября описана действующая первая версия помощника. Она работает со связями между людьми, полисами, обращениями и предложениями; выдача включает таблицы и CSV. Данные хранятся в графовой базе: в ней важны не только отдельные записи, но и отношения между ними. Расширение для аналитических запросов автор относит к будущей работе.

Для читателя существенна граница задачи. Найти запись по номеру и собрать все записи, связанные с человеком, — разные проверки. Совпадение фамилии ещё не доказывает связь двух документов. А запрос «покажи всё по клиенту» без уточнения может означать действующие договоры, историю обращений или оба набора сразу.

В собственном испытании полезно заранее записать, какой результат требуется сотруднику: список идентификаторов, суммы по выбранному периоду или отдельная выгрузка. Тогда проверяющий сравнит конкретные поля и строки. Сводку приятнее читать, но потерянную строку легче заметить в таблице с известным составом.

Почему 99% не заменяют новую проверку

В сравнительной таблице GEICO указывает точность собственного решения свыше 99%. Команда описывает около 200 проверочных запросов, которые использовала и для последовательного исправления правил и подсказок. Отдельная оценка на ранее не использованной выборке в публикации явно не описана. Показатель заявлен самой командой и не является независимым аудитом.

Это ограничивает перенос результата на другую компанию и новые формулировки. Если проверяющий исправлял систему после каждого знакомого вопроса, повторный успех показывает полезность доработки. Чтобы понять, что будет с новым вопросом, нужен отдельный набор, который не участвовал в исправлениях.

Для такого набора можно подготовить пары близких запросов: действующие полисы и все полисы за выбранный период; обращения одного человека и обращения других участников договора. Ожидаемые ответы должны различаться. Если помощник возвращает одинаковую таблицу, он мог пропустить условие, хотя текст ответа выглядит убедительно.

Полезно также договориться, что считается ошибкой: неверный клиент, лишняя строка, пропущенный документ или неправильный период. Одна итоговая доля правильных ответов может скрыть, что редкая ошибка затрагивает самый важный для команды тип запроса.

Agent ROI

Grok, ChatGPT, Gemini, Claude
и Perplexity — по одной подписке

Используйте эти модели
в Agent ROI.

Подписку можно оплатить в рублях.

Как проверять таблицу вместе с доступом

GEICO описывает проверку прав пользователя и маскирование персональных данных как части решения. Наличие этих механизмов не подтверждает, что любой запрос обработается правильно. Даже правильный ответ нужно проверить на соответствие правам сотрудника.

Для собственной проверки удобно разделить два критерия: верно ли найдены записи и разрешено ли показать их этому сотруднику. Это редакционная рекомендация, а не пересказ внутреннего теста GEICO.

СитуацияЧто сравнить с ожидаемым результатом
Два сотрудника с разными ролямиКакие поля доступны каждому и что должно быть скрыто
Похожие данные у разных клиентовИдентификатор найденного человека и основание связи документов
Неясный вопросУточнение вместо произвольного выбора клиента или периода
Выгрузка в CSVТе же ограничения на строки и поля, что действуют в интерфейсе

Последний пункт особенно полезен для рабочих таблиц: права нужно проверять и после экспорта. Если интерфейс скрывает поле, а выгрузка его содержит, правильность поиска не устраняет проблему. Для такого испытания используйте данные и среду, разрешённые правилами вашей организации.

С чего начать проверку на своих данных

В руководстве AWS по оценке генеративного ИИ предложено готовить эталонные вопросы и ожидаемые ответы под конкретную задачу. Это методический контекст, а не подтверждение результата GEICO.

Для первого прохода выберите один повторяющийся запрос сотрудников. Подготовьте ожидаемую таблицу, укажите дату состояния данных и роль проверяющего. Часть вопросов используйте для настройки, остальные отложите до проверки готового варианта. Так другой проверяющий сможет повторить запрос и сравнить выдачу.

Записывайте не только время ответа, но и время исправления выдачи до пригодного результата. Отдельно сохраните отказы и уточняющие вопросы: иногда уточнение предотвращает неверный выбор клиента. Перед расширением испытания разберите ошибки по типам, а способы проверки рабочих таблиц можно сверить с материалом об ИИ для анализа данных.

Больше материалов по теме — в разделе «Данные, Excel и аналитика».