“`html
Программируемый фреймворк ИИ для создания агентов для разговоров о задачах
Практические решения и ценность
При программировании ассистентов на основе больших языковых моделей (LLM) возникают серьезные проблемы, связанные с необходимостью надежно извлекать и предоставлять точную и актуальную информацию для удовлетворения запросов пользователей. Однако типичной проблемой таких агентов является их склонность к необоснованным ответам, что называется галлюцинация.
Галлюцинация описывает процесс создания информации, не имеющей основания в реальных данных или знаниях, на которых обучена модель. Данные ответы могут быть выдуманными, ложными или обманчивыми, но модель часто представляет их с уверенностью и делает их кажущимися разумными.
Для решения этих проблем исследователи из Стэнфордского университета представили KITA – программный фреймворк для создания агентов для разговоров о задачах, способный управлять сложными взаимодействиями с пользователями. В отличие от LLM, KITA предоставляет разработчикам контроль над поведением агента через свою экспрессивную спецификацию – KITA Worksheet, обеспечивая при этом надежные и обоснованные ответы.
Некоторые из ключевых особенностей KITA:
- Устойчивость к разнообразным запросам: KITA более гибок и устойчив в реальных ситуациях, так как способен обрабатывать широкий спектр пользовательских запросов.
- Интеграция с источниками знаний: KITA успешно объединяет различные источники знаний для предоставления точных и информированных ответов.
- Упрощение программирования политик: благодаря декларативной парадигме KITA Worksheet разработчики могут легко создавать и управлять сложными взаимосвязями.
Эксперименты с участием 62 человек показали, что KITA значительно превосходит GPT-4 по ряду показателей:
- Точность выполнения: улучшение на 26,1 пункта.
- Точность действий в диалоге: улучшение на 22,5 пункта.
- Процент достижения цели: увеличение на 52,4 пункта.
В заключение, KITA представляет собой стабильный, гибкий и удобный для разработчиков фреймворк для создания агентов для разговоров о задачах, преодолевающий недостатки традиционных деревьев диалогов и LLM путем предоставления точных, обоснованных ответов и облегчения простого и эффективного программирования политик с помощью уникального KITA Worksheet.
“`
