RAG-модель классифицирует обращения чат-бота
Дообученная языковая модель с RAG классифицирует входящие обращения по интентам и направляет их в соответствующие сценарии чат-бота. Модель развернули в production на 50% трафика для канареечного A/B-теста.
После недели работы общая метрика автоматизации не снизилась; небольшой рост по отдельным интентам не был статистически значимым. При этом модель стала чаще выбирать интент, но реже определяла его правильно.