АВТОМАТИЧЕСКОЕ ВЫЯВЛЕНИЕ РЕЧЕВЫХ ИНТЕНЦИЙ C ПОМОЩЬЮ БОЛЬШОЙ ЯЗЫКОВОЙ МОДЕЛИ

Аннотация:

B статье представлены результаты исследования возможностей большой языковой модели (GPT-4) по выявлению интенциональной структуры текста. B ходе исследования решались следующие задачи: разработка методики классификации интенций терапевта в психотерапевтическом дискурсе; создание оптимальной инструкции для работы с моделью; анализ влияния полноты инструкции на точность-выявления интенций моделью; изучение соотношения точности классификации интенций моделью с частотой встречаемости интенций в тексте и согласованностью оценок экспертов. Для анализа интенциональной структуры текстов была разработана оригинальная методика классификации интенций терапевта в психотерапевтическом дискурсе. C помощью нее командой из трех экспертов, принимающих решения о наличии интенции в реплике независимо друг от друга, проводилась разметка 14 сессий на русском языке (всего 692 реплики терапевта). Задачу выявления интенций терапевта решали модели “GPT-4o-mini” и “GPT-ol”. Модель обнаруживала интенции психотерапевта, реализуемые им в конкретных речевых высказываниях (репликах). Проведенное исследование продемонстрировало значительные возможности большой языковой модели GPT-4 при решении задачи выявления речевых намерений говорящего. Достигнутая точность классификации интенций терапевта оказалась на уровне лучших показателей, полученных в работах аналогичной тематики. Показано, что совершенствование инструкции существенно увеличивает качество работы модели, а сложность поставленных перед нею задач связано точностью прогнозов. Различные критерии наличия интенций в репликах терапевта значительно изменяли точность прогнозов модели.

Авторы:

Издание: Психологический журнал
Год издания: 2025
Объем: 13с.
Дополнительная информация: 2025.-N 6.-С.66-78. Библ. 18 назв.
Просмотров: 1