Тестирование больших языковых моделей на минимальных эмоциональных предложениях

Аннотация

На минимальных русскоязычных предложениях оценивались точность классификации эмоций восемью моделями и влияние языковой формы на их ответы. Точность Alice AI LLM и Qwen 3.5-397B-A17B при округлении составила 0,751. Наибольший macro-F1 наблюдался у Alice AI LLM (0,742). В утвердительных предложениях прошедшего времени замена точки вопросительным знаком чаще меняла метку у каждой модели, чем у аннотаторов.

Ключевые слова: языковые модели, классификация эмоций, отрицание, пунктуация, русский язык.

BibTeX
@article{IS-Mursalimov-Iaroshenko-Loukachevitch2026,
  author  = {Мурсалимов, Данил Азатович and Ярошенко, Полина Владимировна and Лукашевич, Наталья Валентиновна},
  title   = {{Тестирование больших языковых моделей на минимальных эмоциональных предложениях}},
  journal = {Интеллектуальные системы. Теория и приложения},
  year    = {2026},
  volume  = {30},
  number  = {4},
  pages   = {385--388},
}
AMSBIB
\RBibitem{IS-Mursalimov-Iaroshenko-Loukachevitch2026}
\by Д.\,А.~Мурсалимов, П.\,В.~Ярошенко, Н.\,В.~Лукашевич
\paper Тестирование больших языковых моделей на минимальных эмоциональных предложениях
\jour Интеллектуальные системы. Теория и приложения
\yr 2026
\vol 30
\issue 4
\pages 385--388
Опубликовано на условиях лицензии Creative Commons Attribution 4.0 International (CC BY 4.0)

← К номеру журнала

× Issue cover