"Смотрю и грустно как-то": о разметке нарративов об искусстве большими языковыми моделями

5 ноября с докладом «"Смотрю и грустно как-то": о разметке нарративов об искусстве большими языковыми моделями» выступила Мария Сергеева, стажер-исследователь Лаборатории языковой конвергенции, участница НУГ «Когнитивные исследования языка». Нарративы об искусстве — это рассказы зрителей о том, что именно «с ними делает» изображение. В докладе мы обсудим эксперимент с одной картиной: её описывали разные люди с различным уровнем эмоционального интеллекта. Процедура проходила в два этапа: сначала участники смотрели на картину и фиксировали своё первичное эмоциональное впечатление, затем формулировали словесное описание и повторно отмечали преобладающую эмоцию. Этот сдвиг — от мгновенного отклика к рефлексивному нарративу — принципиален: он позволяет увидеть, как язык закрепляет, уточняет или, наоборот, смещает исходное чувство. Материалы были собраны и представлены ранее Ксенией Степанец, выпускницей ОП «Филология» НИУ ВШЭ СПб. В рамках НУГ «Когнитивные исследования языка» мы провели эксперимент: нарративы были пропущены через несколько больших языковых моделей, которым предлагалось определить доминирующую эмоцию из фиксированного набора категорий: гнев, радость, удивление, грусть, страх. Мы сопоставляем метки моделей с самооценками людей до и после вербализации, чтобы понять, где машинная классификация совпадает с человеческой интуицией, а где расходится из-за особенностей повествования, интерпретационных рамок или стратегий описания. Нас интересует не столько «точность ради...