Новости

Aug 06, 2023

ИИ тоже не видят карикатуры из New Yorker • The Medical Republic

2 августа 2023 г. Обратная страница И не спрашивайте робота, как обстоят дела с едой в самолете. Корреспондент Your Back Page вырос старшим из четырех детей, родившихся в двух парах близнецов. У нас был

2 августа 2023 г.

Обратная страница

И не спрашивайте робота, как обстоят дела с едой в самолете.

Корреспондент Your Back Page вырос старшим из четырех детей, родившихся в двух парах близнецов. У нас было совершенно счастливое детство – мы никогда не ссорились и всегда ладили.

Если вы поверили последнему предложению, вы явно единственный ребенок.

Мы соревновались во всем: в спорте, в учебе, в том, кто будет сидеть на переднем сиденье… И особенно в Mario Kart, в который мы проводили много часов, играя на нашей ледяной синей Nintendo 64.

Есть вещи, в которых мы соревнуемся, будучи взрослыми, но в основном это ограничивается тем, кто получает самый большой рождественский подарок каждый год (кстати, в прошлом году именно моя сестра-близнец получила новый набор кастрюль).

Сегодня мы, люди, сталкиваемся с еще более жесткой конкуренцией, чем со стороны наших братьев и сестер или того супер надоедливого ребенка из нашего класса в школе, но это не человек. Скорее, это ИИ.

The Back Page ранее обсуждало множество случаев, когда ИИ превосходит людей: прохождение пробных осмотров у акушера-гинеколога, проявление чуткости, чтение ЭКГ и определение того, какие песни станут «хитом», а какие «провалом».

Но, похоже, американские исследователи наконец-то нашли то, в чем люди по-прежнему превосходят ИИ: быть забавными.

В рамках исследования, получившего награду за лучшую статью на 61-м ежегодном собрании Ассоциации компьютерной лингвистики в прошлом месяце в Торонто, исследователи предложили моделям искусственного интеллекта (таким как ChatGPT) и людям выполнить три задачи, основанные на конкурсе подписей к мультфильмам, организованном журналом New Yorker: подобрать подпись к мультфильму, выбрать победившую подпись и объяснить, почему победившая подпись смешна.

Исследование было построено на основе более чем 700 конкурсов субтитров, отобранных за 14-летний период. Каждый конкурс включал в себя карикатуру без подписей, работы, представленные читателями, и трех финалистов, выбранных редакцией.

Первое задание проверяло, сможет ли ИИ выбрать одну из пяти подписей, подходящую для конкретного мультфильма. Правильным ответом всегда был один из трех финалистов, выбранных редакторами, а неправильными ответами были финалисты, случайно выбранные из других изображений (то есть они, вероятно, были забавными, но не соответствовали контексту рассматриваемого мультфильма).

Последнее задание проверяло, сможет ли ИИ написать краткое объяснение того, почему подписи были забавными и подходящими для выбранного мультфильма, например, когда вам нужно объяснить шутку другу, который ее не понимает.

Исследователи протестировали два вида ИИ в каждой из трёх задач. Первым был вариант «из пикселей», при котором ИИ получал только мультфильм без подписей, тогда как во втором варианте «из описания» ИИ имел доступ только к текстовому описанию мультфильма. Это дало моделям ИИ, у которых нет встроенного компонента обработки изображений, возможность проявить свое чувство юмора (или его отсутствие).

Участники-люди гораздо лучше справились с задачей сопоставления, выбрав правильный ответ в 96% случаев, по сравнению с ИИ, где наиболее эффективная модель ИИ выбирала правильный ответ только в 62% случаев.

Еще одна победа людей: написанное человеком объяснение того, почему подпись была смешной, было предпочтительнее объяснений, сгенерированных ИИ, в соотношении два к одному. Исследователи предполагают, что ИИ неправильно интерпретировал некоторые изображения, но The Back Page не уверена, что ИИ не смотрел свысока на их виртуальные носы и не принял снисходительный тон по отношению к судейской коллегии.

Ожидается, что эти выводы будут приветствоваться Гильдией писателей Америки, которая в настоящее время бастует по поводу последствий потокового мультимедиа и использования искусственного интеллекта при создании сценариев. Гильдия хочет, чтобы ИИ использовался только как инструмент, помогающий с идеями сценариев, а не полностью заменяющий их.

Эти выводы, которые не представляют комедийные ролики ИИ в особенно лестном свете, похоже, подтверждают эту точку зрения.