Немецкие исследователи проверили способность ChatGPT-3.5 от OpenAI понимать и генерировать юмор. В ходе эксперимента нейросеть «придумала» более 1 тысячи острот, 90% которых были вариациями всего 25 шуток. Ученые пришли к выводу, что чат-бот не умеет генерировать собственный юмор, а пользуется заученными хохмами.
– Почему чучело получило награду?
– Потому что оно было выдающимся в своем поле деятельности.
– Почему помидор покраснел?
– Потому что он увидел заправку для салата.
По словам ученых, эти шутки ChatGPT любит «петросянить» чаще всего. Другие остроты не сильно отличаются по накалу юмора.
– Чтобы проверить, насколько богат выбор острот ChatGPT, мы попросили его рассказать тысячу разных шуток. Все ответы были грамматически правильными. Но абсолютное большинство можно было бы назвать вариациями лишь 25 изначальных «приколов». Нейросеть создавала новые остроты, смешивая элементы из уже известных шуток, – пишут Софи Йенцш и Кристиан Керстинг в своей статье.
Когда нейросеть попросили объяснить свой юмор, ChatGPT написал, что понимает игру слов и их двойные значения. Однако он испытывал трудности с последовательностями, которые не вписывались в заученные шаблоны, и не мог определить, когда шутка была не смешной.
– Почему учебник по математике был грустным?
– Потому что в нем было слишком много задач.
– Почему печенье попало к врачу?
– Оно чувствовало себя рассыпчатым.
В целом, Йенцш и Керстинг обнаружили, что на распознавание шуток ChatGPT сильно повлияло наличие «поверхностных характеристик» шутки, таких как структура, наличие игры слов или включение каламбуров, что показывает степень «понимания» элементов юмора нейросетью.
