Написанные людьми рассказы по-прежнему более захватывающие, чем сгенерированные искусственным интеллектом, демонстрирует работа научной сотрудницы Калифорнийского университета в Беркли Нины Бегуш. Она сравнила сотни историй людей с творчеством генеративного ИИ и выяснила, что первые пишут более содержательные и уникальные рассказы.
Исследовательница попросила нейросети и людей написать истории о человеке, который создал ИИ, а затем влюбился в него. Также участники могли написать, что в ИИ влюбился другой человек. В качестве референса Бегуш предложила древнегреческий миф о Пигмалионе.
ИИ-системы производили похожие друг на друга истории, но с небольшими изменениями. Такие рассказы были перегружены клише, отметила Бегуш. Кроме того, рассказы ИИ были полностью оторваны от какого-либо общества или культуры — не было отсылок к местности и специфике различных культур.
Персонажи ИИ были плоскими и шаблонными, также им не хватало мотивации, отмечает исследовательница. Однако новые модели создали более инклюзивные рассказы, которые включали однополые любовные интересы. Одна история содержала описание полиаморных отношений.
Истории, написанные людьми, были гораздо более разнообразными и эмоциональными. Только 7% историй людей были посвящены однополым отношениям.
Бегуш сравнила 250 историй людей с 80 рассказами ИИ, исследуя детали и общие повествовательные особенности. Человеческие истории писали участники краудсорсинговой платформы Amazon Mechanical Turk, а другие — модели OpenAI GPT-4 и GPT-3.5, а также Llama 3 70B от Meta*. Исследовательница обнаружила поразительное сходство между сгенерированными историями ChatGPT и Llama.
Люди подготовили рассказы в июне 2019 года, а ИИ-модели сгенерировали свои варианты в марте 2023 года.
Научная работа «Experimental narratives: A comparison of human crowdsourced storytelling and AI storytelling» опубликована 28 октября 2024 года в журнале Nature (DOI: 10.1057/s41599-024-03868-8).
Источник: habr.com