Исследование: рассказы ИИ оказались интереснее человеческих

Ученые выяснили, что короткие художественные рассказы, созданные искусственным интеллектом, способны производить на читателей более сильное впечатление, чем аналогичные тексты, написанные людьми. При этом участники экспериментов практически не смогли определить, кто является автором произведения — человек или нейросеть. Результаты исследования опубликованы в научном журнале Judgment and Decision Making, выпускаемом издательством Кембриджского университета.

Как проходило исследование

Авторы работы организовали три отдельных эксперимента с участием более 2,5 тысячи добровольцев. Цель состояла в том, чтобы сравнить восприятие художественных историй, созданных человеком и искусственным интеллектом, а также проверить, способны ли читатели отличить их друг от друга.

В первом этапе исследования приняли участие около 1,6 тысячи человек. Каждый участник прочитал один короткий вымышленный рассказ. Одни получили текст, написанный человеком, другие — произведение, сгенерированное ChatGPT.

Для проверки влияния предубеждений исследователи разделили участников еще на две группы. Одним сообщили настоящего автора текста, а другим намеренно дали неверную информацию. После прочтения добровольцы оценивали качество произведения и степень его увлекательности.

Рассказы ИИ оказались интереснее

Результаты показали, что истории, созданные искусственным интеллектом, в среднем получили более высокие оценки по уровню вовлеченности. Читатели чаще называли такие рассказы более захватывающими по сравнению с текстами, написанными людьми.

Одновременно исследователи обнаружили любопытную закономерность: если участники были уверены, что произведение принадлежит человеку, они оценивали его выше, независимо от того, кто являлся настоящим автором. Если же людям сообщали, что рассказ создан нейросетью, итоговые оценки снижались.

Смогли ли читатели определить автора

Во втором и третьем экспериментах добровольцам предложили ознакомиться сразу с двумя произведениями — одним, написанным человеком, и одним, созданным искусственным интеллектом. После этого участники должны были определить авторство каждого текста.

Всего в этих этапах приняли участие 905 человек. Анализ результатов показал, что успешность угадывания практически совпадала со случайным выбором.

• в одном эксперименте правильно определить автора смогли лишь 39% участников;
• в другом точность составила 51%, что статистически не отличается от случайного результата.

Авторы исследования пришли к выводу, что убедительных доказательств способности людей reliably различать художественные тексты, созданные человеком и искусственным интеллектом, получено не было.

Почему тексты ИИ получили более высокие оценки

Исследователи называют сразу несколько возможных причин такого результата. По их мнению, произведения, созданные нейросетями, зачастую отличаются более простой структурой, легче воспринимаются при чтении и ориентированы на усредненные читательские предпочтения.

Кроме того, влияние могли оказать существующие у людей предубеждения в отношении искусственного интеллекта. Эксперимент показал парадоксальную ситуацию: многие участники заранее считали тексты ИИ менее качественными, однако после чтения нередко признавали их более интересными.

В итоге исследователи пришли к выводу, что современные системы искусственного интеллекта способны создавать художественные рассказы, которые воспринимаются читателями как минимум не хуже произведений людей, а в ряде случаев даже превосходят их по уровню увлекательности.

Ключевые результаты исследования