Изображение: Stock-Asso, Shutterstock
В исследовании, проведенном в Университете Брока в Канаде, приняло участие 135 человек, каждому был предложено два текста примерно по 260 слов каждый: один был создан нейросетью, второй — человеком. Оба текста были написаны на одну тему: как технологии меняют сферу образования. Выяснилось, что текст, написанный человеком, был правильно определен в 63% случаев. В случае же ИИ, авторство текста было выявлено без ошибки только в 24% случаев. Другими словами, читатель обычно подразумевает, что автор — человек. Это «первый выбор».
Кроме этого исследования известны еще как минимум три исследований, в которых люди «на глазок» определяли, создан ли текст с помощью нейросети.
Так, в исследовании, где брали участие школьные учителя, причем разделенные на две группы — начинающие учителя, и опытные, начинающие учителя смогли «на глазок» правильно определить авторство нейросети в 45,1% случаев. В случае, когда автором реально был ученик, авторство человека определялось начинающими учителями правильно в 53,7% случаев.
Когда же взяли группу опытных учителей, ситуация поменялась. Авторство «живых» учеников было правильно определено в 73% случаев. Зато в случае нейросети число точных ответов было намного ниже, всего 37,8%. В целом, результат объясним, опытные учителя привыкли, что авторы работ — дети, и часто не подозревают подвоха.
Широкомасштабное исследование было проведено в Корнелльском университете. Там было взято целых 250 текстов: истории, написанные человеком и ИИ, статьи в СМИ различного авторства, а также рецепты блюд. В случае применения GPT2 для написания текстов люди «ловили» авторство ИИ в 57,9% случаев. Если же применялась GPT3, этот показатель падал до 49,9%.
Лучше всего справлялись университетские преподаватели по литературе, в случае, если эссе было написано ИИ, они точно отличали автора более чем в 70% случаев. Читайте также Ошибка в Excel может стоить компании миллионы. Как этого избежать? Банальная опечатка в данных может обойтись бизнесу очень дорого, но автоматизация систем управления способна устранить этот риск. Павел Горбачев, генеральный директор МКСКОМ, объясняет, как автоматизированные решения помогают исключить человеческий фактор, повысить точность данных и оптимизировать работу отделов компании.
Источник новости: www.it-world.ru
