Последнее исследование Пенсильванского университета: ИИ в 7 раз эффективнее людей генерирует идеи, а творческие способности GPT превосходят 99% людей!

Источник статьи: Синьчжиюань

Редактировать: Беги Люмина

Многие считают, что у искусственного интеллекта нет инновационной способности, но следующие исследования изменят этот «стереотип».

От перехода к играм до выполнения различных повторяющихся задач ИИ во многих аспектах намного превзошел человека.

Многие люди уже воображают, что в будущем ИИ освободит людей от скучной работы и позволит людям сосредоточиться на работе, которую могут выполнять только люди.

Например, эмоциональное общение с людьми или работа, требующая творчества.

Однако многие недавние исследования подтвердили, что ИИ может чувствовать и выражать человеческие эмоции лучше, чем многие люди.

Точно так же с точки зрения творчества ИИ, кажется, не хуже людей.

Недавно эксперт по взаимодействию человека с компьютером Якоб Нильсен (Jakob Nielsen) написал статью в колонке, используя 3 недавних научных исследования и короткую статью, созданную ChatGPT, чтобы доказать нам:

Для работ, требующих творческого подхода, людей почти нет!

Исследование 1: ИИ генерирует в 7 раз больше лучших идей о продуктах, чем люди

Исследование, проведенное исследователями из Cornell Tech и Wharton School Пенсильванского университета, сравнило ChatGPT 4 с людьми, контрольной группой «студентов, посещающих элитные университеты».

Хотя студентов не принимают в «элитные университеты» на основе творческих способностей, их, несомненно, принимают, по крайней мере частично, на основе IQ и академической успеваемости. Они, вероятно, намного превышают средние показатели населения почти по всем показателям интеллектуальных способностей.

Данные о студентах были собраны в 2021 году, до того, как генеративный ИИ стал широко доступен, поэтому можно утверждать, что данные частично являются выражением чистого человеческого творчества.

Потому что без ограничения использования инструментов ИИ путем ограничения контрольной группы людей изучение людей и ИИ быстро станет трудным, потому что любой способный студент может использовать инструменты ИИ для решения аналогичных задач.

Исследователи одновременно поставили перед студентами и ИИ задачу:

"Вы предприниматель, ищущий инновационный стартап для создания идеи нового продукта. Продукт предназначен для студентов колледжей в США. Это должен быть физический товар, а не услуга или программное обеспечение.

Розничная цена этого продукта может быть менее 50 долларов. Продукт не обязательно должен уже существовать или быть явно доступным. "

Этот процесс аналогичен процессу создания новых продуктов в реальных компаниях, поскольку исследователи не хотят ограничивать первоначальную идею продукта.

Фактически, идеи, которые сначала кажутся невозможными, часто могут быть реализованы после того, как инженеры обдумают их, и в конечном итоге могут добиться большого коммерческого успеха.

После простой тонкой настройки результатов мозгового штурма исследователи сначала дали ИИ самостоятельно сгенерировать 100 идей, затем показали ему образец хороших идей, после чего он сгенерировал еще 100 идей.

Первый вывод исследования заключается в том, что ИИ намного эффективнее людей генерирует идеи. ChatGPT сгенерировал 200 идей продукта за 15 минут, в то время как средняя производительность человека должна была сгенерировать 5 идей того же уровня за то же время.

Другими словами, ChatGPT генерирует идеи в 40 раз эффективнее, чем люди, с повышением производительности на 3900%.

Но когда дело доходит до идей продукта, количество идей гораздо менее важно, чем качество. Ведь плохие идеи бесполезны.

Исследователи измерили качество идей, попросив 20 судей оценить каждую идею, которые оценили, насколько они заинтересованы в покупке продукта, описанного этой идеей.

Судьи были оценены по шкале от 0 до 1 в зависимости от их покупательского намерения, а идеи продукта, созданные людьми, получили оценку 0,40. В то время как оценки идей ChatGPT составляют 0,47 (идеи, сгенерированные независимо) и 0,49 (идеи, сгенерированные после показа хороших примеров).

Разница между ИИ и людьми значительна (p<0,001), а разница в баллах двух ИИ — нет.

Но, как обсуждалось выше, средний показатель качества идеи не важен, большинство плохих или посредственных идей на самом деле бесполезны.

Следовательно, более важно учитывать хорошие идеи (определяемые здесь как 10 лучших) и лучшее качество идей (идеи, которые могут стать реальными продуктами в реальной бизнес-среде).

Вот баллы за лучшие идеи:

Люди: средний балл по верхнему децилю 0,62, лучшая идея 0,64.

ChatGPT не видит примеров хороших идей: средний балл верхнего дециля 0,64, лучшая идея 0,70

ChatGPT видел примеры хороших идей: средний балл верхнего дециля 0,66, лучшая идея 0,75.

В соответствии с этим стандартом оценки разница между ИИ и людьми также значительна (p<0,001), в то время как разница между двумя оценками ИИ остается незначительной.

Глядя на данные под другим углом, если мы посмотрим только на верхние 10% всего пула идей, будь то идеи, созданные людьми или искусственным интеллектом, 87,5% лучших идей исходят от ChatGPT, и только 12,5% приходят от студентов колледжа.

Обе группы внесли одинаковое количество оригинальных идей, так что эта процентная разница весьма значительна.

** В этом анализе данных ИИ в 7 раз более креативен, чем люди! **

Люди немного лучше разбираются в новизне

Еще одним показателем креативности продукта является новизна. Достаточно новый продукт поначалу может показаться непривлекательным, и только по прошествии некоторого времени на рынке потребители осознают преимущества этих революционных идей.

Творческая новизна — единственное, что люди делают лучше, чем ИИ в этом исследовании творчества.

По шкале от 0 до 1 люди имели средний балл творческой новизны 0,41, а средние баллы ИИ — 0,37 и 0,36 соответственно.

Опять же, разница между человеком и ИИ очевидна, а разница между двумя оценками ИИ — нет.

Исследование 2: ChatGPT 4 попал в 1% лучших в тесте творческого мышления Торренса, опередив 99% людей

Другое исследование было проведено исследователями из Университета Монтаны, Вильнюсского университета и Западного кампуса Университета Монтаны.

Они прошли тест творческого мышления Торренса (TTCT), наиболее широко используемый и наиболее цитируемый тест на креативность. Наша предыдущая статья дала более подробное введение в это исследование.

Исследование третье: исследование бизнес-стратегии методом мозгового штурма

Точно так же производительность ChatGPT в бизнес-стратегии также удивительна.

Capgemini Invent из Италии опубликовала тематическое исследование использования ChatGPT в качестве делового партнера в Harvard Business Review и собрала советы и планы, данные ею как экспертом в смежных областях, в книгу.

адрес ссылки:

Исследователи разделили бизнес-стратегию на пять аспектов:

Цените инновации, планирование и практику роста, экосистемную платформу и бизнес, многосторонние совместные, открытые инновации.

Тогда пусть GPT-4 ответит на каждое поле индивидуально, то есть как эксперт в “вертикальном поле”.

Прежде всего, с точки зрения ценности инноваций, ChatGPT ответил с двух точек зрения: генеративный ИИ улучшает существующий бизнес и подрывает текущую теорию бизнес-стратегии.

Ответ ChatGPT о том, как улучшить существующий бизнес, включает в себя анализ моделей конкуренции с использованием искусственного интеллекта, генерацию и проверку идей, динамическое и совместное бизнес-моделирование и другие ключевые моменты.

Это означает, что генеративный ИИ может использовать исторические данные, рыночные тенденции и информацию о клиентах для облегчения сеансов генерации идей. Это также может помочь быстро проводить опросы и собирать отзывы для проверки и уточнения новых стратегических идей.

Кроме того, ChatGPT также предложил с точки зрения подрыва текущей теории бизнес-стратегии: интеграцию экспоненциальной технологии, открытость и совместное творчество, а также использование экосистемного мышления и т. д.

В этом процессе роль людей изменилась с производителей контента на лиц, принимающих решения по оценке и отбору.

Что касается планирования и практики саморазвития, которые больше всего беспокоят компании, производительность ChatGPT также достаточно высока.

Предлагая генеративный ИИ для укрепления существующего бизнеса, ChatGPT предположил, что алгоритмы ИИ могут автономно генерировать различные гипотезы на основе больших объемов данных и идей. В то же время предложения по эффективному экспериментальному дизайну предоставляются и проверяются путем имитации отзывов пользователей. Эти меры могут ускорить развитие предприятий и максимально снизить издержки.

С точки зрения прорывных инноваций ChatGPT напрямую использует ИИ в качестве планировщика проекта, заменяя лидеров-людей.

Он также использует мощь квантовых вычислений для одновременного изучения всех возможностей, создания соответствующих гипотез переднего плана и их иммерсивного тестирования в симуляциях в средах дополненной реальности.

Открытые инновации играют важную роль в бизнесе, позволяя предприятиям более открыто и гибко сотрудничать с внешними сторонами, тем самым достигая более высокого уровня инноваций и конкурентоспособности.

ChatGPT также делает интересные выводы о влиянии генеративного ИИ на теорию и практику открытых инноваций.

При рассмотрении того, какую помощь генеративный ИИ может принести теоретической практике открытых инноваций, ChatGPT ответил: Генеративный ИИ может анализировать потенциальных партнеров по разным критериям, тем самым облегчая процесс обнаружения и выбора.

Кроме того, генеративный ИИ также может определять и рекомендовать наиболее открытые бизнес-сегменты и использовать алгоритмы ИИ для продвижения идей, оценки и сотрудничества.

Но с точки зрения прорыва существующей теории и практики ChatGPT считает, что можно создать рынок, управляемый ИИ, инновационную экосистему интеллектуального картирования и создать механизм на основе алгоритмов искусственного интеллекта для создания межполевых связей путем анализа большое количество различных данных, тем самым способствуя инновациям и развитию.

В других измерениях, таких как платформа экосистемы и бизнес, а также объединение множества заинтересованных сторон, производительность ChatGPT также впечатляет.

Энрико Сассун, всемирно известный консультант по корпоративной стратегии, очень высоко оценивает стратегию и планирование, данное ChatGPT:

«ChatGPT продемонстрировал впечатляющую креативность, в некоторых случаях даже лучше, чем многие эксперты в предметной области».

Однако он также предупреждает:

«Наличие глубокого опыта в предметной области и критичность имеют решающее значение при оценке ответов и выборе сгенерированных элементов. Это необходимо, потому что ChatGPT имеет тенденцию смешивать ценные идеи с менее ценной информацией».

ChatGPT написал интересную сказку

После того, как Нельсон представил три случая, он также провел интересный эксперимент.

Вдохновленный этой картиной, он попросил ChatGPT написать детскую историю о «антилопе гну, который думал, что он антилопа».

По мнению автора Нельсона, это увлекательная история, демонстрирующая прекрасное писательское мастерство.

ChatGPT создал прекрасные сюжеты и повороты, которые превращают простое ключевое слово в короткое эссе, которое наверняка понравится многим детям.

Антилопа гну, созданная Midjourney

Давным-давно на бескрайних пастбищах Африки жил молодой антилопа гну по имени Уолли. Уолли не обычный антилопа гну, он другой, потому что думает, что он газель.

Каждое утро Уолли пытается прыгнуть выше своего соседа. Он завидовал их гладкой шерсти и быстрой скорости. Он даже пробовал жевать листья, как это делают они, хотя предпочитает вкус травы.

В один солнечный день Уолли решил присоединиться к стаду импал, чтобы попить воды. Они прыгают и играют. Уолли нетерпеливо попытался прыгнуть, но вместо того, чтобы сделать это изящно, он споткнулся и упал с громким «хлопком».

Импалы остановились, чтобы посмотреть на него, сбитые с толку. «Валли, почему ты прыгаешь, как мы?» — спросила Ина, вожак импала.

Уолли застенчиво сказал: «Я хочу быть импалой, как ты, потому что ты элегантен и быстр. Я всего лишь неуклюжий гну».

Ина мягко улыбнулась. «Уолли, у тебя есть сила, которой нет у импал. Ты сильный и выносливый. Ты часть огромного стада, маршируешь вместе, как один, храбро пересекая реку, полную крокодилов. Это мы, импалы. т сделать это ".

Уолли сделал паузу, обдумывая слова Ины. Он понимает, что он особенный. Приняв свою личность, Уолли возвращается к своему стаду с новой уверенностью.

С того дня Уолли гордился тем, что он антилопа гну. Он учится любить то, насколько он уникален, и понимает, что у каждого есть свои сильные стороны. А это, мои дорогие друзья, история о антилопе гну, которая когда-то хотела стать импалой.

Подведем итог

Должно быть удивительно, когда разные исследователи из разных институтов используют разные методы, измеряют разные детали и получают одни и те же результаты.

Всестороннее исследование, представленное в этой статье, заслуживает большего доверия, чем некоторые отдельные исследования, которые могут иметь недостатки.

Нельсон считает, что ИИ может быть творческим и его следует использовать для ускорения генерации идей, будь то в его области дизайна пользовательского опыта или в других отраслях.

Вклад ИИ в творчество также включает в себя улучшение креативности пожилых людей, ведь важно не количество идей, а то, как вы выбираете конечную идею и как конкретно выполняете ее в процессе ее улучшения.

В эту креативную «колбасную машину» мы вкладываем больше оригинальных идей, и конечная колбаса будет вкуснее.

Нельсон утверждает, что независимо от того, считает читатель эта метафора творческой или нет, она принадлежит ему и моему стареющему мозгу. Но за последние несколько месяцев он почерпнул множество других хороших идей от ИИ.

Важно признать роль ИИ в работе людей.

Взяв на себя тяжелую работу по генерации идей, он позволяет людям сосредоточиться на задачах критического мышления и суждения, продлевая продуктивную человеческую карьеру.После 50 лет снижение когнитивных функций значительно снижает креативность без посторонней помощи.Повышение общей эффективности.

Он верит в симбиотические отношения между людьми и искусственным интеллектом. У обеих сторон есть свои роли, и это верно и с точки зрения творчества.

Давайте двигаться вперед в этот век искусственного интеллекта, не опасаясь, что мы устарели.

Пожалуйста, с нетерпением ждите бесконечных возможностей, предоставляемых симбиотическими отношениями между мощным ИИ и человеческим творчеством.

Использованная литература: