Penelitian terbaru dari University of Pennsylvania: AI 7 kali lebih efisien daripada manusia dalam menghasilkan ide, dan kemampuan kreatif GPT mengalahkan 99% manusia!

Sumber artikel: Xinzhiyuan

Sunting: Jalankan Lumina

Banyak orang berpikir bahwa kecerdasan buatan tidak memiliki kemampuan inovatif, tetapi penelitian berikut akan mengubah “stereotipe” ini.

Dari Pergi ke game hingga menyelesaikan berbagai tugas berulang, AI telah jauh melampaui manusia dalam banyak aspek.

Banyak orang sudah membayangkan bahwa di masa depan AI akan membebaskan manusia dari pekerjaan yang membosankan dan memungkinkan manusia untuk fokus pada pekerjaan yang hanya bisa dilakukan oleh manusia.

Seperti komunikasi emosional dengan manusia, atau pekerjaan yang membutuhkan kreativitas.

Namun, banyak penelitian terbaru telah mengonfirmasi bahwa AI dapat merasakan dan mengekspresikan emosi manusia lebih baik daripada kebanyakan orang.

Begitu pula dalam hal kreativitas, AI sepertinya tidak lebih buruk dari manusia.

Baru-baru ini, pakar interaksi manusia-komputer Jakob Nielsen (Jakob Nielsen) menulis artikel kolom, menggunakan 3 studi ilmiah terbaru dan artikel pendek yang dibuat oleh ChatGPT, untuk membuktikan kepada kita:

Untuk pekerjaan yang membutuhkan kreativitas, hampir tidak ada manusia!

Studi 1: AI menghasilkan ide produk terbaik 7 kali lebih banyak daripada manusia

Sebuah studi oleh para peneliti di Cornell Tech dan Wharton School of the University of Pennsylvania membandingkan ChatGPT 4 dengan manusia, kelompok kontrol “siswa yang kuliah di universitas elit”.

Meskipun siswa tidak diterima di “universitas elit” atas dasar kreativitas, tidak diragukan lagi mereka diterima, setidaknya sebagian, atas dasar IQ dan prestasi akademik. Mereka cenderung jauh melebihi rata-rata populasi di hampir setiap ukuran kemampuan intelektual.

Data siswa dikumpulkan pada tahun 2021, sebelum AI generatif tersedia secara luas, sehingga dapat dikatakan bahwa data tersebut sebagian merupakan ekspresi kreativitas murni manusia.

Karena, tanpa membatasi penggunaan alat AI dengan membatasi kelompok kontrol manusia, studi tentang manusia dan AI akan menjadi sulit dengan cepat, karena siswa cerdas mana pun dapat menggunakan alat AI pada tugas serupa.

Para peneliti menugaskan siswa dan AI tugas pada saat yang sama:

"Anda adalah seorang wirausahawan yang mencari start-up inovatif untuk menghasilkan ide produk baru. Produk tersebut ditujukan untuk mahasiswa di AS. Ini harus berupa komoditas fisik, bukan layanan atau perangkat lunak.

Harga eceran produk ini bisa kurang dari sekitar $50. Sebuah produk tidak harus sudah ada, juga tidak harus tersedia secara eksplisit. "

Proses ini mirip dengan proses pembuatan ide untuk menghasilkan produk baru di perusahaan nyata, karena peneliti tidak ingin membatasi ide asli dari produk tersebut.

Bahkan, ide-ide yang tampak mustahil pada awalnya mungkin sering dihasilkan setelah para insinyur memikirkannya, dan pada akhirnya dapat mencapai kesuksesan komersial yang besar.

Setelah menyempurnakan hasil brainstorming sederhana, para peneliti pertama-tama membiarkan AI menghasilkan 100 ide secara mandiri, kemudian menunjukkan sampel ide bagus, setelah itu menghasilkan 100 ide lagi.

Temuan pertama dari penelitian ini adalah bahwa AI jauh lebih efisien daripada manusia dalam menghasilkan ide. ChatGPT menghasilkan 200 ide produk dalam 15 menit, sedangkan rata-rata kinerja manusia adalah menghasilkan 5 ide dengan level yang sama dalam waktu yang bersamaan.

Dengan kata lain, ChatGPT 40 kali lebih efisien daripada manusia dalam menghasilkan ide, dengan peningkatan performa sebesar 3900%.

Namun jika menyangkut ide produk, kuantitas ide jauh lebih penting daripada kualitas. Lagi pula, ide buruk tidak berguna.

Para peneliti mengukur kualitas ide dengan meminta 20 orang menilai setiap ide, yang menilai seberapa tertarik mereka untuk membeli produk yang dijelaskan oleh ide tersebut.

Para juri diberi skor pada skala 0-1 berdasarkan niat pembelian mereka, dengan ide produk buatan manusia dengan skor 0,40. Sedangkan skor ide ChatGPT adalah 0,47 (ide dihasilkan secara mandiri) dan 0,49 (ide dihasilkan setelah menunjukkan contoh yang baik).

Perbedaan antara AI dan manusia signifikan (p<0,001), sedangkan perbedaan skor kedua AI tidak signifikan.

Namun seperti yang dibahas di atas, rata-rata skor kualitas ide tidaklah penting, sebagian besar ide buruk atau biasa-biasa saja sebenarnya tidak berharga.

Oleh karena itu, lebih penting untuk mempertimbangkan ide-ide bagus (didefinisikan di sini sebagai 10% teratas) dan kualitas ide terbaik (ide-ide yang dapat menjadi produk aktual di lingkungan bisnis nyata).

Berikut adalah skor untuk ide-ide terbaik:

Manusia: Skor rata-rata desil teratas 0,62, ide terbaik 0,64

ChatGPT tidak melihat contoh ide bagus: skor rata-rata desil teratas 0,64, ide terbaik 0,70

ChatGPT melihat contoh ide bagus: skor rata-rata desil teratas 0,66, ide terbaik 0,75

Di bawah standar evaluasi ini, perbedaan antara AI dan manusia juga signifikan (p<0,001), sedangkan perbedaan antara kedua skor AI tetap tidak signifikan.

Melihat data dari sudut lain, jika kita hanya melihat 10% teratas dari keseluruhan kumpulan ide, apakah itu ide yang dihasilkan manusia atau AI, 87,5% ide terbaik berasal dari ChatGPT, dan hanya 12,5% yang datang dari mahasiswa.

Kedua kelompok menyumbangkan ide orisinil dalam jumlah yang sama, sehingga perbedaan persentase ini cukup signifikan.

** Dalam analisis data ini, AI 7 kali lebih kreatif daripada manusia! **

Manusia sedikit lebih baik dalam hal baru

Ukuran lain dari kreativitas produk adalah kebaruan. Produk yang cukup baru mungkin tidak tampak menarik pada awalnya, dan hanya setelah beberapa waktu di pasar konsumen menyadari manfaat dari ide-ide revolusioner ini.

Kebaruan kreatif adalah satu-satunya hal yang dilakukan manusia lebih baik daripada AI dalam studi kreativitas ini.

Pada skala 0-1, manusia memiliki skor kebaruan kreatif rata-rata 0,41, sedangkan skor AI rata-rata masing-masing adalah 0,37 dan 0,36.

Sekali lagi, perbedaan antara manusia dan AI jelas, tetapi perbedaan antara kedua skor AI tidak.

Studi 2: ChatGPT 4 mendapat skor 1% teratas di Torrens Creative Thinking Test, mengalahkan 99% manusia

Studi lain dilakukan oleh para peneliti di University of Montana, Vilnius University dan University of Montana Western Campus.

Mereka mengikuti Torrens Test of Creative Thinking (TTCT), tes kreativitas yang paling banyak digunakan dan paling banyak dikutip. Artikel kami sebelumnya memberikan pengantar yang lebih rinci untuk penelitian ini.

Riset Tiga: Brainstorming Riset Strategi Bisnis

Demikian pula, kinerja ChatGPT dalam strategi bisnis juga luar biasa.

Capgemini Invent dari Italia menerbitkan studi kasus penggunaan ChatGPT sebagai mitra bisnis di Harvard Business Review, dan menyusun saran dan perencanaan yang diberikan olehnya sebagai pakar di bidang terkait ke dalam sebuah buku.

alamat tautan:

Para peneliti membagi strategi bisnis menjadi lima dimensi:

Inovasi nilai, perencanaan dan praktik pertumbuhan, platform dan bisnis ekosistem, multi-stakeholder bersama, inovasi terbuka.

Kemudian biarkan GPT-4 menjawab setiap bidang secara individual, yaitu sebagai ahli di “bidang vertikal”.

Pertama-tama, dalam hal inovasi nilai, ChatGPT menjawab dari dua perspektif: AI generatif meningkatkan bisnis yang ada dan menumbangkan teori strategi bisnis saat ini.

Jawaban ChatGPT tentang cara meningkatkan bisnis yang ada mencakup analisis pola persaingan yang ditingkatkan AI, pembuatan dan verifikasi ide, pemodelan bisnis yang dinamis dan kolaboratif, serta poin-poin penting lainnya.

Ini berarti AI generatif dapat menggunakan data historis, tren pasar, dan informasi pelanggan untuk memfasilitasi sesi pembuatan ide. Itu juga dapat membantu melakukan survei dengan cepat dan mengumpulkan umpan balik untuk memvalidasi dan menyempurnakan ide-ide strategis baru.

Selain itu, ChatGPT juga mengusulkan dari perspektif menumbangkan teori strategi bisnis saat ini: integrasi teknologi eksponensial, keterbukaan dan kreasi bersama, dan merangkul pemikiran ekosistem, dll.

Dalam proses ini, peran orang telah berubah dari produser konten menjadi pembuat keputusan untuk evaluasi dan seleksi.

Adapun perencanaan dan praktik pengembangan diri yang paling diperhatikan perusahaan, kinerja ChatGPT juga cukup baik.

Dalam saran AI generatif untuk memperkuat bisnis yang ada, ChatGPT mengusulkan agar algoritme AI dapat secara mandiri menghasilkan beragam hipotesis berdasarkan sejumlah besar data dan wawasan. Pada saat yang sama, saran desain eksperimental yang efektif disediakan dan diverifikasi dengan mensimulasikan umpan balik pengguna. Langkah-langkah ini dapat mempercepat pengembangan perusahaan dan mengurangi biaya secara maksimal.

Dari perspektif inovasi yang mengganggu, ChatGPT langsung menggunakan AI sebagai perencana proyek, menggantikan pemimpin manusia.

Ini juga menggunakan kekuatan komputasi kuantum untuk mengeksplorasi semua kemungkinan secara bersamaan, menghasilkan hipotesis latar depan yang sesuai, dan mengujinya secara imersif dalam simulasi di lingkungan augmented reality.

Inovasi terbuka memainkan peran penting dalam bisnis, memungkinkan perusahaan untuk bekerja sama lebih terbuka dan fleksibel dengan pihak eksternal, sehingga mencapai tingkat inovasi dan daya saing yang lebih tinggi.

ChatGPT juga membuat wawasan menarik tentang dampak AI generatif pada teori dan praktik inovasi terbuka.

Saat mempertimbangkan bantuan apa yang dapat dibawa AI generatif ke praktik teoretis inovasi terbuka, ChatGPT menjawab: AI generatif dapat menganalisis mitra potensial menurut kriteria yang berbeda, sehingga memfasilitasi proses penemuan dan seleksi.

Selain itu, AI generatif juga dapat mengidentifikasi dan merekomendasikan segmen bisnis yang paling terbuka, serta menggunakan algoritme AI untuk mempromosikan pembuatan, evaluasi, dan kolaborasi ide.

Namun dari perspektif menerobos teori dan praktik yang ada, ChatGPT percaya bahwa membangun pasar berbasis AI, ekosistem inovasi pemetaan cerdas, dan membuat mesin berdasarkan algoritme kecerdasan buatan adalah mungkin untuk menghasilkan koneksi lintas bidang dengan menganalisis sejumlah besar data yang berbeda, sehingga mendorong inovasi dan pengembangan.

Di dimensi lain, seperti platform ekosistem dan bisnis, serta menyatukan banyak pemangku kepentingan, kinerja ChatGPT juga mengesankan.

Sebagai konsultan strategi perusahaan terkenal di dunia, Enrico Sassoon memiliki penilaian yang sangat tinggi terhadap strategi dan perencanaan yang diberikan oleh ChatGPT:

“ChatGPT telah menunjukkan kreativitas yang mengesankan, bahkan dalam beberapa kasus lebih baik daripada banyak pakar domain.”

Namun, dia juga memperingatkan:

“Memiliki keahlian domain yang kuat dan bersikap kritis sangat penting saat mengevaluasi respons dan memilih item yang dihasilkan. Hal ini diperlukan karena ChatGPT cenderung mencampur wawasan berharga dengan informasi yang kurang berharga. "

ChatGPT menulis dongeng yang menarik

Setelah Nelson memperkenalkan ketiga kasus tersebut, dia pun melakukan eksperimen yang menarik.

Terinspirasi dari gambar ini, dia meminta ChatGPT untuk menulis cerita anak-anak tentang “rusa kutub yang mengira dirinya impala”.

Menurut penulis Nelson, ini adalah kisah menarik yang menunjukkan kemampuan menulis yang sempurna.

ChatGPT telah membuat plot dan twist yang indah yang mengubah kata isyarat sederhana menjadi esai pendek yang pasti akan disukai banyak anak.

Wildebeest dihasilkan oleh Midjourney

Dahulu kala, di padang rumput Afrika yang luas, hiduplah seekor rusa kutub muda bernama Wally. Wally bukan rusa kutub biasa; dia berbeda karena dia pikir dia rusa.

Setiap pagi, Wally mencoba melompat setinggi tetangganya. Dia iri pada bulu halus dan kecepatan cepat mereka. Dia bahkan mencoba mengunyah daunnya, seperti yang mereka lakukan, meski dia lebih suka rasa rumput.

Suatu hari yang cerah, Wally memutuskan untuk bergabung dengan kawanan impala untuk minum air. Mereka melompat dan bermain. Wally dengan penuh semangat mencoba melompat, tetapi bukannya melakukannya dengan anggun, dia terhuyung-huyung dan jatuh, dengan “ledakan” yang keras.

Impala berhenti untuk melihatnya, bingung. “Wally, kenapa kamu melompat seperti kami?” tanya Ina, pemimpin impala.

Wally berkata dengan malu-malu, “Aku ingin menjadi impala sepertimu karena kamu anggun dan cepat. Aku hanyalah rusa kutub yang kikuk.”

Inah tersenyum lembut. “Wally, kamu memiliki kekuatan yang tidak dimiliki oleh impala. Kamu kuat dan ulet. Kamu adalah bagian dari kawanan besar, berbaris bersama sebagai satu kesatuan, dengan berani menyeberangi sungai yang penuh dengan buaya. Inilah kami impala. Antelope bisa ’ jangan lakukan itu.”

Wally terdiam, memikirkan kata-kata Ina. Ia menyadari bahwa itu istimewa. Merangkul identitasnya sendiri, Wally kembali ke kawanannya dengan keyakinan baru.

Sejak hari itu, Wally bangga menjadi rusa kutub. Ia belajar menyukai betapa uniknya itu dan memahami bahwa setiap orang memiliki kekuatannya masing-masing. Dan ini, teman-teman terkasih, adalah kisah tentang rusa kutub yang pernah ingin menjadi impala.

Ringkas

Pasti luar biasa ketika peneliti yang berbeda di lembaga yang berbeda menggunakan metode yang berbeda dan mengukur detail yang berbeda dan menghasilkan hasil yang sama.

Studi komprehensif yang disajikan dalam artikel ini lebih kredibel daripada beberapa studi individual yang mungkin cacat.

Nelson yakin AI dapat menjadi kreatif dan harus digunakan untuk mempercepat pembuatan ide, baik di bidang desain pengalaman penggunanya atau di industri lain.

Kontribusi AI dalam kreativitas juga mencakup peningkatan kreativitas para lansia, karena jumlah ide tidak penting, tetapi bagaimana Anda memilih ide akhir dan bagaimana Anda mengeksekusinya secara spesifik dalam proses peningkatannya.

Kami memasukkan lebih banyak ide orisinal ke dalam “mesin sosis” kreatif ini, dan sosis terakhir akan lebih enak.

Nelson berargumen bahwa apakah pembaca menganggap metafora itu kreatif atau tidak, itu adalah miliknya sendiri dan otak saya yang sudah tua. Namun dalam beberapa bulan terakhir, dia mendapatkan sejumlah ide bagus lainnya dari AI.

Penting untuk mengakui peran AI dalam pekerjaan manusia.

Dengan mengambil alih generasi ide, ini memungkinkan manusia untuk fokus pada pemikiran kritis dan tugas penilaian, memperpanjang karir manusia yang produktif. Setelah usia 50 tahun, penurunan kognitif secara signifikan mengurangi kreativitas tanpa bantuan. Meningkatkan efisiensi secara keseluruhan.

Dia percaya pada hubungan simbiosis antara manusia dan kecerdasan buatan. Kedua belah pihak memiliki peran untuk dimainkan, dan itu juga berlaku dalam hal kreativitas.

Mari kita bergerak maju di zaman kecerdasan buatan ini, bukan karena takut ketinggalan jaman.

Harap nantikan kemungkinan tak terbatas yang disajikan oleh hubungan simbiosis antara AI yang kuat dan kreativitas manusia.

Referensi: