Le 13 septembre, la Wharton School de l'Université de Pennsylvanie, l'une des plus grandes écoles de commerce au monde, a annoncé une étude sur son site officiel. ChatGPT (GPT-4) a surpassé les étudiants d'élite du MBA dans les tests d'idées créatives. Le test demandait aux étudiants de ChatGPT et de MBA de concevoir 200 idées de produits pour le marché universitaire qui coûteraient 50 $ ou moins. Le critère de mesure de la créativité est de voir quelle créativité peut vendre plus de produits.
ChatGPT a généré automatiquement 200 idées de produits en 15 minutes ; Les étudiants en MBA n'ont trouvé que 5 idées en 15 minutes. Les résultats montrent que le taux d’achat moyen des produits ChatGPT est de 46,8 %, tandis que le taux d’achat des étudiants n’est que de 40,4 %, en retard par rapport au robot IA.
Christian Terwiesc, professeur à Wharton et coprésident de l'Innovation Research Management Institute, J'ai toujours pensé que la créativité est l'un des domaines dans lesquels les humains sont les meilleurs, mais les résultats des tests sont surprenants. Il est évident que tout le monde devrait essayer de générer de meilleures idées créatives via ChatGPT.
Principales conclusions
L'IA générative telle que ChatGPT peut aider les humains à surmonter les goulots d'étranglement créatifs et à absorber diverses inspirations pour parvenir à une pensée créative large.
Par rapport au travail manuel, ChatGPT peut permettre une exécution du travail moins chère et plus efficace.
Dans ce test, la qualité et l'efficacité de ChatGPT dans la génération d'idées créatives étaient largement en avance sur celles des étudiants de MBA très intelligents et bien formés. En d’autres termes, l’IA générative peut non seulement être appliquée aux activités d’« apprentissage par cœur », mais peut également être utilisée pour le travail créatif.
Vous pouvez essayer l'IA générative telle que ChatGPT et l'appliquer en tant qu'assistant créatif dans divers scénarios commerciaux pour améliorer l'efficacité du travail et de la création.
Une brève introduction à la recherche sur les tests
La Wharton School a plus de 20 ans d'expérience dans l'enseignement de cours de conception et d'innovation de produits et a organisé plus de 10 défis de créativité de produits similaires. Ce test est composé de 200 questions sélectionnées dans la promotion 2021.
Ces questions comprennent un titre et un texte descriptif, et la création globale est destinée au marché des étudiants, couvrant une variété d'articles quotidiens tels que des chaussures, des cahiers, des stylos, des vêtements, etc., avec un prix de détail de 50 $ ou moins (la limite de prix est fixée pour augmenter la complexité des questions du test).
Un testeur a saisi 200 questions de test dans ChatGPT et 200 idées créatives ont été générées en 15 minutes (100 générées naturellement, 100 avec des exemples d'invites)). Un étudiant en MBA n'a proposé que 5 idées en 15 minutes, et l'efficacité d'exécution d'une équipe peut être encore pire. Parce qu’il y aura des divergences d’opinions et qu’il pourra y avoir des scènes de discussions animées qui prendront plus de temps.
Bien que l'efficacité créative de ChatGPT soit très élevée, elle peut également être mélangée à de nombreuses mauvaises idées. La valeur économique constitue donc le meilleur choix pour mesurer la créativité.
Les chercheurs ont trouvé des étudiants pour former une équipe d'évaluation et ont mené une évaluation complète de 400 idées créatives générées par les étudiants de ChatGPT et de MBA.En moyenne, chaque répondant a évalué 40 idées, et chaque idée a été évaluée en moyenne 20 fois., pour refléter leur volonté d’acheter le produit.
Résultats des tests
Il a été demandé aux évaluateurs d'exprimer leurs intentions d'achat en utilisant une réponse standard à cinq cases : Certainement pas acheter, Probablement pas acheter, Peut-être ou pas acheter, Probablement acheter, Je vais certainement acheter.
Les cinq réponses ont été pondérées par 0, 0,25, 0,50, 0,75 et 1,00 pour développer une mesure de la probabilité d'achat. Cette méthode de pondération a été proposée par les professeurs Jameson et Bass en 1989 et constitue un système d'évaluation mature.
Les résultats des tests montrent queEn utilisant l'intention d'achat comme mesure, la qualité moyenne des idées générées par ChatGPT est supérieure à la qualité moyenne des idées générées par les humains.. La probabilité d'achat moyenne pour les idées générées par l'homme est de 40,4 %, la probabilité d'achat moyenne pour ChatGPT original est de 46,8 % et la probabilité d'achat moyenne pour ChatGPT avec des exemples d'invites est de 49,3 %.
aussi,ChatGPT a généré l'idée créative la mieux notée de l'échantillon de test, avec une probabilité d'achat 11 % plus élevée que la meilleure idée humaine..
Au total, sur 400 idées générées par ChatGPT et les humains. Parmi les 40 meilleures idées (top 10 %), 35 (87,5 %) ont été générées par ChatGPT.Autrement dit, dans les compétitions individuelles, la plupart des gagnants viennent de ChatGPT..
À propos de l'école Wharton
La Wharton School a été fondée en 1881 et est affiliée à l'Université de Pennsylvanie. C'est l'une des écoles de commerce les plus anciennes et les plus grandes au monde et l'une des écoles de commerce les plus influentes des États-Unis.
La Wharton School est connue pour son excellence en matière d'éducation et de recherche dans des domaines tels que la finance, l'économie, la gestion industrielle, l'innovation et la stratégie commerciale mondiale. Les anciens élèves de la Wharton School sont répartis dans tous les horizons du monde, y compris plusieurs lauréats du prix Nobel, des chefs d'entreprise à succès, etc.