IT商业网-解读信息时代的商业变革
当前位置: 首页 > 人工智能 > 正文

ChatGPT(GPT-4)在创意想法测试中:能力超过精英MBA学生

2023-09-16 17:31:28  来源:凤凰科技网    

  9月16日讯:全球最大商学院之一宾夕法尼亚大学-沃顿商学院,在官网公布了一项研究,ChatGPT(GPT-4)在创意想法测试中,其能力超过了精英MBA学生。

  该测试是让ChatGPT和MBA学生,为大学生市场设计出零售价为 50 美元或以下,200个产品创意。衡量创意的标准是,看谁的创意能让商品卖的更多。

  ChatGPT在15分钟内自动生成了200个产品创意;MBA学生15分钟只想出了5个创意。结果显示,ChatGPT的产品平均购买率为46.8%,而学生的购买率只有40.4%落后于AI机器人。

  沃顿商学院教授兼创新研究管理所联席主席- Christian Terwiesc表示,我一直以为创意是人类最擅长领域之一,但测试结果让人大吃一惊。显而易见,每个人都应该尝试通过ChatGPT产生更好的创意想法。

  主要研究发现

  ChatGPT等生成式AI,可以帮助人类突破创意瓶颈,吸取多元化灵感实现宽泛的创意思维。

  相比人工,ChatGPT可以提供更便宜、高效的工作执行力。

  ChatGPT在本次测试中,生成创意想法的质量、效率,全面领先那些高智商、训练有素的MBA学生。也就是说,生成式AI不仅能应用在“死记硬背”的业务上,同样可以胜任创意方面工作。

  可以尝试ChatGPT等生成式AI,作为创意助手应用在各种业务场景中,以提升工作和创意效率。

  测试研究简单介绍

  沃顿商学院有超过20年的产品设计和创新课程教学经验,已举办了10多次类似的产品创意挑战赛。本次测试,是从2021年课堂上选取的200个题目。

  这些题目包括一个标题和一段描述性文字,整体创建一个针对大学生市场,涵盖多种日常物品例如,鞋子、本、笔、衣服等,零售价是50美元或低于这个价格(设置价格上限是为了增加测试题目的复杂性)。

  一名测试人员将200个测试题目输入到ChatGPT中,15分钟就生成了200个创意想法(100个自然生成,100个有示例提示)。而一名MBA学生15分钟只想出了5个想法,如果是团队执行效率可能会更差。因为,会产生意见分歧,可能会出现激烈讨论的场景消耗更多时间。

  虽然ChatGPT的创意效率很高,但也可能掺杂了很多较差的想法。所以,经济价值是衡量创意的最佳选择。

  研究人员找到了一些学生组成了评估小组,对ChatGPT和MBA学生想出的400个创意想法进行了综合评估。每位受访者平均评估了40个想法,平均每个想法被评估了20次,来体现他们对商品的购买意愿。

  测试结果

  评估者被要求使用标准的“五框”选项,来表达购买意愿:肯定不会购买,可能不会购买,可能会也可能不会购买,可能会购买,肯定会购买。

  这五种回应的加权,分别为0, 0.25, 0.50, 0.75, 和1.00,以此来开发一个购买概率的衡量标准。这种加权方法由Jameson和Bass教授在1989年提出,是一套成熟的评估体系。

  测试结果显示,以购买意愿为度量标准,ChatGPT生成的想法的平均质量,高于人类生成的想法的平均质量。人类生成的想法的平均购买概率是40.4%,原始ChatGPT的平均购买概率是46.8%,而提供有示例提示的ChatGPT的平均购买概率是49.3%。

  此外,ChatGPT在测试样本中生成了评价最高的创意想法,其购买概率比最好的人类想法高出11%。

  总体来说,由ChatGPT和人类生成的400个想法中。前40个想法(前10%)中,有35个(占87.5%)是由ChatGPT生成的。换句话说,在一对一的比赛中,大部分的优胜者全部来自ChatGPT。

原标题:沃顿商学院:ChatGPT的创意能力比MBA学生更好

免责声明: IT商业新闻网遵守行业规则,本站所转载的稿件都标注作者和来源。 IT商业新闻网原创文章,请转载时务必注明文章作者和来源“IT商业新闻网”, 不尊重本站原创的行为将受到IT商业新闻网的追责,转载稿件或作者投稿可能会经编辑修改或者补充, 如有异议可投诉至:post@itxinwen.com
微信公众号:您想你获取IT商业新闻网最新原创内容, 请在微信公众号中搜索“IT商业网”或者搜索微信号:itxinwen,或用扫描左侧微信二维码。 即可添加关注。
标签:

品牌、内容合作请点这里: 寻求合作 ››

相关阅读RELEVANT