编辑丨王多鱼
排版丨水成文
ChatGPT,是由人工智能研究实验室OpenAI于2022年11月30日发布的聊天机器人模型——人工智能技术驱动的自然语言处理工具。ChatGPT能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,真正像人类一样来聊天交流。自推出以来,ChatGPT强大的能力备受关注。
2023年9月14日,挪威卑尔根大学、斯塔万格大学的研究人员在Scientific Reports 期刊发表了题为:Best humans still outperform artificial intelligence in a creative divergent thinking task 的研究论文。
该研究指出,ChatGPT等基于大语言模型(LLM)的AI对话机器人在创造性思维任务上或能超越一般人类,该任务要求受试者想出日常用品的替代用途(发散性思维的一个例子)。不过,得分最高的人类受试者依然能超过对话机器人的最佳答案。
发散性思维通常是指与创造性相关的一类思维过程,需要为特定任务想出各种不同创意或对策。发散性思维一般通过替代用途任务(Alternate Uses Task,AUT)进行评估,受试者被要求在短时间内想出某个日常用品的其他用途,越多越好。受试者的回答从四个类别进行打分:流利度、灵活性、原创性和精细度。
在这项研究中,研究团队让ChatGPT3、ChatGPT4和Copy.Ai以及人类受试者完成四个物品(绳子、盒子、铅笔、蜡烛)的替代用途任务(AUT),并比较了AI和人类的答案。研究团队通过语义距离(回答与物品原始用途的相关度)和创造性给回答的原创性打分,他们用一个计算方法在0-2的范围里量化语义距离,同时让不知道作答者身份的人类打分者在1-5的范围里客观评价创造性。
平均而言,AI的回答在语义距离(0.95 vs 0.91)和创造性(2.91 vs 2.47)的得分上显著高于人类的回答。人类回答在这两项的得分差距更大——最低分远低于AI的回答,但最高分普遍比AI高。最佳人类回答在 8个评分项中的7项都超过了所有对话机器人的最佳回答。
这些结果表明,当前的AI对话机器人想创意的能力至少已与一般人类相当。但论文作者也指出,他们只评价了涉及创造性评估的单项任务的表现。作者认为,今后的研究或能探索如何将AI融入创造性过程来提升人类表现。
论文链接:
领取专属 10元无门槛券
私享最新 技术干货