据 IT 之家 9 月 7 日消息,斯坦福大学的一项新研究发现,热门生成式 AI 聊天机器人 ChatGPT 的能力在几个月内有所波动。目前,ChatGPT 有免费的 GPT-3.5 模型和更智能、更快速的付费 GPT-4 版本。研究人员发现,GPT-4 在 3 月份能够有效地解决数学问题,识别质数的准确率为 97.6%。三个月后,其准确率下降到了 2.4%。而另一方面,GPT-3.5 却变得更好,从 7.4% 的准确率提高到了 86.8%。研究人员还注意到,在编写代码和视觉推理方面也有类似的波动。 研究人员认为,结果并不能真正反映 ChatGPT 性能的准确性状态,而是显示了微调模型带来的意外后果。本质上,当修改模型的一部分来改善一个任务时,其他任务可能会受到影响。为什么会这样很难确定,因为没有人知道 ChatGPT 是如何运作的,而且它的代码也不是开源的。 原文链接 —- 编译者/作者:Yangz 玩币族申明:玩币族作为开放的资讯翻译/分享平台,所提供的所有资讯仅代表作者个人观点,与玩币族平台立场无关,且不构成任何投资理财建议。文章版权归原作者所有。 |
斯坦福大学研究发现 ChatGPT 的能力表现在几个月内有所波动
2023-09-08 Yangz 来源:区块链网络
LOADING...
相关阅读:
- 分析公司 Similarweb:ChatGPT 流量连续第三个月下滑2023-09-08
- 重庆基于阿里云通义技术发布城市运行和治理大模型2023-09-07
- 尖晶资本王明辉:To C端的大模型最后可能就一两家独大2023-09-07
- 蚂蚁集团正式开源万亿级规模图学习系统 AGL2023-09-07
- 麦肯锡中国区主席倪以理:生成式 AI 对全球经济的正面影响最高可达2023-09-07