四川省金属学会-亚博电竞网

anthropic第三代ai模型:超越gpt-4,接近人类的理解能力!

来源: 学术头条  发布时间:2024-03-06

最近,被称为“openai最强竞对”的大模型公司 anthropic 重磅发布了其第三代人工智能(ai)模型 ——claude 3 系列模型,包括 claude 3 opus、claude 3 sonnet 和 claude 3 haiku

其中,claude 3 opu 为 claude 3 系列模型的最强版本,具有接近人类的理解能力,可以灵巧地处理开放式提示和复杂的任务,根据官方给到的资料,其性能全面超过了 gpt-4。

值得一提的是,claude 3 系列模型具有与其他领先模型同等的复杂视觉功能,可以处理各种视觉格式,包括照片、图表、图形和技术图表。

图片

anthropic 在其官方 x 上表示,claude 3 系列模型“在推理、数学、编码、多语言理解和视觉方面树立了新的行业基准”。

图片

据介绍,claude 3 opus 和 claude 3 sonnet 现已可以通过 api 直接访问。目前,api 也已全面开放,开发人员可立即开始使用这些模型。

另外,claude 3 sonnet 还可以供部分地区的用户在网站(http://claude.ai)上免费体验,而 claude 3 opus 的使用权限,则只开放给了 claude pro 用户。

此外,anthropic 团队还表示,claude 3 系列模型解决了之前模型经常出现“不必要的拒绝”的问题。

智能新标准

评测结果显示,claude 3 opus 在 ai 系统的大多数常用评估基准上都优于同类产品,包括本科生水平的专家知识(mmlu)、研究生水平的专家推理(gpqa)、基础数学(gsm8k)等。它在复杂任务上表现出了接近人类水平的理解力和流畅性,“引领着通用智能的前沿”。

所有 claude 3 模型在分析和预测、细微内容创建、代码生成以及西班牙语、日语和法语等非英语语言对话方面的能力都得到了提高。

近乎即时的结果

claude 3 系列模型支持实时客户聊天、自动完成和数据提取任务,在这些任务中,响应是即时和实时的。

其中,claude 3 haiku 是市场上同智能类别中速度最快、性价比最高的模型。它可以在三秒内读取 arxiv 上一篇信息和数据密集的研究论文(约 10k token),并附带图表和图形。

在绝大多数工作负载中,claude 3 sonnet 的智能水平比 claude 2 和 claude 2.1 高出了 2 倍。它在知识检索或销售自动化等要求快速响应的任务中表现出色。claude 3 opus 的速度要慢一些,与 claude 2 和 claude 2.1 类似,但智能水平更高。

准确性提高

与 claude 2.1 相比,claude 3 opus 在具有挑战性的开放式问题上的准确率(或正确答案)提高了两倍,同时也减少了错误答案。

除了做出更可信的回答外,claude 3 系列模型为来将启用引用功能,这样就可以通过指出参考资料中的精确句子来验证答案。

图片

200k 上下文窗口和近乎完美的记忆

现在,claude 3 系列模型可提供 200k 上下文窗口。不过,所有三种型号都能接受超过 100 万个 token 的输入,未来也可能会向需要增强处理能力的特定客户提供这种服务。另外,claude 3 opus 实现了接近完美的召回率,准确率超过 99%。

图片

anthropic 团队表示,为提高模型的安全性和透明度,他们将继续开发诸如宪法人工智能(constitutional ai)等方法,并对模型进行微调,以减轻新模式可能带来的隐私问题。

虽然与之前的模型相比,claude 3 系列模型在生物知识、网络相关知识和自主性等关键指标上取得了进步,但根据“负责任扩展政策”( responsible scaling policy),仍处于 ai 安全等级 2(asl-2)。红队评估结果显示,claude 3 系列模型目前造成灾难性风险的可能性微乎其微。

更易于使用

claude 3 系列模型更善于遵循复杂的多步骤指令。它们尤其擅长遵循品牌声音和响应准则,并开发出用户可以信赖的面向客户的体验。此外,claude 3 系列模型更善于以 json 等格式生成流行的结构化输出,从而更易于指导自然语言分类和情感分析等用例。

在官方博客的最后,anthropic 团队写道:

“在推动 ai 能力发展的同时,我们也同样致力于确保我们的安全防护措施能够跟上性能飞跃的步伐。我们的假设是,站在 ai 发展的前沿是引导其走向积极社会成果的最有效方式。”

参考链接:

https://www.anthropic.com/news/claude-3-family



亚博电竞网的版权与免责声明
【1】本网站凡注明“学会秘书处”的所有作品,亚博电竞网的版权均属于四川省金属学会所有,未经书面授权,任何媒体、网站或个人不得转载、摘编或利用其它方式使用上述作品。已经本网站协议授权的媒体或网站,应在授权范围内使用上述作品,并注明“来源:四川省金属学会”。违者本网站将追究其相关法律责任。
【2】本网站凡注明“来源:xxx(非学会秘书处)”的作品,均转载自其它媒体,登载此作品出于传递更多信息之目的,不代表学会观点或证实其描述,不对其真实性负责。作品内容仅供参考,如转载稿件涉及亚博电竞网的版权等问题,请在两周内来电或来函与四川省金属学会联系。

二维码

关注学会
微信公众号

二维码

访问学会
手机版

网站地图