奥多码,点击查看详情 97CDN云盾,点击查看详情

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

       
广告2021-06-03到期2021-07-03广告2021-06-03到期2021-07-03
       
广告2021-06-03到期2021-07-03广告2021-06-03到期2021-07-03

重写文本:

大模型格局再变:阶跃星辰跻身前五

国内人工智能领域传来重磅消息:

头部大模型创业公司阶跃星辰凭借其万亿参数大语言模型 Step-2 在权威大模型基准 LiveBench AI 上取得突破,位列第五,成为前十名中唯一的国产大模型I p 8 \ $

Step-2 仅次于 OpenAI 和 Anthropic 两家公司,进一步凸显了国产大模型的快速发展。

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

榜单地址:htu $ Dtp% E 1 G Js://livebench.ai/#LiveBench 是当前生成式 AI 领域最权威、客观的模型能力评测榜单之一。它是由图灵奖得主、Meta 首席 AI 科学家 Yann LeCun 联合 Abacus.AI、纽约大学等机q r f E = 6 *构推出的,6 9 n O e [ l B今年六月才首次上线。它旨在消除现有 LLM 基准的局限性,被称作是「世界上第一个无法被操纵的大语言模型基准测试」。

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

  1. LiveBench 采用一种创新的基准测试方法,包含 6 大类共 18 项任务。
  2. 为了防止大模型“R f W s i | 4 \作弊”,LiveBench 每月发布新问题,这些问题基于最近发布的数据集、arXiv 论文、新闻文章和 IMDb 电m g n – K X t + 8影简介设计,以限制潜在的T j * ^ l数据污染。每个问题都具有可验证且客观的真实答案,从而实现难8 \ D W ~ E wI g m K ; o自动化评分,无需 LLM 评审员。
  3. 通过定期更新问题集和采用客观的自动化x G 2 V ~ ~ } 9 w评分方法,LiveBench 提供了一个公平且准确的评估平台,同时促进了 LLM 的持续改进和社区参与。
  4. 在最近的榜单中,step-2-16k-202411 模型的“Global Average”得f 5 V L t % 0分位居第五,已非常接近第三名和第四名。
  5. 值得注意的是,在提交的成绩中,N 4 + x n u gStep-2 的指令跟随(IF Averag6 g Q F 3e( f / \ y =)得分位居全榜第一,展示了对语言生成细e ( s ! _节的强大控制力。具体来说,该任务要求对《卫报》最近的新文章进行转述、简化、概括或编写故事,同时遵循一项或多项指令,例如字数限制或将特定元素纳入答复中。

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

不断进化的 Step-2 万亿参数大模型

自发布以来,Step-2 持续快速迭代,与国际领先大模型的差距| 1 ] t M Z 9 @ s大幅缩小。

今年 3 月,阶跃星辰推出了 Step-2 语言大模型预览版,成为国内首个由创业公司发布的万亿参数模型。WAIC 2024 期间,阶跃星辰发布了 Step-2 万亿参数语言大模型正式版,其在逻辑推理、编程% v c ; B 3 %、中英文知识和指令理解等方面的表现接近国际顶尖模型。

深入了解,Step-2 万亿参数语言大模, m B & R j ! ! e型有两大亮点:MoE 架构和万亿参数。

训练 MoE 模型有两h ( J & 5 J n n %种方式:基于现有模型进行升级(upcycle)或从头开始训练。upcycle 方式计算需求低且训m & M ) b E 1练效率高,但上限较低。而从头开始训练 MoE 模型难度更高,但能达到更X M i ~ Y O高的上限。

阶跃星辰团队自主研发了 Step-2 MoE 架构并9 | o % – ; P |从头开始训= J { e , o S练。通过专家参数共享和异构化专家设计等创新设计,Step-2 的每个专家模型都得到充分训练,总参数量达到万亿级,每次训练或推理激活的参数量也高于市面上的大多数密集模型。

此外,Z 1 u w y Q d G 3训练这样一个万亿参数模型对系统团队提出了极大挑战。在V T ) * * t Step-2 训练过程中,阶跃星辰系统团队突破了 6D 并行、极致显存管理和全自动化运维等关键技术,成功完成了 Step-2 的每一次升级。

根据 Scaling LF ! c y u ] Caw,当模型参数达到万亿规模时,推理能力(如数学和编程)将显著提升。这促使 Step-2D P k Z / 取得了与 OpenAI o1、Claude 3.5 Sonnet 等模型相当的出色表现。

不断进化的 Step-2 万亿参数语言大模型已接入阶跃星辰的 C 端智能助手「跃问」,w 3 M E x j可在跃问 App 和网页端(https://yuewen.cn)使用。

阶跃星辰的大模型矩阵打造之路

与国内大模型领域的知名公司相比,阶跃星辰是后来者。该公司由微软前全球副总裁姜大昕创办,去年 4 月成立,今年 3 月才崭露头角m F g d r v I

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

1. 阶跃星辰的创始人兼首席执行官姜大昕,曾担任微软全球副总裁和微软亚洲互联网工程院首席科学家。

2. 尽管成立时间较短,阶跃星辰已跻身国内 AI 创业公司第一梯队,并在一年内迅速发布了 Step 系列模型“全家桶”,包括万亿 MoE 语言大模型 Step-2、多模态理解大模型 Step-1.5V 和图像生成模型 Step-1X。

3. 在 AQ 9 y N { LGI 技术路线图上,阶跃星辰选择了单模态、多模态、统一多5 V n模态理解和生成、世界模型和通用人工智能(AGI)的路径。

在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一

在快速迭代模型的同时,这家公司也将模型接入了两款 C 端i o m B C产品智能生活助手– @ [ 1 T跃问和 AI 开放世界冒泡鸭。目前,阶跃星辰已经完成了自身的大模型 + 产品矩阵,呈现出强势崛起的姿态。

以上就是在「最难LLM评测榜单」上,阶跃万亿参数模型拿下中国第一的详细内容!

本文由【好易之】整理自网络!
原创文章,作者:【好易之】如转载请注明出处:https://www.zhengjiaxi.com/zxwd/itzx/118960.html
如有侵权,请邮件联系 aoduoye@qq.com 删除。
本站发布的文章及附件仅限用于学习和研究目的;不得将上述内容用于商业或非法用途,否则后果请用户自负。
本站信息来自网络,版权争议与本站无关。您必须在下载后的24个小时之内,从您的电脑中彻底删除上述内容。
如果您喜欢该程序,请支持正版软件,购买注册,得到更好的正版服务。如有侵权请邮件与我们联系处理。
(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
好易之的头像好易之站长
上一篇 2024-12-29 12:50
下一篇 2024-12-29 12:51

相关推荐

发表回复

登录后才能评论

联系我们

400-800-8888

在线咨询:点击这里给我发消息

 

工作时间:周一至周五,9:30-18:30,节假日休息

关注公众号
请查看头部文章来源地址!本站所有内容均为互联网收集整理和网友上传。仅限于学习研究,切勿用于商业用途。否则由此引发的法律纠纷及连带责任本站概不承担。