会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 LiveBench 最新榜单:阶跃星辰位列中国大模型第一!

LiveBench 最新榜单:阶跃星辰位列中国大模型第一

时间:2024-12-27 19:33:13 来源:摩顶至踵网 作者:综合 阅读:721次

近日消息,新榜国际权威榜单 LiveBench 官网公布了最新的单阶第语言大模型测评结果,阶跃星辰自研的跃星万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的辰位 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、列中gemini-1.5-pro-002 等国际主流模型,模型是新榜唯一进入榜单前十名的中国语言大模型,位列全球第五。单阶第另外,跃星同时上榜的辰位中国大模型公司还有通义千问和 DeepSeek。

LiveBench 最新榜单:阶跃星辰位列中国大模型第一

LiveBench 是列中由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、模型纽约大学等机构联合推出的新榜大模型测评基准。LiveBench 从包括数学、单阶第推理、跃星编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估,采用新颖的数据来源并保持每月更新,被誉为「世界上第一个不可玩弄的 LLM 基准测试」。

值得关注的是,Step-2 在 IF Average(Instruction Following)一项表现突出,超越包括 o1-preview-2024-09-12 在内的所有国内外语言大模型。这意味着,Step-2 在语言生成上对细节有最强的控制力,模型能够更好地理解和遵循人类指令,捕捉到模糊需求背后用户的真实意图,对通用及特定领域知识的覆盖上都有更好的表现。比如当使用 Step-2 创作古诗词,模型在发挥创意的同时能够对字数、格律、押韵、意境做到精准把握。

据了解,今年 3 月,阶跃星辰发布了 Step-2 语言大模型预览版,这是国内首个由创业公司发布的万亿参数模型。目前,阶跃星辰开放平台为开发者提供 Step-2 的 API 接口,该公司的 C 端智能助手「跃问」也已经接入了 Step-2 万亿参数语言大模型,用户在跃问 App 和跃问官网(https://yuewen.cn)皆可体验。

(责任编辑:焦点)

相关内容
  • 昨天就因病没能上场!明天勇士VS篮网:库明加因生病出战成疑
  • 官方:姆巴佩当选2024法国足球先生 萨利巴位列第2
  • 恩凯提亚为水晶宫出战10场英超0球0助攻,已连续27场联赛没进球
  • 利物浦01落后布莱顿!三笘薰送出横传,卡迪奥卢破门
  • 状态火热!福克斯上半场9中7爆砍24分1板2助1断 三分3中3
  • 记者:拜仁不会在股东大会宣布穆西亚拉续约,谈判仍需时日
  • 青春校园奇幻AVG《神明高中生》Demo,现已上线steam平台!
  • [流言板]火勇首次交手双方均得到120+,近2次交手双方均不过100分
推荐内容
  • 崔永熙:喷我的也好,喜欢我的也好,但对篮球的激情不能少
  • 埃贝尔:罗德里赢得金球奖实至名归,穆西亚拉未来也能获奖
  • 蔡慧康:所有球员、教练都保持平常心,打法很统一踢出攻势足球
  • 现象级!《流放之路2》Steam在线峰值超45.9万
  • 我 机器人艺术家 一幅画卖700万
  • 卡迪奥卢:很高兴打进英超处子球,但赢球在我看来更重要