LiveBench 最新榜单:阶跃星辰位列中国大模型第一
近日消息,新榜国际权威榜单 LiveBench 官网公布了最新的单阶第语言大模型测评结果,阶跃星辰自研的跃星万亿参数语言大模型 Step-2 的技术表现位列中国基座大模型第一,成绩逼近 OpenAI 的辰位 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、列中gemini-1.5-pro-002 等国际主流模型,模型是新榜唯一进入榜单前十名的中国语言大模型,位列全球第五。单阶第另外,跃星同时上榜的辰位中国大模型公司还有通义千问和 DeepSeek。
LiveBench 是列中由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、模型纽约大学等机构联合推出的新榜大模型测评基准。LiveBench 从包括数学、单阶第推理、跃星编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估,采用新颖的数据来源并保持每月更新,被誉为「世界上第一个不可玩弄的 LLM 基准测试」。
值得关注的是,Step-2 在 IF Average(Instruction Following)一项表现突出,超越包括 o1-preview-2024-09-12 在内的所有国内外语言大模型。这意味着,Step-2 在语言生成上对细节有最强的控制力,模型能够更好地理解和遵循人类指令,捕捉到模糊需求背后用户的真实意图,对通用及特定领域知识的覆盖上都有更好的表现。比如当使用 Step-2 创作古诗词,模型在发挥创意的同时能够对字数、格律、押韵、意境做到精准把握。
据了解,今年 3 月,阶跃星辰发布了 Step-2 语言大模型预览版,这是国内首个由创业公司发布的万亿参数模型。目前,阶跃星辰开放平台为开发者提供 Step-2 的 API 接口,该公司的 C 端智能助手「跃问」也已经接入了 Step-2 万亿参数语言大模型,用户在跃问 App 和跃问官网(https://yuewen.cn)皆可体验。
相关文章
本赛季五大联赛单场传射榜:萨拉赫8次领跑,萨卡、马尔穆什在列
12月23日讯 利物浦在本轮英超5-1领先热刺,萨拉赫贡献2射1传。数据统计显示,萨拉赫在本赛季已经8次单场传射,领跑五大联赛。萨卡阿森纳)和马尔穆什法兰克福)均6次并列次席,拉菲尼亚巴萨)则有4次。2024-12-28- 11月4日讯Score90盘点了与梅西和C罗合作场次最多的球员最佳阵容,布斯克茨和佩佩分别是与梅西和C罗合作次数最多的球员。与梅西合作场次最多的球员最佳阵:门将:巴尔德斯353)后卫:阿尔巴372)、2024-12-28
博主批伊万:陶强龙整个赛季1球2助,这种数据的攻击手能进国足?
11月04日讯 国足公布11月战巴林、日本集训名单,武汉三镇前锋陶强龙入选。博主“卖萌谁在行”评价道,陶强龙整个赛季1球2助攻,就这种数据的攻击手能进国家队,是在开国际玩笑哦。博主原文:之前伊万的临场2024-12-28- NAVI的11 有几分是天霸送的?由橙子和汽水发表在绝地求生 pubg2024-12-28
- 美国当地时间周四,埃隆·马斯克Elon Musk)创立的人工智能初创公司xAI提交给美国证券交易委员会SEC)的监管文件显示,该公司在最新一轮融资中成功筹集了60亿美元资金,公司估值超过400亿美元。2024-12-28
国足名单对比:刘洋、阿兰无缘,朱辰杰回归,王子铭、陶强龙入围
11月4日讯 国足公布18强赛客战巴林、主场对阵日本的27人集训名单,相较于上期24人名单,球队做出多处调整,刘洋、黄政宇、阿兰、韩鹏飞等人无缘,朱辰杰、胡荷韬、程进、王子铭、曹永竞、韩佳奇、陶强龙等2024-12-28
最新评论