138大但人文艺术豆瓣权威榜单登顶138大但人文艺术豆瓣国内第一,阶跃星辰Step-2是如何炼成的_ZAKER新闻
权威榜单登顶138大但人文艺术豆瓣国内第一,阶跃星辰Step-2是如何炼成的_ZAKER新闻
至于梅西为何会选择在该直播间直播以及梅西是否会在直播中带货,目前不得而知。但梅西在旗下直播间的亮相,确实让一季度业绩承压的遥望科技股价迎来了上涨。根据财报数据显示,遥望科技已经连续亏损5个季度,今年一季度归母净利润为-0.38亿元,同比下降143.88%。但是,宣布梅西来了的6月12日下午,遥望科技盘中一度涨超7%,截至收盘,遥望科技上涨5.13%,报收16.40元。
国际权威榜单 LiveBench 官网近日发布了一份最新的模型能力榜单。阶跃星辰自研的万亿参数语言大模型 Step-2 在榜单中位列国产基座大模型第一,成绩逼近 OpenAI 的 o1-mini-2024-09-12,超越 gpt-4o-2024-08-06 、gemini-1.5-pro-002 等国际主流模型,是唯一进入榜单前十名的中国语言大模型,位列全球第五。虽然大模型的评测榜单已经泛滥,但 LiveBench 却是实打实的大有来头。LiveBench 是由图灵奖得主、Meta 首席 AI 科学家杨立昆(Yann LeCun)联合 Abacus.AI、纽约大学等机构推出的大模型测评基准。LiveBench 从包括数学、推理、编程、语言理解、指令遵循和数据分析在内的多个复杂维度对模型进行评估。之所以名字里有个「live」,就是因为这个榜单采用了新颖的数据来源并保持每月更新,这杜绝了大模型通过预训练和微调作弊的可能性。LiveBench 也被行业内誉为「世界上第一个不可玩弄的 LLM 基准测试」,官网上明晃晃地写着「A Challenging,Contamination-Free LLM Benchmark」。简单来说,经常对着当今由 OpenAI 引领的大模型技术路线一通抨击的杨立昆牵头做了一个对刷榜行为异常警觉的大模型评测基准——而就是这样一个十分严苛的榜单,Step-2 在其中 IF Average(Instruction Following,指令遵从)一项中拿到了第一。根据评测基准 LiveBench 的论文中叙述,测评团队在 IF Average 测试中为模型提供了一篇来自《卫报》的文章,要求模型遵循多个随机抽取的指令,同时要求模型完成与文章相关的四个任务之一:释义、简化、故事生成和总结。然后根据任务对指令的遵守情况来评分。评测结果是 Step-2 拿到了 86.57 的平均分,gemini-1.5-flash-002 得到了 84.55,在这两个唯二超过 80 分的模型之后,meta-llama-3.1-70b-instruct-turbo 以 79.08 紧随其后,而以推理能力见长的 o1-preview-2024-09-12 得到了 77.72 分。从 LiveBench 的测试结果看,目前 Step-2 在指令遵从的能力上力压了当今所有国内外语言大模型。01强劲的 Step-2 万亿参数模型 说 Step-2「异军突起」或许并不准确。阶跃星辰在今年 3 月发布了 Step-2 语言大模型预览版,是当时国内首个由创业公司发布的万亿参数大模型。此后的几个月内,阶跃星辰快速迭代 Step-2,在 2024 年 WAIC(世界人工智能大会)期间对外发布了这款模型的正式版,彼时 Step-2 在数理逻辑、编程、中文知识、英文知识、指令跟随等方面体感已经全面逼近 GPT-4。目前,阶跃星辰 C 端智能助手「跃问」已经接入了 Step-2 语言大模型,在跃问 App 和跃问网页端皆可体验。但以成长速度来说,Step-2 用四个月追到与 GPT-4 几乎身位平行,又用了 4 个月完成对 Gemini-1.5 和 GPT-o1 部分能力的反超,步子迈的确实很快。但这也并不让人太过意外,由于特殊的 MoE 架构,Step-2 从最初就被视为极富成长性的「高潜力」基础模型。在大规模语言模型(LLM)的发展过程中,Mixture of Experts(MoE)架构因其独特的优势受到越来越多的关注。这种架构通过选择性地激活部分专家网络,在提升模型性能的同时保持了较高的计算效率。而目前训练 MoE 模型主要存在两种策略:一种是基于已有模型的 upcycle(向上复用)训练,另一种则是从头开始训练。Upcycle 训练是一种利用现有模型进行训练的方法。它的优势在于对计算资源的需求较低,训练效率高。因为可以复用已有的模型参数,训练过程更快。这种方法适合在资源有限的情况下快速开发和验证模型。然而,upcycle 训练的缺点是模型的性能上限较低。由于基于已有模型的拷贝,专家网络可能会出现同质化问题,即多个专家学习到相似的特征,限制了模型的多样性和最终性能。相比之下,完全从零构建和训练 MoE 模型,面临着更高的训练难度和更大的资源投入,但同时能够带来更高的模型性能上限。这种方法允许开发者设计更为复杂和多样化的专家网络,使得每个专家网络都能够学习到更加独特和专门化的特征。同时也提供了更大的灵活性,开发者可以根据具体需求对模型架构进行精细的调整和优化。市面上所谓的 MoE 大部分是前者,而阶跃星辰团队在设计 Step-2 MoE 架构时候选择了后者。这也意味着 Step-2 每次训练或推理所激活的参数量都超过了市面上的大部分 Dense 模型。也让 Step-2 有了另一个更让外界印象深刻的标签——万亿参数模型。而往往更大参数的语言模型意味着更好的交付效果,特别是在指令遵循、内容创作和语义理解层面。02跃迁式进化的阶跃星辰阶跃星辰的名字来自于「阶跃函数」。阶跃函数(Step Function)是一种分段常数函数,其特征是在某些特定点上发生突变,即函数值在这些点上会突然从一个常数值跳跃到另一个常数值。这种函数通常用于描述系统中某种瞬时的变化或状态的切换。在神经网络中,阶跃函数可以用作激活函数,帮助模型在输入达到某个阈值时激活输出。这种激活过程可以视为一种超线性增长,因为输出在某个点上突然变得显著。阶跃星辰也带着相似的某种跃迁和超线性的感觉,这家大模型初创公司没有喧闹的天性,每次回到公众的视线内都意味着有了重大的能力提升。除了语言大模型 Step-2,阶跃星辰也很早就在 Step 系列通用大模型家族中展开了多模态方面的探索。在 2024 年 3 月,阶跃星辰推出了千亿参数的多模态大模型的第一个版本 Step-1V,在 7 月的 WAIC 期间,阶跃星辰一口气连发三款 Step 系列通用大模型新品。除了 Step-2 万亿参数语言大模型正式版之外,也包括 Step-1V 的迭代版本 Step-1.5V 多模态理解大模型,以及 Step-1X 图像生成大模型。半年时间,阶跃星辰从万亿参数的语言大模型出发,迅速完成了语言模型和多模态模型的齐头并进。在 Step-2 万亿参数大模型的加持下,Step-1.5V 多模态模型在图像感知和理解能力上全面提升,并具备出色的视频理解能力。它能准确地识别视频中的物体、人物和环境,并理解视频的整体氛围与人物情绪。除此之外,Step-1.5V 有着非常可观的推理能力,能根据图像内容进行解答数学题、编写代码、创作诗歌等高级推理任务。基于这款模型,阶跃星辰还在 C 端智能助手「跃问」上线了智能视觉搜索功能「拍照问」,用户可以即拍即问,比如拍美食图计算卡路里、拍场景学习英文单词等等。如果说 Step-1.5V 的发布,标志了阶跃星辰在极短的时间内实现了从图像理解到视频理解的跨模态升级,那么新发布的 Step-1X 图像生成大模型,则代表了阶跃星辰在推动多模态理解和生成一致性的技术路线上也有了重要进展。Step-1X 采用全链路自研的 DiT(Diffusion Models with transformer)模型架构,支持 600M、2B、8B 三种不同的参数量,能够满足不同场景的需求。并且 Step-1X 具备强大的语义对齐和指令跟随能力,还针对中国元素和文化进行了深度优化,更具中国风格。这也是 Step-1X 区别于其他模型的重要特色。除了在基座模型层面布局全面、快速迭代之外,阶跃星辰在产品化上步伐同样迅速:智能助手「跃问」和 AI 开放世界平台「冒泡鸭」,是阶跃星辰面向 C 端用户推出的两款产品。基于 Step 系列通用大模型的强大能力,「跃问」能准确地描述和理解图像中的文字、数据、图表等信息,不仅能出色地完成内容创作、逻辑推理、数据分析等任务,也能满足人们在生活场景中的各种需求,比如可以拍图介绍文物古迹背后的历史知识、帮忙制订旅游攻略、辅助健康管理等等。「冒泡鸭」则打造了一个全新的 AI 开放世界。在这里,用户可以探索故事、创作角色,沉浸属于自己的开放世界。目前 AI 应用普遍面临用户使用门槛偏高的问题,阶跃星辰也在通过一系列产品创新,让 AI 应用获得更多普世化场景,能够真正为每个人解决问题。近期,「跃问」将智能视觉搜索功能「拍照问」接入了 iPhone 16 新发布的相机控制按钮,支持用户一键调用智能问答搜索。是国内首个将大模型能力接入 iPhone 16 的大模型厂商,在多模态能力与硬件的结合上迈出了引人注目的一步。在阶跃星辰 CEO 姜大昕看来,模型和应用的关系犹如「灵魂与皮囊」,两者的深度绑定才是实现技术极致的关键,应当形成一种协同进化的关系。应用将抽象的模型能力投射进现实,而模型能力最终决定着一切的上限。近几个月,OpenAI 发布的 o1 一定程度上印证了大模型此前并未受到足够重视的技术方向,也就是强化学习以及强化学习所带来的在推理和规划能力上的突出表现。而在阶跃星辰最初「模拟世界、探索世界和归纳世界」的 AGI 发展路线图中,世界模型和强化学习就在确定要攻克的版图上。现在大模型技术曲线从陡坡放缓的大背景下,无论是模型多模态的能力、杀手级 AI 产品的出现,或者对强化学习训练更好地运用,诸多亟待突破的地方,希望又比以往任何时候都更明确的落在基础模型的能力上。Step-2 和整个 Step 系列模型,或许就是那个阶跃星辰撬动世界的支点。koa12jJid0DL9adK+CJ1DK2K393LKASDad
编辑:吕文达
TOP1热点:人形机器人概念股反复活跃
“很多人问,为什么同样的经济环境,辽宁篮球、排球成绩依然很好,足球就不行?”前述辽宁体育业内人士说,“三大球其实还是有很多不同。我们总结过,辽宁在篮球、排球方面,体校的底子还在,能自己培养一些人,前些年也从外省挖到过周琦(篮球)、丁霞(女排)这样的宝。篮、排球队里,如果有一到两位天赋好的球员,整个队伍的实力和层次,就能上去一大截。这也是辽宁篮球能夺冠,辽宁女排在全国能进前三的原因。”。
TOP2热点:王曼昱3比0沙赫萨瓦里
“辽足解散,这不能怪宋局。”上述一位辽宁当地体育界人士对中国新闻周刊表示,“辽足的衰落,本质上还是经济环境决定的。企业效益不好,咋整……”
TOP3热点:王曼昱3比0沙赫萨瓦里狼牙套高HNP
李伟分析说,原料药企业直接涨价的行为不等同于滥用垄断地位。对于原料药市场而言,如果生产厂家对原料药的涨价涉及价格合谋,就属于滥用垄断地位。在孙晋看来,在一种原料药市场中,生产厂家适当且合理涨价属于正常情况。如果原料药厂家涨价幅度超过该原料药行业平均利润的3倍,就有可能被认为是不公平高价,涉嫌滥用垄断地位。
TOP4热点:偶遇留几手葛夕带狗做手术0855家庭影院
在戚继光舰访问菲律宾之际,美国国家安全顾问沙利文于15日前往日本,并与日本、菲律宾和韩国的安全官员进行会谈,商讨对抗中国威胁的合作方式。白宫国家安全委员会称,沙利文在日本期间还将参加由美国、日本和菲律宾组成的首次三边安全对话会议。《外交学者》网站15日刊登的一篇报道表示,在与中国竞争日益紧张之际,华盛顿加大了与亚洲盟友的合作力度。
公开简历显示,宋凯1965年出生,今年58岁,1988年工作生涯起步于辽宁大学体育教研部。1998年短暂从沈阳市体委副主任过渡后,宋凯进入辽宁省体育局领导层,担任局长助理。
TOP5热点:五毛人民币假钞在美国卖五美金用舌头舔
但最令外界关注的职业足球领域,《足改方案》在执行层面与初衷和目标出现许多偏差,给业界带来了“阵痛”。中国新闻周刊获悉,不少球队希望,对于异地转让、中性名政策、限薪方式、股权改革等方面结合实际进行重新探讨。
TOP6热点:五毛人民币假钞在美国卖五美金51cgfun吃瓜网怎么进
孙晋分析,每次曝光的垄断行为都像“打怪升级”,这次原料药垄断行为已达到“天花板”地步。在他看来,这两家企业垄断了两种原料药市场,表面上看,企业赢得了暴利,但暴利之下的“蝴蝶效应”牵一发而动全身,上下游产业链、患者、国家医保体系甚至整个社会都在承受隐性的负面损害。孙晋进一步指出,伴随着上游原料药生产与销售垄断,生产两种制剂的下游企业无利可赚,生产积极性不高,导致市场药物供应不足,出现涨价、缺货甚至断货的问题,需要用药的人买不到药甚至用不起药,最终导致患者病重甚至死亡。
TOP7热点:年轻人新宠黄金贴片陷阱不少日本控股水产公司
梅西此行不仅引爆了球迷的热情,还带动一场商业的狂欢,球王本人也快被潮水般的流量薅秃了。而由于主办方经验不足,姗姗来迟的商业赞助、谣言满天飞的陪酒谣言……更是让梅西此次的中国行增添了些许突兀和混乱。
“辽足解散,这不能怪宋局。”上述一位辽宁当地体育界人士对中国新闻周刊表示,“辽足的衰落,本质上还是经济环境决定的。企业效益不好,咋整……”
TOP8热点:有演员称被郑某峰拖欠工资并拉黑黄金网站app观看大全
黄永玉在著作中记录了他年轻时和许多前辈、大家的相处细节与珍贵友谊,感叹“年轻人容易错过老人”。他曾表示,每个老人家都有可爱可敬的东西,有时间应该多跟他们接近,能得到很多教益。黄永玉因病于2023年6月13日离去,一路走好!
总台央广记者:近日,台媒报道称,美军正针对台海研发低成本、长航时的无人机,将执行打击或电子对抗任务。请问发言人对此有何评论?
TOP9热点:射雕泰国票房SSIS-698英雄登场
其实从一开始,梅西本次的中国行就充满不确定性。除了行程安排外,主办方虹桥国际更是在招商和宣发等方面也显示出了经验不足和不专业。
TOP10热点:明星脸被用于实时通话AI换脸不露破绽宾馆不隔音原声录音
“辽足解散,这不能怪宋局。”上述一位辽宁当地体育界人士对中国新闻周刊表示,“辽足的衰落,本质上还是经济环境决定的。企业效益不好,咋整……”