OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 特朗普和马斯克想不通,美国基建,为啥远远落后中国了?

责任编辑: 郗峰

发布时间: 2024-09-20 20:30:58

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

美国新屋开工大跌眼镜,降至新冠疫情以来新低,黄金突破新高

2

外交部美大司司长杨涛会见美国青年政治家代表团

3

拜登回应是否后悔退选

4

近东救济工程处:以军发布新撤离令后加沙居民已“无处可去”

5

韩国检方出手!这次是文在寅夫妇

6

眉山彭山:夏日消防宣传进社区

7

《上海市低空经济产业高质量发展行动方案(2024-2027年)》印发

8

国家市场监管总局:督促退还涉企违规收费3.93亿元

9

日本菲律宾签署《互惠准入协定》

10

【学习贯彻党的二十届三中全会精神】我区召开学习贯彻党的二十届三中全会精神宣讲动员会

11

卡塔尔首相与伊朗代理外长通电话讨论地区局势

12

特朗普飞机故障降落

13

"挪威学者感慨:美方无法说服各国搞垮中方,且效果适得其反!

14

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

15

中国电信圆满完成全国生态日主场活动通信保障任务

16

他信“85后”女儿佩通坦当选泰国新总理,“改革”将成执政关键词

17

曝0元得充电宝套路

18

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

19

2024甘肃民营企业100强发布会暨“民营企业进边疆”活动在酒泉市举行

20

#不爱别伤害#世界这么大遇见你不容易

21

包银高铁惠银段开始运行试验

22

做足“美”的文章、开辟“新”的场景,暑期文旅新亮点释放经济新动能

23

济南市教育局新增一名副局长,此前任职市科技局

24

担负起新的文化使命,建设中华民族现代文明

25

最高人民法院党组成员、政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

26

欧紫霞是军嫂

27

吉铁路公司党委副书记、总经理黄鑫一行到陕煤集团座谈交流

28

江油市举办2024年高校毕业生等青年就业服务攻坚行动专场招聘

29

中泰联合军演在即,美国急眼:泰国新总理与中国关系密切

30

沙特不许伊朗越境打击以色列,威胁击落;巴基斯坦要给伊朗导弹

31

猴痘疫情再次引发“最高级别警告”,我们应该担心吗?

32

男子挖地窖囚禁6名女子,最终被判死刑,受害女子却说:我自愿的

33

辟谣中学生为爱跳江

34

记者:鲁特尔即将接受布莱顿的体检交易金额为4000万英镑解约金

35

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被开除党籍和公职

36

如何强化反垄断和反不正当竞争?市场监管总局答封面新闻

37

临沂3名干部拟任新职,其中2位“80后”

38

最高法政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

39

在新期待、新机遇、新动力中,见证中国式现代化发展

40

成功破局!皎漂港对我国有多重要?马六甲海峡不再是唯一

20

那么,以色列几十年"

20

遗弃3岁女儿被判刑

20

深港两地青少年“同庭”学法

20

河北大学附属医院召开优秀医师表彰大会

20

刘捷在城西科创大走廊调研时强调:以科技创新塑造发展新优势为全市高质量发展提供强劲动力

20

福建向金门供水超3500万吨

20

单县召开项目对接洽谈会

20

黔西南州委理论学习中心组举行集中学习研讨会

20

依法平等护企,“秘籍”大公开

热门攻略

1

斥特朗普关税“摧毁美国人”,哈里斯兜售新经济梦想:全力降低生活成本,人人有机会成功

2

据中国网报今日曝:入侵乌军已占领俄罗斯土地1150平"

3

美国总统大选辩论将于9月10日在费城举行

4

女导游嘲讽游客穷

5

曝0元得充电宝套路

6

安徽望江举办2024年智慧农机操作手培训活动

7

谷歌被判败诉

8

滨州市自然资源规划局到全市地面沉降监测网建设项目现场调研

9

越南总理范明政主持召开金融领域立法工作会议

10

小药盒守护“大健康”,小征文传递“大温暖”

11

也门南部自杀式袭击死伤人数升至34人

12

天水辟谣房以旧换新

13

他信女儿任泰国总理

14

俄法举刀疯狂互捅-奥运禁赛算什么-俄在非洲断法国财路

15

马晓磊到淄川区宣讲党的二十届三中全会精神并调研经济社会发展情况

16

巴拿马运河管理局再次提高运河通行能力

17

谢瑜回应家徒四壁

18

据新加坡联合早报报道,美国加州民主党议员当地时间1"

19

台风“安比”继续北上将给日本多地带来强降雨

20

惠州仲恺高新区人才交流与劳动就业服务中心主任蔡华昕被查

20

“县城热”折射城镇化新趋势

20

夏威夷的“死亡天梯”,一失足便丧命,敢挑战的老外络绎不绝!

20

三朝元老李越宏夺金

20

华人女子遭黑人歧视,当街被一拳爆头,在国内时的豪横呢?

20

北溪事件“真相”流出,美国甩锅乌克兰,泽连斯基果断反击

20

美国3天军售350亿

20

总统大选首场辩论特朗普完胜!新总统已定?对中美关系影响重大

20

巴西多地举办灯光秀庆祝中巴建交50周年

20

民政部集中回应离婚冷静期、结婚无需户口簿等热点

20

世界各国名人对日本人都怎么评价?

20

美国独立调查记者:美国或因兴奋剂丑闻,无法举办洛杉矶奥运会

20

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

20

“东南亚彻底老实了,巴西也表示要站好队伍”#国际局势

20

"俄罗斯人在克林基附近变得更加活跃,乌克兰人撤退到新的阵地

20

辟谣女孩被人贩挖眼

20

德国情报局前局长:波兰有可能参与“北溪”管道爆炸事件

20

MaggieRogers&LeonBridgesRiver(住在达拉斯)2024年5月31日

20

玉树州大电网未覆盖乡供电工程开工

20

黄果树游客高喊退票

20

37岁贝东丹当泰国总理,她爸爸和姑父姑姑都是前总理,祖籍在广东

20

演砸了!歼灭战全面打响,乌克兰上演最后一搏!#国际局势

20

《人民司法》2024年第19期目录

20

中建八局四公司基础设施公司沈海高速项目举办“落实网络行为规定”主题活动

20

智障男抢劫改判无罪

20

海地发生囚犯越狱事件致10余人死亡

20

WTT盛赞马龙GOAT

20

美国总统大选辩论将于9月10日在费城举行

20

中纪委点名医药腐败

热门游戏

  • 1
    揭阳纪委重拳出击:原副书记何亿严重违纪违法被立案调查!

    射击枪战 /热度:71020

    点击下载

    宁波货轮集装箱爆炸

  • 2
    1家3口大群互骂1时

    射击枪战 /热度:92390

    点击下载

    伊朗遭遇大规模网络攻击:银行系统瘫痪,网络战正式打响?

  • 3
    等了两个月,大陆动真格,一招直击“台独”七寸,赖清德面临绝路

    射击枪战 /热度:58273

    点击下载

    北溪事件“真相”流出,美国甩锅乌克兰,泽连斯基果断反击

  • 4
    崩坏3 俄方称已控制乌东战略重镇波克罗夫斯克附近村庄

    射击枪战 /热度:96807

    点击下载

    河南省监狱管理局发布“18岁考生上岸”情况通报

  • 5
    原神 澳门科技大学月球与行星科学国家重点实验室主任宗秋刚:空间科学发展要团结所有力量

    射击枪战 /热度:89584

    点击下载

    中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

  • 6
    出发吧麦芬 当选泰国新总理,他信37岁女儿发声:“竭尽所能”带领泰国走出“经济危机”!中方表态:祝贺

    射击枪战 /热度:42323

    点击下载

    聚焦高质量发展丨“傻瓜肥”里的新质生产力

  • 7
    永劫无间手游 【美加边境铁路桥倒塌】(美联社)——一座横跨明尼苏达州国际瀑布城和安大略省弗朗西

    射击枪战 /热度:54536

    点击下载

    国乒女团晋级决赛

  • 8
    向僵尸开炮 海关总署发布相关公告!一文读懂猴痘传播方式、临床表现、预防方法

    射击枪战 /热度:03517

    点击下载

    吃达美乐被二度烧伤

  • 9
    鸣潮 麻六记被曝吃到苍蝇

    射击枪战 /热度:42011

    点击下载

    德州市委宣传部一行到中心(集团)进行学习考察

  • 10
    艾塔纪元 中国对锑等物项出口管制引关注,商务部:不针对任何特定国家和地区

    射击枪战 /热度:72189

    点击下载

    老年甜宠剧围猎父母

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 活动专区 | 赛车竞速 | 官方公告 |