OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 水谷隼说马龙突破口

责任编辑: 梅翀

发布时间: 2024-09-20 14:35:54

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

台风“安比”继续北上日本首都圈航班大规模取消

2

欧盟对华加征反补贴税恐将错失中国投资

3

美国的火车是内燃机,我国高铁却用电!哪个更先进?

4

花莲又震跟日本地震有关吗?|封面科考队

5

张本智和称宁愿去死

6

郑好好回家写作业

7

上海市扫黑除恶斗争领导小组(扩大)会议召开,朱忠明出席并讲话

8

也门南部发生汽车炸弹爆炸事件已造成19人死亡

9

中南半岛开始不太平,美国突然出手,越南的盲目,可能拖累中国

10

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

11

美国犹他州连续遭遇雷暴天气,居民拍下洪水冲破窗户涌入地下室的惊险瞬间

12

法媒:里海,中国和欧洲未来的贸易枢纽?

13

第二届全区公诉人与律师论辩大赛总决赛圆满落幕

14

孙海洋办孙卓升学宴

15

澳门特区政府学习贯彻二十届三中全会精神传达会召开

16

96年副处级实为司机

17

国家电投与中国安能签署战略合作框架协议

18

悉尼一公寓发生命案

19

李发彬打破奥运纪录

20

深圳盐田边检站全力护航迎开渔

21

孙颖莎世界排名第一

22

杀疯了!俄罗斯又失一州

23

张雨霏奖牌太多超重

24

哈里斯努力白费?一觉醒来,特朗普“强援”曝光,舆论彻底炸锅

25

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

26

蚌埠市人大常委会原党组成员、副主任汤春义被查

27

行进中国·看生态之美——青山依旧湟水悠长

28

《上海市低空经济产业高质量发展行动方案(2024-2027年)》印发

29

在全市重点工作调度推进会议上的讲话——公文写作参考素材

30

河口采油厂安全生产功夫在“事前”

31

金门地检署公布“2·14”撞船事件调查结论,国台办:罔顾事实,刻意推卸责任

32

澳门公布行政长官选举日程表

33

美国WTI原油下跌超过2%卡塔尔首相敦促伊朗推迟对以色列的袭击

34

利津河务局联合胜利油田开展崔庄控导运行管理检查

35

警方回应小飞机坠落

36

市场监管总局:连续开展民生领域反垄断执法专项行动强化民生领域监管执法

37

谷爱凌首个全马完赛

38

甘谷县召开学习贯彻党的二十届三中全会精神宣讲动员会

39

2024西辽河文化研讨活动在通辽市举行

40

王昶劝接机粉丝理智

20

山东省政府研究室调研组来滨州调研

20

泰国总理的权力有多大?怎么就被法院解职了?

20

踩着泥巴做实验,也是参政议政的方式!政协是什么?政协委员又是怎么履职的?

20

银昆高速全线通车

20

根本不用中国出手!这次马科斯把路走窄了,杜特尔特女儿开始反击

20

奥运会的pin长啥样

20

国台办:民进党当局歪曲惩“独”措施、混淆违法行为和两岸正常交流

20

#一个正能量的传播者#严厉打击违法"

20

最高人民法院党组成员、政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

热门攻略

1

奥运拳击性别争议

2

巴基斯坦报告3例新增猴痘感染病例

3

俄罗斯警告中国,如果武统台美国不会动手,但必须警惕这四个国家

4

英国刚刚公开表示!

5

突发!瑞典首都确诊非洲以外首例猴痘变种病例

6

河南新野检察:新进人员开启“入职第一课”全方位提升履职能力

7

图1-2,乌克兰那边确认了,一爱尔兰裔的19岁小伙子雷茹克,在乌克兰战场成了俄军

8

惠若琪哭着解说

9

水利部启动2024年夏秋季“引江济太”应急调水

10

欧盟委员会投票制裁中国,27个国家里有26个反对,到底谁同意了?

11

日本政坛变天,岸田文雄宣布辞职,耻辱下台原因彻底曝光丑闻发酵

12

外卖员当街被捅倒地

13

他已任湖南省政府副秘书长

14

无锡惠山:党建“一链通”赋能产业发展“路路通”

15

南海开渔首日广东逾两万艘渔船出海海事部门多举措护航

16

省领导来岩调研并宣讲党的二十届三中全会精神

17

全球新冠感染率激增

18

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

19

高新区召开党工委第9次理论学习中心组学习会

20

婚姻登记条例拟修改二十多年来首次修订民政部公开征求意见

20

凯特与威廉同框露面

20

【台湾观察】柯文哲竞选经费风波牵动岛内政治板块

20

男子改判无罪获国家赔偿

20

江西小炒为何火了

20

地方借钱超4万亿

20

多米尼加总统阿比纳德尔宣誓就职

20

中美俄风向或要变天?特朗普一语引爆舆论,对中方提前摊牌了?

20

赵俊民专题调研网络统战工作

20

义马市工业和信息化局认真贯彻落实市委十届八次全会和政府全体(扩大)会议精神

20

张若昀抽烟偷感

20

马尔尚无视汪顺教练

20

国台办:民进党当局歪曲惩“独”措施,混淆违法行为和两岸正常交流

20

加快经济社会发展全面绿色转型

20

中老缅泰外长举行非正式会晤

20

江西省市场监督管理局党组书记、局长谢来发接受审查调查

20

福州市、晋安区两级人社部门携手共启台胞台企劳动争议调解新篇章

20

情况不妙,岸田文雄被逼下台,辞职前派人访华,求中国答应2件事

20

河北康保:融入京津冀协同发展力度足成果丰

20

河南监狱管理局通报18岁考生上岸

20

中国国防部:南海不应成为域外势力的“狩猎场”

20

德国情报局前局长:波兰有可能参与“北溪”管道爆炸事件

20

伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

20

江西省市场监督管理局党组书记、局长谢来发接受审查调查

20

樊振东有始有终

20

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

20

殡仪馆藏190具腐尸

20

8月7日国际要闻,全球传来10个新消息,了解最新的局势!

20

继承已故男友遗产

热门游戏

  • 1
    国台办:台方应严惩“2·14”恶性撞船事件责任人

    射击枪战 /热度:81454

    点击下载

    唐山市原副市长曹全民被查

  • 2
    北京密云:数字政务新模式让企业事“更高效办”

    射击枪战 /热度:36015

    点击下载

    乌克兰高兴太早了?俄头号盟友出手,泽连斯基态度发生180度转变

  • 3
    眉山彭山:夏日消防宣传进社区

    射击枪战 /热度:41924

    点击下载

    印度一家监控拍下,可怕的一幕,夜晚两只狮子出来觅食!

  • 4
    崩坏3 城市有情感安家有温度

    射击枪战 /热度:53675

    点击下载

    美媒:美方已做出让步,希望中方能在金融层面支持美国

  • 5
    原神 不用大陆出手了?台海大局已定!美突传重磅消息,赖清德大祸临头

    射击枪战 /热度:23932

    点击下载

    关于深化澜沧江-湄公河水资源合作的倡议(摘要)

  • 6
    出发吧麦芬 中国运载火箭解体形成碎片云?外交部回应消息来源于环球时报,《“中国火箭解体形成碎片云”?外交部回应》。

    射击枪战 /热度:35524

    点击下载

    Meta广告管控失职失责,19名美国议员联合质询扎克伯格

  • 7
    永劫无间手游 郑钦文谈QueenWen

    射击枪战 /热度:75787

    点击下载

    德国的豪华监狱,坐牢想渡假一样

  • 8
    向僵尸开炮 宁杭支队第一大队联合开展防汛应急演练

    射击枪战 /热度:79430

    点击下载

    难以置信!一男子代表国人向日本鞠躬道歉,画面曝光,网友怒了!

  • 9
    鸣潮 霍乱疫苗严重短缺世卫组织敦促增产

    射击枪战 /热度:23237

    点击下载

    初秋晒葵忙

  • 10
    艾塔纪元 "乌克兰上万大军调动为何瞒过俄罗斯?

    射击枪战 /热度:82790

    点击下载

    围绕“加快城市更新项目建设持续优化城市功能和空间布局”,区领导到沙河镇调研指导工作

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏背景故事 | 策略模拟 | 会员特权 |