OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 黑龙江省牡丹江市政府原副市长齐忠彦被“双开”

责任编辑: 昌昱

发布时间: 2024-09-20 07:27:49

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

游泳混合接力获银牌

2

全红婵家乡连夜修路

3

青浦:连续变道急刹“路怒”司机被行拘

4

江苏拟发行400亿特殊新增专项债

5

统一不用再等了!赖清德最怕来了,大陆换了打法,美国也帮不了

6

国际油价,涨!金价,涨!什么情况?

7

14岁越南孤儿竟然在野外收集到了货奇特物,绝大多数人都接受不了

8

携手共建美丽家园

9

莒县农商银行多措并举赋能乡村振兴

10

美媒再把“北溪”事件矛头指向乌克兰

11

以色列定居者袭击巴勒斯坦村庄致1死1重伤,遭联合国、欧盟、英法猛批

12

厦门:34项技术和产品入选“绿色目录”

13

迈巴赫送考少年发声

14

国乒男团冲五连冠

15

徐嘉余独自练8个月

16

涉嫌严重违纪违法!云南2名局长主动投案,接受审查调查

17

贵阳市率先在全省实现企业上市合法合规信息核查“一件事”高效办理

18

最新停水通知!预计持续48小时!涉洛阳孟津区这些区域

19

我国“山水工程”持续稳步推进

20

库尔斯克失守后,俄罗斯人对普京的不满达到了最高点

21

尼日利亚中部至少20名大学生遭绑架

22

浙江又来两所新大学

23

也门胡塞武装,禁止以色列船只过海峡,为什么说美国骑虎难下

24

马龙说不适合当教练

25

绿色发展风光正好

26

“中国造”的特朗普娃娃被隐去产地,特朗普粉丝被背刺了…

27

鬼火少年飙车交警拦车被拖行

28

英国刚刚公开表示!

29

潘展乐这段先别播

30

俄媒:乌军推进俄境放缓或肮脏弹袭核厂

31

突发!巴勒斯坦总统与所有领导层共赴加沙!要么胜利,要么殉难!

32

东北人在杭热到报警

33

美国宣布以色列与哈马斯谈判取得进展

34

《生态农田实践与展望》连载之五十一:告别“白色污染”

35

热闻|各地文旅官号整活,伍鹏瞬间“爬”遍全国名山!本人亲自回应:笑死了

36

非法收受财物,重庆市涪陵、万州两名干部被“双开”

37

苏丹中部一村庄遭袭致80人死亡

38

"美国防长奥斯汀宣布己开始向德国提供爱国者

39

中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

40

国台办:台公布的恶性撞船事件“调查结论”推卸责任不能接受

20

美国在破产的道路上越走越远,拜登紧急派人访华,这次有要事相求

20

嘲讽辱骂全红婵的三个南方日报记者,老婆孩子全都是美国国籍

20

滕州步行街提升动态

20

高温慰问送清凉工会将关怀送到职工心坎上

20

割接提前完成!8月18日起,南京地铁7号线南段、北段恢复正常运营

20

美国国务院批准向加拿大出售战术导弹

20

镜观·领航|巩固发展新时代生态文明建设成果

20

暴雨期间深圳全市出动防汛人员超2万人次无灾险情发生城市平稳运行

20

梦露雕像饱受争议

热门攻略

1

美国总统大选辩论将于9月10日在费城举行

2

美媒:美方已做出让步,希望中方能在金融层面支持美国

3

济南市教育局新增一名副局长,此前任职市科技局

4

中老缅泰外长举行非正式会晤

5

源来好创业丨山东和泰创新医养结合,开启健康养老新时代

6

四川巴塘县水利局原四级调研员朱扎严重违纪违法被开除党籍和公职

7

媒体关注:中国与湄公河国家将深化多领域合作

8

湖南发生重大刑案

9

胡志莉当选随州市人民政府市长

10

王自如被限制高消费

11

西班牙斗牛太厉害了

12

“台独”末日来了!大陆传爆炸性消息!美直接吓得不敢说话?

13

美国共和党副总统候选人万斯所乘波音飞机出现紧急情况迫降

14

他信家族再度执政,第四次问鼎总理职位——佩通坦能否打破诅咒

15

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

16

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

17

俄罗斯媒体:乌克兰策划用“放射性弹头”袭击俄核废料储存设施

18

青海省自然资源厅与青海省气象局联合发布地质灾害气象风险橙色预警[II级/严重]【2024-08-16】

19

盛阅春会见采埃孚集团执行副总裁汪润怡一行

20

全球最幸福国家,因错沦为“强奸第一大国”

20

王毅:澜湄合作已成为地区合作的“金色平台”

20

因给乌克兰捐款,俄美双国籍舞蹈家回俄时被捕,或因叛国罪入狱12年

20

请网红带货损失千万

20

贪腐女干部忏悔痛哭

20

韩总统光复节遭批

20

世界卫生组织称苏丹霍乱疫情已致316人死亡

20

唐山市一级巡视员曹全民接受纪律审查和监察调查

20

统一正加速!民进党当局邀请下,美日等11国政客将集体窜台

20

法国一小型民用飞机坠海1人死亡

20

以进一步全面深化改革开辟中国式现代化广阔前景

20

今年上半年烟台中欧班列开行69列,全年预计达到150列

20

推动科技服务业高质量发展南通专题部署相关工作

20

台湾气象部门:花莲今日地震为“4·3花莲强震”余震

20

广东云浮“80后”博士副市长王巍通报被查

20

滕州步行街提升动态

20

汴梁司法|尉氏司法局:开展“伴随式”执法监督提升行政执法效能

20

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

20

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

20

滨州首家进社区婚姻登记巡回点在阳信县劳店镇湖畔嘉苑揭牌启用

20

也门南部自杀式袭击死伤人数升至34人

20

台湾花莲海域6.1级地震后发生7次余震有居民被困电梯

20

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

20

拜特对决从总统辩论到美式骂街拜登辩论惨败的背后是谁的错?

20

江西省率先启动药品经营使用环节全品种追溯工作

20

卡塔尔美国埃及称加沙停火谈判有建设性

20

下限4027元,上限20133元!湖南调整社保月缴费基数上下限

20

把党的领导贯穿改革各方面全过程

20

帅化民:美国跟日本坏透了美国掩盖了很多日本干过的坏事

热门游戏

  • 1
    中国移动上海公司原资深经理张维华被开除党籍

    射击枪战 /热度:47554

    点击下载

    印度女实习医生被奸杀引发全国抗议,至少30万医护人员走上街头!莫迪发声

  • 2
    「人民日报」坚持宽严相济做好轻罪治理

    射击枪战 /热度:10703

    点击下载

    俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

  • 3
    以同意恢复停火谈判

    射击枪战 /热度:55179

    点击下载

    朱婷机场劝不要跟拍

  • 4
    崩坏3 市场监管总局:今年年底建成全国“个体工商户名录”,让帮扶措施更精准有效

    射击枪战 /热度:53019

    点击下载

    他从民警晋升至正部级,58岁官至天津市政协主席,62岁畏罪自杀

  • 5
    原神 刺杀为何总针对特朗普?特朗普的“三大罪”。

    射击枪战 /热度:01785

    点击下载

    婴儿因空袭成孤儿

  • 6
    出发吧麦芬 城市里的人突然消失,仅存的人还遭到面具人追杀

    射击枪战 /热度:70561

    点击下载

    热点问答|三问“北溪”爆炸调查新进展

  • 7
    永劫无间手游 加沙女孩用嘴接卡车漏水解渴,令人泪目

    射击枪战 /热度:52867

    点击下载

    "卡德罗夫精锐部队指挥官一周内五次表示,在库尔斯克阻止乌军推进

  • 8
    向僵尸开炮 惊天大新闻!

    射击枪战 /热度:83225

    点击下载

    狐狸小姐不好惹:来自超甜职场CP的心动狙击,甜到令人窒息

  • 9
    鸣潮 这是真正的火车呀,电动车锂电池的危害之大,不可想象。

    射击枪战 /热度:12018

    点击下载

    "佩通坦当选泰国新任总理。

  • 10
    艾塔纪元 青岛平度推动农产业转型升级书写乡村振兴新篇章——“项目的力量”系列报道(五)白沙河街道阁北头养殖示范基地

    射击枪战 /热度:76212

    点击下载

    「图解」聚焦高质量发展市场监管取得五大成效

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 虚拟道具 | 跨界游戏合作 | 手游专区 |