OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 收受贿赂、截留保安工资……郑州5人被通报

责任编辑: 匡洛

发布时间: 2024-09-20 15:36:32

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

以安全官员:以色列高官可能遭暗杀

2

原始部落眼里的鬼魂,喜欢捉走小孩,身体一半白一半黑(21)

3

“无废城市”是什么?怎么建?这场论坛上都有了解读

4

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

5

唐山官场持续震荡,深夜通报:原副市长曹全民被查!

6

扎克伯格为妻立雕像

7

两岸专家学者齐聚潍坊交流郑玄文化

8

美股七巨头股价暴跌

9

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

10

宗馥莉再接手母亲名下公司

11

超越美国:中国经济挑战外太空

12

光伏板下牧牛羊

13

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

14

中纪委官网通报,汤春义接受审查调查

15

国际油价,涨!金价,涨!什么情况?

16

辟谣龙脊广场有命案

17

探秘大自然的绿色宝藏:蒲公英

18

马龙问你要考研啊

19

中国花游队奥运首金

20

"震撼新闻曝光!

21

谢震业200米退赛

22

突发!“家门口”警报拉响!中国火速行动,外交部表态前所未有

23

南京通报5名干部被查

24

美国在破产的道路上越走越远,拜登紧急派人访华,这次有要事相求

25

乡村新生活(图)

26

美国总统参选人:中国周边有313个美军基地,美国人需要醒醒了

27

他信家族在泰国政"

28

王毅谈澜湄合作下阶段发展

29

毫无底线!美国驻华大使馆否认P图,称中国媒体已撤稿,惨遭打脸

30

吴艳妮复活赛死亡组

31

广西交投玉林公司:强化内部审计推动安全生产提质增效

32

澳门公布行政长官选举日程表

33

果然要动真格了?赖清德当众摊牌,大陆迅速反制,名单正式公布

34

韩国检方出手!这次是文在寅夫妇

35

英国首相斯塔默去酒吧消费,被老板赶了出来:我的酒吧不欢迎你!

36

遂平县检察院:“三个聚焦”提升代表委员联络工作质效

37

#不爱别伤害#世界这么大遇见你不容易

38

广州荔湾沙面街道:以“四大工程”助力沙面历史文化街区保护和提升

39

农村土地统一颁证?“无证地”终止承包吗?土地承包最新消息!

40

普京与俄联邦安全会议成员召开会议

20

中国出手卡西方脖子了!商务部和海关总署发布公告,对锑及相关制品进行出口管制,再加

20

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

20

国台办:台公布的恶性撞船事件“调查结论”罔顾事实,我们不能接受

20

新思想引领新征程丨扎实推进生态文明建设绘就美丽中国更新画卷

20

明查|内塔尼亚胡称美国投下原子弹是对日本的“报应”?

20

厦门率先全省完成管廊运维员职业技能等级认定

20

张之臻王欣瑜获银牌

20

马来西亚发布莎阿南市空难调查报告机组人员操作失误致飞机坠毁

20

湖南省中级法院院长座谈会召开

热门攻略

1

商务部:一视同仁支持内外资企业参与大规模设备更新、政府采购等

2

法国外长:讨论如何应对伊朗可能袭击以色列“不合适”

3

一周碳要闻:绿色转型进入2.0时代(碳报第110期)

4

无论允不允许,其实都会发生,我们需要改变的是自己的心态.#时刻保持清醒

5

18岁上岸省监狱系统

6

市场监管总局:今年年底建成全国“个体工商户名录”,让帮扶措施更精准有效

7

“认领一亩地”将“共享农业”理念带入市民生活

8

俄罗斯称美国试图把“北溪”天然气管道被炸的全部责任转嫁给乌克兰俄方致力于找出真正的肇事者并予以惩罚

9

湖南东安县:聚焦营商环境优化强化监督办实事

10

古特雷斯:联合国准备为加沙儿童接种脊髓灰质炎疫苗

11

闵行海事局完成首例长三角能耗报告“掌上办”指导服务

12

世卫组织最高警报,猴痘疫情可能失控!会影响中国吗?

13

汽车博主对撞测试小米汽车,回应不严谨

14

"中方这个决定,给西方军工带来的麻烦不小!

15

外交部美大司司长杨涛会见美国青年政治家代表团

16

方正赴六安高新区宣讲党的二十届三中全会精神并调研

17

临沂3名干部拟任新职,其中2位“80后”

18

中方呼吁停火,要求履行四份决议,以色列宣布新计划,美点名批评

19

美国在破产的道路上越走越远,拜登紧急派人访华,这次有要事相求

20

老年甜宠剧围猎父母

20

“认领一亩地”将“共享农业”理念带入市民生活

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

国网安国市供电公司提供“一对一”服务助力中药小城焕发生机

20

前美国总统特朗普近日再次成为舆论焦点,他的一席话犹"

20

世卫组织就猴痘疫情发布最高级别警告,中国海关总署加强防范

20

官员性侵女童和山羊

20

河北省唐山市一级巡视员曹全民接受审查调查

20

韩媒:文在寅夫妇银行账户因前女婿而受到韩国检方调查

20

网恋投资被骗1900万

20

高温下水产养殖危机四伏:热应激、肝出血与虹彩病毒频发,应对策略速来了解!

20

40岁女子遭职场性侵

20

国台办:台所谓撞船事件“调查结论”刻意推卸责任

20

郑钦文无缘闭幕旗手

20

社会类:入围奖-《巴尔斯》

20

地震避险指南

20

图1-2,乌克兰那边确认了,一爱尔兰裔的19岁小伙子雷茹克,在乌克兰战场成了俄军

20

味蕾游成暑期新选择

20

达州渠县城乡供排水及污水处理一体化项目全力推进

20

以色列代表联合国告别演说:我们国家最道德!引发全球热议

20

京东物流南阳分拣中心开仓仪式在宛城区举行副市长周华锋出席并讲话

20

制度护航生态:美丽中国建设加快推进

20

中东火环六国围以殊死一战!"

20

孟加拉女总理出逃

20

上迪有演职人员中暑

20

青海省自然资源厅与青海省气象局联合发布地质灾害气象风险橙色预警[II级/严重]【2024-08-16】

20

#热点新闻事件#美国#大洪水#天灾面前无能为力美国犹他州一居民拍下大洪水破窗灌进房子瞬间画面@DOU+小助手

20

市(州)委书记座谈会在贵阳召开徐麟出席会议并讲话

20

澳门公布行政长官选举日程表

热门游戏

  • 1
    潘展乐出现在试卷上

    射击枪战 /热度:34217

    点击下载

    莱尔斯新冠结束奥运

  • 2
    小孩斗气躺地遭碾压

    射击枪战 /热度:43257

    点击下载

    湖南省人大常委会启动大气污染防治“一法一条例一规定”执法检查

  • 3
    征求对我市深入学习贯彻中共二十届三中全会精神等的意见中共天津市委召开党外人士座谈会

    射击枪战 /热度:45888

    点击下载

    男子10米台半决赛

  • 4
    崩坏3 最高检明确:对提供财务造假“一条龙”服务应从严打击

    射击枪战 /热度:40837

    点击下载

    绘就中国绿色发展的“工笔画”

  • 5
    原神 "俄罗斯人在库尔斯克地区多次集体投降,被俘士兵已超2000人

    射击枪战 /热度:73662

    点击下载

    云阳县委书记陈道彬到凤鸣镇、龙角镇、蔈草镇、清水土家族乡调研

  • 6
    出发吧麦芬 符攀婵副县长前往定城市场监督管理所开展智慧监管调研指导工作

    射击枪战 /热度:09071

    点击下载

    男子结婚22年胖30斤

  • 7
    永劫无间手游 河北省唐山市一级巡视员曹全民被查

    射击枪战 /热度:55966

    点击下载

    "动不动就制裁,瑞士还是中立国家吗?

  • 8
    向僵尸开炮 联合国机构:也门暴雨引发洪水逾18万人受灾

    射击枪战 /热度:38325

    点击下载

    "震惊!

  • 9
    鸣潮 自贡荣县:“12345”与纪检协作联动,强力促推热线解难事办实事

    射击枪战 /热度:67642

    点击下载

    卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

  • 10
    艾塔纪元 伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

    射击枪战 /热度:92903

    点击下载

    120多名准大学生受益!兴宁市举行“张庆华教育基金”助学金发放仪式

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 直播专区 | 游戏内测 | 经典游戏原声 |