OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 坦桑尼亚驻华大使哈米斯·奥马尔:与中国打交道不用担心互信问题

责任编辑: 邹勇

发布时间: 2024-09-20 04:03:58

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

我帮你们踢走2022所有的烦恼,一起迎接2023属于我们的好运奔向20

2

国家能源局:将出台专项行动实施方案,高效有序推进新型电力系统各项行动落实落地

3

“移民佬”:淳安老家的记忆永久停留在1959年

4

视频|国家能源局:我国成为全球能耗强度降低最快的国家之一

5

网友分析核污水事件对韩国的影响,海鲜吃不了了,泡菜也吃不了了~

6

2岁女童失踪超一周

7

蔡丽芬被双开

8

打造全国首个零碳综合保税区——福建自贸试验区厦门片区聚焦降碳扩绿

9

未来两天北京晴间多云为主昼夜温差较大最低气温20℃左右

10

三只羊杭州总部出租

11

沙利文来华谈判,会议地点不寻常,中国立下规矩,准备“掀桌子”

12

郑钦文比赛因雨暂停

13

乌克兰被打烂了,只剩最后一个宝贝:已被印度盯上,要空手套白狼

14

原宜兴市公用事业管理局副局长李新平被查

15

病死率约3成!美国男子感染东方马脑炎病毒死亡

16

太热了!重庆40℃高温酷热天气致多地推迟开学未来三天热力不减

17

陈芋汐同济大学报到

18

“巾帼现代农业科技示范基地”助力农村妇女增收致富乡村振兴中彰显“她力量”扫码阅读手机版

19

20

1、第一个,没想到,俄罗斯二十六日一次轰炸了乌克兰"

21

下游干旱蓄水发电,洪涝来临时却泄洪是时候为三峡大坝正名了!

22

以色列在约旦河西岸行动已致11人死亡多方谴责

23

荷兰国防部网络故障致大量公共机构瘫痪

24

中方期待联黎部队履行好停火监督的主责主业

25

仙宾礁四面被围,菲方喊话美国介入,等来的却是美高官抵达北京

26

北重集团党委书记、董事长王占山一行到材料院调研交流

27

沙利文:这是我作为总统国家安全事务助理首次访华,感谢中方周到安排

28

"四川阿坝驻村女乡党委书记下乡失联,以下哪种可能性比较大

29

意大利,德国已到达日本海域。

30

殡仪馆花篮收13800

31

外资企业“陕西行”举办

32

“青春推普行,共筑振兴梦”永州职业技术学院开展“推普助力乡村振兴”全国大学生志愿服务活动

33

不可思议的黄色水坝,小小黄布却能阻挡滚滚河水,原理是什么

34

义马市召开2024年第一批诚信建设“红黑榜”新闻发布会

35

小李子给服务员5万欧小费

36

淄博市临淄区原二级巡视员董红光被查

37

澳霹雳舞选手被网暴

38

生3孩教师选调加5分

39

印最高法介入奸杀案

40

G20峰会落幕,美要中国“守规矩”,话音刚落,中俄找到破敌之策

20

"沙利文访华随行人员几乎都会说中文,说明了啥?

20

外高桥造船与七一一所签署战略合作协议

20

印尼中企承建的大型陆地光伏电站竣工投产

20

起床号8月29日

20

女子酒局后身亡数名公职人员赴宴

20

“西方国家像是玩火柴的小孩子”,俄罗斯外长拉夫罗夫称:西方根本不想避免局势升级,西方国家在“玩火”

20

郑钦文连续两场逆转

20

女孩疑遭母亲谋杀

20

以军方称8月15日约旦河西岸吉特村遭袭为“恐怖主义事件”

热门攻略

1

新疆伊犁保安大叔硬核造型走红

2

俄罗斯永久禁止92名美国公民入境,此举是对美国反俄政策的回应

3

特朗普:当总统是个高危职业虽然很棒很有趣

4

德州市委编办指导完成镇街权责清单动态调整工作

5

“人生已经结束了”,张本美和说出巴黎奥运后的休假中发生的悲剧

6

男子因燃气爆炸坠亡

7

8

8连问!中国驻菲使馆发言人批驳日本大使涉南海言论

9

台高院撤销陈水扁涉洗钱案免诉判决,发回更审

10

生活补助申报!肥东已启动!

11

国家能源局:有关部门正在研究论证新一轮的《巴黎协定》国家自主贡献目标

12

加拿大非要吃罚酒,24小时内,中方3波反击到位

13

上台不顺,孟加拉国新总理找上中方大倒苦水,把糟心事都说了一遍

14

50万大军压境,北约下场?普京派人来北京,请中方帮3件事

15

内地奥运健儿代表团抵达香港香港为奥运健儿举行欢迎仪式

16

中方期待联黎部队履行好停火监督的主责主业

17

韩国正式通过“具荷拉法”父母未尽抚养义务不得继承子女财产,该法案以韩国已故女明星具荷拉命名。

18

腹部抽脂无生育能力

19

客流量从0到10亿厦门地铁“流量密码”带来什么?

20

万宁田新河“由污向净”水质已达到整治目标

20

加沙断臂少年:失去亲人比失去双臂更痛苦

20

8月30日起成都东站至黄龙九寨站最快1小时39分可达

20

张根硕患甲状腺癌

20

飞机疑失控迫降公路

20

世界上最值钱的“黄金河”,竟有一条奇葩规定:只许带走黄金!

20

黑神话上线公司放假

20

中方期待联黎部队履行好停火监督的主责主业

20

有爱无障融合共享(在现场)

20

男子钓鱼被雷击身亡

20

美国的核心竞争力是纠错机制

20

黑色星期一只是开始

20

上海联动调整天然气发电机组上网电价

20

禁娼现象“屡禁不止”,为啥我国要大力提倡?看看德国现状就清楚

20

董明珠再提明年退休

20

国际观察|英国政府面临严峻财政压力

20

财联社8月29日电,韩国总统尹锡悦29日在国政发布会暨记者会上表示,正在讨论日本首相岸田文雄的访问事宜,对此持开放态度

20

市十七届人大常委会第二十三次主任会议召开

20

哈里斯人气高涨,一月吸金达5.4亿,特朗普私下承认可能会输

20

2047年要成为发达国家的印度,16分钟就有一起强奸案

20

黄文秀写入语文教材

20

沙利文来华谈判,会议地点不寻常,中国立下规矩,准备“掀桌子”

20

特朗普再遭刺杀威胁

20

收不抵支、供大于需、服务错配,汽车客运站会消失吗?

20

中越关系彻底变天?越南专机正式抵华!现场迎接释放特殊信号!

20

中国铁建党委书记、董事长戴和根与北京科技大学校长杨仁树会谈

20

蒋冰当选丹东市市长

20

网红在前夫家前喝药

20

曹原已入职顶尖名校

热门游戏

  • 1
    国家能源局:全社会每消费3度电中就有1度电是绿电

    射击枪战 /热度:22091

    点击下载

    国家体育总局:坚决遏制体育“饭圈化”愈演愈烈态势

  • 2
    丹噶尔古城来了“新朋友”

    射击枪战 /热度:62575

    点击下载

    国际新闻重点分析国哥首席8月29日中

  • 3
    中美连谈两天,王毅主任强调台湾和南海,沙利文谈和平共存

    射击枪战 /热度:71605

    点击下载

    美国多州报告李斯特菌感染病例,已有8人死亡

  • 4
    崩坏3 天气预报说明天有雨,我听成了明天有你

    射击枪战 /热度:80802

    点击下载

    昌黎县葡园小径全国第七

  • 5
    原神 男子闹市区放生蟑螂

    射击枪战 /热度:53435

    点击下载

    112学生抽签77床位

  • 6
    出发吧麦芬 河南监狱管理局通报

    射击枪战 /热度:52734

    点击下载

    荷兰皇家航空公司,最近宣布不再使用波音公司生产的飞机

  • 7
    永劫无间手游 推动厦门市出口型工业企业加快ESG建设

    射击枪战 /热度:15512

    点击下载

    乌克兰用集束炸弹轰炸库尔斯克核电站

  • 8
    向僵尸开炮 国防部:推动中越两军关系迈上新高度取得新发展

    射击枪战 /热度:13368

    点击下载

    博眼球活吞牛蛙被拘

  • 9
    鸣潮 #抖音热点宝#印度女人的地位#印度#印度女护士#印度强奸

    射击枪战 /热度:28487

    点击下载

    沙利文访华,中方低调接待,3大细节有深意,美国要的中方不会给

  • 10
    艾塔纪元 美媒:美国多数城市7月失业率同比上升劳动力市场放缓

    射击枪战 /热度:19852

    点击下载

    俄罗斯外长拉夫罗夫近期提出了一个观点,即乌克兰总统泽连斯基如果真的关心"

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏原声大碟 | 游戏开发日记 | 官方公告发布 |