OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 烟台农商银行莱山区支行开展生态环境日志愿活动

责任编辑: 颜煊

发布时间: 2024-09-20 09:44:01

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

张延廷:以色列援助菲律宾两架飞机但是没有什么作用只是表态

2

芒果应该怎么种?这些要点应掌握,高产很简单

3

李宁龙服被嘲吸汗差

4

被女装背刺改买男装

5

陕西省举行青少年心理健康绿色通道工作座谈会

6

撞船致死福建渔民,自恃吃定大陆?金门裁定肇事巡逻艇长不予起诉

7

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

8

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被开除党籍和公职

9

中老缅泰外长举行非正式会晤

10

赖清德为何对郑文灿出手如此狠辣?

11

印尼总统佐科发表任内最后一次国情咨文

12

13

王楚钦再谈男单失利

14

日本葡萄为什么这么受欢迎,这三点,你做到位了吗?

15

下个月又有国乒比赛

16

#热点新闻事件#美国#大洪水#天灾面前无能为力美国犹他州一居民拍下大洪水破窗灌进房子瞬间画面@DOU+小助手

17

印度女医生遭奸杀引愤慨

18

被打士兵头发有些许花白,年龄应该有50了吧

19

莒县农商银行大力发展农村普惠金融赋能乡村振兴

20

女子坠亡男友拍照

21

全州县“五抓五助”写好脱贫群众持续增收“大文章”

22

扛不住了,日本首相将辞职,岸田接班人呼之欲出,对华态度不简单

23

第十九届“东北法治论坛”在牡丹江举行张苏军刘惠出席开幕式

24

宁杭支队第一大队联合开展防汛应急演练

25

马里与乌克兰断交

26

美国人问:美国能轻易打败中国吗?英网友:再过一百年也不可能。

27

无毛大猩猩?那些被拍到的无法解释的离奇画面!奇闻异事

28

世界卫生组织:苏丹霍乱疫情已致316人死亡

29

瑶海区安溪商会第一次会员代表大会胜利召开梁全财当选首任会长

30

长荣桂冠酒店道歉

31

“台独”彻底破防!美国突传爆炸性消息,这次都不用大陆出手?

32

西方闻到危险气味:库尔斯克或许是陷阱,乌军可能会面临灭顶之灾

33

【国台办:台公布的恶性撞船事件“调查结论”推卸责任,不能接受】8月16日,国务院

34

董宇辉全资与辉同行

35

安以轩未探视陈荣炼

36

女子打卡烂尾楼摔落

37

党纪学习教育丨对不落实组织决定行为的处分规定

38

中产年花50万一对一

39

李冠杰:英国新政府是时候改善对华关系了

40

为什么大部分韩国人认为中国很落后?

20

没有一国谴责乌克兰入侵,也无人救援俄罗斯,这给中国提了个醒

20

国家卫生健康委、中医药局、疾控局召开2024年中国医师节座谈会

20

#日本研究机构预测全球变暖将导致大米产量下降#日本

20

兰花养护全攻略:掌握这三大关键,助你轻松培育出健壮根系!

20

我国现千亿立方气田

20

台媒:「海马斯」助乌克兰跨境奇袭俄罗斯领土,如入无人之境!

20

胖东来郑州分胖来了

20

中国建设银行甘肃省分行党委委员、副行长邵茂丰被查

20

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

热门攻略

1

又有两名政界人士可能加入日本自民党党魁角逐

2

大陆祭出“杀招”,赖清德赴美“求救”,马英九一举引爆两岸舆论

3

他信的女儿成为泰国最年轻的女总理

4

人参皂苷RG2:传统与现代医学的桥梁,政策助推其发展

5

台媒评析:民众党“政治献金争议”或影响台政局走向

6

从野蛮制裁到被动封杀,美国突然发现:自己对付中国的招数失灵了

7

瑞典国王观众席挠头

8

印尼总统佐科发表任内最后一次国情咨文

9

夫妻玩漂流1死1伤

10

山东省委常委会召开会议

11

"印度海军练瑜伽,泄露核弹!

12

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

13

国乒男团夺金五连冠

14

早啊!新闻来了〔2024.08.17〕

15

梅根哈里到波哥大危险区,保镖展开“防弹公文包”,16辆警车护送

16

茅台红缨子高粱种植面积累计推广超3000万亩

17

也门南部发生汽车炸弹爆炸事件已造成19人死亡

18

以官员:以军在加沙地带的作战已“基本结束”

19

海内外专家学者相聚山东青岛共话化工领域学术前沿

20

新疆:光伏+治沙一体化共筑沙漠生态屏障

20

"夜深人静,全球又传来三个新息!

20

澜湄清洁空气倡议联合声明(摘要)

20

韩国检方出手:前总统文在寅夫妇金融账户被扣押搜查

20

俄大使:美试图将全部责任推给乌克兰

20

强化“滥伐自有林木也是犯罪”的法治共识

20

华润原总经理去世

20

国家市场监管总局:推进“高效办成一件事”改革成效显著

20

奥运冠军母亲遭网暴

20

农行职工殴打夫妻

20

长荣酒店官网撤下台湾与中国并列选项

20

世界上最高的鸡居然长这样!?#有趣冷知识#探员樱酱

20

无毛大猩猩?那些被拍到的无法解释的离奇画面!奇闻异事

20

女孩将母亲的手机裹上了棉花糖

20

俄罗斯称美国试图把“北溪”天然气管道被炸的全部责任转嫁给乌克兰俄方致力于找出真正的肇事者并予以惩罚

20

潘展乐老家办庆功宴

20

王毅谈澜湄合作下阶段发展,提出四点建议

20

孙杨回应美国游泳运动员脸紫

20

突发!美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

果然没让大陆失望!蔡英文这回立大功了,赖清德最害怕的事发生

20

湖南发生重大刑案

20

乌克兰要求墨西哥逮捕普京,27国表示支持,中国发言表明态度

20

想不通,乌克兰攻击并占领库尔斯克州已经10天了,这俄罗斯倒像是个无人区,乌克兰军

20

南京通报5名干部被查

20

樊振东仿姆巴佩庆祝

20

TikTok非洲多次裁员

20

一心堂退回1070余万

20

中国贸促会会长任鸿斌会见广西壮族自治区副主席谭丕创一行

20

韩国检方调查文在寅夫妇账户

热门游戏

  • 1
    浙江又来两所新大学

    射击枪战 /热度:23791

    点击下载

    联合国人权机构:超4万人在加沙地带死亡是“残酷的里程碑”

  • 2
    俄罗斯媒体:乌克兰策划用“放射性弹头”袭击俄核废料储存设施

    射击枪战 /热度:47517

    点击下载

    "我的一个检察官朋友对王佳佳法官遇害谈了谈看法:

  • 3
    甘肃两地发布最新人事

    射击枪战 /热度:54247

    点击下载

    防范!广东今明天迎明显降雨过程局地或现大暴雨伴强对流

  • 4
    崩坏3 挪威东南大学的教授格"

    射击枪战 /热度:25161

    点击下载

    商务部:将进一步放宽外国投资者战略投资上市公司的限制

  • 5
    原神 石家庄开启看海模式

    射击枪战 /热度:20465

    点击下载

    以色列代表联合国告别演说:我们国家最道德!引发全球热议

  • 6
    出发吧麦芬 手绘废轮胎月入两万

    射击枪战 /热度:06361

    点击下载

    德媒爆出:两年前炸北溪管道案,系他们所为?

  • 7
    永劫无间手游 陈章杰任湖南省政府副秘书长

    射击枪战 /热度:11366

    点击下载

    安徽省蚌埠市人大常委会原党组成员、副主任汤春义接受审查调查

  • 8
    向僵尸开炮 罗森回应崩了

    射击枪战 /热度:25525

    点击下载

    以军再发撤离令要求加沙北部巴勒斯坦民众撤离

  • 9
    鸣潮 到嘴的鸭子飞了?富士康前脚回国,后脚印度马上对苹果反垄断调查

    射击枪战 /热度:38248

    点击下载

    宜春市中级人民法院原党组成员、副院长况柳根接受审查调查

  • 10
    艾塔纪元 巴勒斯坦总统阿巴斯:即使付出生命也要去加沙

    射击枪战 /热度:92843

    点击下载

    普京与俄联邦安全会议成员召开会议

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏安全知识 | 游戏周边产品 | 游戏成就攻略 |