OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: “80后”副市长王巍,被查

责任编辑: 端木珂

发布时间: 2024-09-20 17:26:05

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

女孩疑遭母亲谋杀

2

郑州市纪委监委通报

3

黔西南州委理论学习中心组举行集中学习研讨会

4

俄别尔哥罗德州进入联邦级紧急状态

5

行进中国·看生态之美——青山依旧湟水悠长

6

两大消息:菲律宾再次非法坐摊?中国若支持俄罗斯或已爆发三战

7

孙公司收到环保部门行政处罚莱茵生物:将重新报批环评文件

8

巴勒斯坦总统阿巴斯:即使付出生命也要去加沙

9

浅谈高原反映,挑战人生,挑战自我。

10

倪夏莲晒自家花园

11

特朗普和高龄粉丝互动:你真美你看起来也就60多岁

12

多米尼加总统阿比纳德尔宣誓就职

13

法媒:里海,中国和欧洲未来的贸易枢纽?

14

杭州秋石高架将衔接硖许快速路下沙至海宁长安的市域铁路明年开工

15

外交部:要求菲方立即撤出有关船只

16

外交部敦促美方立即停止对中国的诬蔑抹黑

17

暴富机遇从天而降!美国拼命印钞自食恶果,全球货币即将涌进中国

18

两岸“梦想合伙人”携手同行

19

婚姻登记条例拟修改下一步婚姻登记将实现“全国通办”

20

长荣酒店怂了,官网单独划分台湾与中国并列,已经更改了!选择酒店栏目,之前分亚洲、

21

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

22

黑龙江省委批准:开除齐忠彦党籍!任职地原市长已被查

23

创新工作模式不断丰富轮值活动形式

24

出行注意!山西降雨频繁局地有大到暴雨警惕短时强降雨及雷暴大风

25

周星驰电影食神定档

26

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

27

刘清漪霹雳舞摘铜

28

相较于凶杀案,更恐怖的是完全两极分化的社会舆论!#王佳佳

29

尼日利亚中部至少20名大学生遭绑架

30

我国进出口再创新高

31

澜湄清洁空气倡议联合声明(摘要)

32

任嘉伦陈梦曾是队友

33

受贿2756万余元!山东省临沂市政府原党组成员、副市长马崑受贿案一审开庭

34

跨国公司领导人青岛峰会召开在即,如何持续深化与跨国公司合作?山东副省长答极目新闻问

35

河南监狱管理局通报18岁考生上岸

36

浙江省委召开巡视发现问题剖析整改推进会

37

赖清德担心的事发生,美国人算了一笔账,终于打算要“放弃”台湾

38

澳总理访华前,澳籍华裔间谍成蕾被驱逐出境,澳外长亲自接机

39

湖南省人大常委会执法检查组调研生态环境卫片图斑与监测网络建设情况

40

扎卢日内否认自己参与了北溪管道袭击事件!这个态度很明确

20

普宁市委原副书记何亿严重违纪违法被开除党籍和公职

20

今年超50家银行解散

20

扛不住了,日本首相将辞职,岸田接班人呼之欲出,对华态度不简单

20

国台办:对此不能接受

20

李丽被查

20

尤长靖减肥36斤对比

20

吹响冲锋号!东莞交投集团启动工程建设“百日攻坚”行动

20

紧急翻天覆地!乌占领俄1097平方公里,而非俄所说的40平方公里!

20

否认决赛做侮辱手势

热门攻略

1

总分1000分,仅考了20分!日本王室继承人就这水平?

2

"

3

赵学军被调查

4

泰国富人家庭的千金大小姐,除了旅游就是护肤美甲,一天多潇洒?

5

法国外长:讨论如何应对伊朗可能袭击以色列“不合适”

6

李政道逝世

7

重庆两名干部被“双开”

8

全州废弃矿山变身美丽绿洲

9

唐山塌方式腐败!4-8月以来,查处11名干部,3名原副市长被查

10

金门地检署公布“2·14”撞船事件调查结论,国台办:罔顾事实,刻意推卸责任

11

台湾花莲县海域发生6.1级地震多地列车一度慢速行驶

12

警惕!美国、以色列,正在将恐怖主义“合法化”

13

乌克兰越境攻击长期化:莫斯科等大城市居民自发筹集物资捐赠给避难者

14

欧洲最干净的十大城市出炉,卢森堡第一,苏黎世第三,维也纳上榜

15

突发,乌克兰果然对克里米亚大桥出手了,可惜没成功!

16

瞒了普京2次酿成大祸,格拉西莫夫失势了,俄军大权交给普京心腹

17

柯文哲深陷“假账”风波,朱立伦急呼救场,国民党内部意见分歧

18

拜特对决从总统辩论到美式骂街拜登辩论惨败的背后是谁的错?

19

岸田文雄将下台,日本下届首相浮现,对华态度更强硬

20

好品中国丨长白山下,喜上“莓”梢

20

黄晓武赴成都市、德阳市、长沙市考察招商

20

广东省人民政府最新任免工作人员

20

烟台市领导干部党的二十届三中全会精神专题学习班举办

20

黑人留学生强行霸座!一看就是豪横惯了,不料乘警根本不惯着他!

20

37岁佩通坦成泰国第二位女总理,他信家族或迎“生死之战”

20

亭湖大洋:抗战家书宣讲,激发奋进力量

20

一个人,怎么看待自己的格局?

20

一夜醒来再传来噩耗,格拉西莫夫连战连败:普京不得已派出接班人

20

韩国检方对前总统文在寅夫妇金融账户扣押搜查

20

特朗普被拍到开会时使用中国移动电源,郭正亮:买不到美国制造

20

新泰市果都镇开展“8.15全国生态日”主题活动

20

印度女医生遭奸杀引愤慨

20

保安让外卖员下跪

20

牡丹江:用三步下好生态保护“先手棋”

20

美国加州现3.6米长罕见深海鱼尸体

20

遇事不决问妈妈!尽管美国总统拜登已经81岁高龄但在面对记者提出的某些问题时他手指天空称需要先和妈妈商量一下#拜登#美国总统

20

"德国媒体为何要开始编故事?

20

孟加拉国动荡,冲击全球服装产业链

20

已确认!他失联24天

20

马龙每届送走一队友

20

日本发生7.1级地震

20

黑数据与假排名背后阴谋:美国政治的虚假面纱,如何沦为权力游戏

20

台湾附近6.1级左右地震很多福建人表示有震感,希望大家都没事!

20

第八届金砖国家工业部长会议在俄罗斯下诺夫哥罗德召开

20

遗弃3岁女儿被判刑

20

市级机关事业单位中有哪些冷门但其实还不错的单位?

20

重庆潼南:创办“青竹荟”抓好人才“留育用”

20

河北省唐山市一级巡视员曹全民接受审查调查

热门游戏

  • 1
    中纪委罕见怒批中国高校四大官僚主义!反腐进入高校!

    射击枪战 /热度:47250

    点击下载

    张文宏称新冠波动

  • 2
    我国进出口再创新高

    射击枪战 /热度:36007

    点击下载

    联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

  • 3
    海南公安宣讲会走进海口铁路公安处

    射击枪战 /热度:11457

    点击下载

    破船不拖不行?中方启用B计划,“最强帮手”上阵,南海大局已定

  • 4
    崩坏3 [时习之·一席话]共绘美丽中国新画卷

    射击枪战 /热度:25922

    点击下载

    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

  • 5
    原神 本轮新冠年轻人易感

    射击枪战 /热度:34392

    点击下载

    玉树州大电网未覆盖乡供电工程开工

  • 6
    出发吧麦芬 桂平烟草:遏制"烟卡"蔓延守护未成年人健康成长

    射击枪战 /热度:79764

    点击下载

    主动投案,云南迪庆州维西县原住房和城乡规划建设局局长赵中华接受审查调查

  • 7
    永劫无间手游 柬埔寨国王参观新疆博物馆与馆方工作人员互赠礼物

    射击枪战 /热度:57331

    点击下载

    中国顶级布局:中老柬铁路落地,越南梦碎,泛亚铁路统筹东南亚

  • 8
    向僵尸开炮 乌构建10年的防线崩了,俄1天拿下纽约镇中心,乌军再不跑就晚了

    射击枪战 /热度:66239

    点击下载

    根据福建省地震局监测数据,此次地震波及福建多地,包括厦门、泉州等地有震感。

  • 9
    鸣潮 校长签名潦草像天书

    射击枪战 /热度:36345

    点击下载

    局长谢来发,主动交代问题

  • 10
    艾塔纪元 中国科大新任6位党委常委

    射击枪战 /热度:27510

    点击下载

    巴西女乒有独臂选手

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏声优访谈 | 游戏CG | 休闲益智游戏集 |