OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 开渔了!临高千帆竞发出港捕鱼

责任编辑: 薄妍

发布时间: 2024-09-20 12:37:09

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

当跟屁虫白嫖停车费

2

王毅谈澜湄合作下阶段发展

3

奥运会残酷超乎想象

4

张本智和颗粒无收

5

不得不在坟墓上建坟墓:加沙遇难者超过40000人,尸体已无处安葬

6

深圳发布《绿皮书》累计创建绿色单位3030家,绿色建筑发展竞争力位居全国大中城市首位

7

聚焦高质量发展丨“傻瓜肥”里的新质生产力

8

550万在美华人慌了,变卖资产离开美国,只因美国做了这3件事!

9

外交部:仙宾礁是中国南沙群岛的一部分,不是菲律宾的专属经济区

10

国台办:台方应严惩“2·14”恶性撞船事件责任人

11

临夏市公安局召开常态化扫黑除恶斗争推进会

12

新泰市宫里执法中队扎实推进卫片违法图斑整改工作

13

300余账号被禁言

14

中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

15

国家电投与中国安能签署战略合作框架协议

16

王毅谈澜湄合作下阶段发展

17

中企承建巴基斯坦莫赫曼德水电站实现截流

18

谢来发,主动交代问题

19

巴赫再回兴奋剂问题

20

互助土族自治县成立70周年新闻发布会召开

21

美国一饿熊闯入野餐区翻找食物被男子抡起铲子打在头部后逃走

22

约旦谴责以色列定居者袭击约旦河西岸村庄

23

拒挂中国国旗台资酒店道歉

24

网格通讯员媒体新力量太原市第二期网格通讯员培训举办

25

印度仍在等一块金牌

26

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

27

下个月又有国乒比赛

28

生了虫的米还能吃吗

29

越南总理范明政主持召开金融领域立法工作会议

30

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

31

“春雨润苗”助发展服务企业零距离

32

美国、卡塔尔、埃及发布联合声明!

33

[企业动态]中顺洁柔新增1件法院诉讼,案由为不正当竞争纠纷

34

银昆高速全线通车

35

张延廷:以色列援助菲律宾两架飞机但是没有什么作用只是表态

36

内蒙古打造稳定的生态碳汇供给基地

37

以进一步全面深化改革开辟中国式现代化广阔前景

38

哥伦比亚中部一商业区发生火灾多处商业场所被毁

39

美国超一半的州7月失业率上升,就业市场降温不能只怪飓风来袭

40

阿黛尔演唱会看奥运

20

山西省吕梁市召开医保巩固衔接工作安排调度会

20

泰国他信之女成功当选总理,7个没想到!她能否带领泰国走出困境

20

越媒:越南领导人访华意义重大,将进一步深化越中全面战略合作伙伴关系

20

美国总统大选辩论将于9月10日在费城举行

20

【中国经济时报】党风廉政在心中|中国进出口银行湖北省分行赴基地开展党纪教育活动

20

近日,瑞士外交部发言人莱亚·祖尔彻对外表示,瑞士准备在俄罗斯"

20

国台办回应台公布恶性撞船事件调查结论

20

尤长靖减肥36斤对比

20

当庭认罪悔罪!20多年敛财2756万余元,马崑受贿案一审公开开庭

热门攻略

1

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

2

福州市、晋安区两级人社部门携手共启台胞台企劳动争议调解新篇章

3

武汉打破德国日本垄断!造出全国第一台!

4

看来!俄罗斯处境真的很危险了,卢卡申科都开始转头了,这已经说明了有些问题。

5

锦欣国际:9月4城,美国试管婴儿HRC格迪尔医生1V1公益启程!

6

长江海事局运用新版行政处罚系统办结全国海事系统首例案件

7

撞断古树赔偿11万

8

巴黎奥运会期间有中国大陆住店旅客发现台湾长荣酒店"

9

人均耕地不到1亩,遭西方制裁76年,朝鲜拿什么养活2600万人?

10

这么好的惠民政策,不该人人赞成吗?为何处处反对呢?

11

是否后悔过早地与拜登进行辩论?特朗普回应

12

【砥砺奋进七十载奋楫扬帆新征程】探访中共甘肃工委纪念馆

13

王自如疑似从格力离职

14

新闻两则

15

中国再三要求下,惊天大案有了新进展,德国找到铁证,发出逮捕令

16

买18万黄金店长报警

17

印度女医生遭奸杀引愤慨

18

日本在布一个大局!大量移民巴西的浪潮,根本停不下来!太精明了

19

他信之女成泰国新总理,揭秘百年钦那瓦家族

20

国台办回应台公布恶性撞船事件“调查结论”

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

乌构建10年的防线崩了,俄1天拿下纽约镇中心,乌军再不跑就晚了

20

锚定现代化改革再深化|湖北丹江口:保护水源地生态环境确保“一泓清水永续北上”

20

中企承建巴基斯坦莫赫曼德水电站实现截流

20

苏丹中部一村庄遭袭致80人死亡

20

亭湖大洋:抗战家书宣讲,激发奋进力量

20

京津冀地区用电报装首次实现“跨域办”

20

万余人攻入俄罗斯为何乌称只有一千

20

报应终于来了?大陆还未行动,赖清德收到噩耗,台当局遭当头一棒

20

国家金融监督管理总局就《金融机构合规管理办法(征求意见稿)》公开征求意见

20

中国高超音速再传喜讯,美学者发现不对:台岛已无用,应速速放弃

20

魏建锋在全省政法系统全面从严管党治警工作推进会上强调:努力锻造忠诚干净担当的政法铁军

20

今日早报每日热点15条新闻简报每天一分钟知晓天下事8月17日

20

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

20

小区多只猫被箭射伤

20

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德国经济损失

20

泰国政局“三足鼎立”佩通坦为何能够顺利当选?

20

全红婵陈芋汐进决赛

20

亭湖大洋:抗战家书宣讲,激发奋进力量

20

新时代新征程新伟业|淅川:“志愿红”守护丹江“生态绿”

20

美国国务院批准向加拿大出售战术导弹

20

泰国总理赛塔被免职泰国赛塔免职泰国总理

20

王迅发文这次我认输

20

王毅谈澜湄合作下阶段发展

20

石家庄高新区外国语学校党支部开展主题党日活动

20

以中国式现代化新成就为世界发展提供新机遇

20

吃紫菜解馋吃进ICU

20

俄别尔哥罗德州进入联邦级紧急状态

热门游戏

  • 1
    以进一步全面深化改革开辟中国式现代化广阔前景

    射击枪战 /热度:14095

    点击下载

    山东省委常委会召开会议

  • 2
    李东宪:岛内升起的一抹“中国红”,高举五星红旗的勇敢行动者

    射击枪战 /热度:31628

    点击下载

    王毅谈澜湄合作下阶段发展

  • 3
    射阳县长荡镇:“长青计划”助力青年干部蓄能成才

    射击枪战 /热度:21404

    点击下载

    老人尼泊尔旅游发了条朋友圈话费1万6

  • 4
    崩坏3 西雅图风暴vs亚特兰大美梦第1节英文原声回放

    射击枪战 /热度:74929

    点击下载

    阳光财险西宁市城中支公司变更场所获批

  • 5
    原神 支持率只剩下6%!柯文哲推翻两党政治的挑战已结束!

    射击枪战 /热度:13863

    点击下载

    来河坊街参加“中医潮生活”文化节潮中医圈粉年轻人

  • 6
    出发吧麦芬 法国小姑娘来中国待久了,回国后哭诉把妈妈气笑了,听听说了啥

    射击枪战 /热度:70183

    点击下载

    女子徒步西藏失联

  • 7
    永劫无间手游 宁波货轮集装箱爆炸

    射击枪战 /热度:83754

    点击下载

    湖南50岁阿姨从月嫂转战养老护理:老人最担心的不是衰老,而是孤独和无助

  • 8
    向僵尸开炮 喻兴铸带队督导调研我县水网建设三年攻坚及国债项目建设推进情况

    射击枪战 /热度:94809

    点击下载

    存款利率进入1时代

  • 9
    鸣潮 乡村产业齐发力振兴发展潜力足——“强三农促振兴”系列报道之一

    射击枪战 /热度:58984

    点击下载

    介文汲:日本通常是政经分离工商团体跟大陆维系密切的关系

  • 10
    艾塔纪元 教官性侵少女事件曝光,其子与受害人同龄,引发社会热议!

    射击枪战 /热度:39698

    点击下载

    长塘镇定西村:产业振兴百姓富代表履职结硕果

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏声优访谈 | 游戏故事会 | 游戏原画 |