OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 俄一州进入紧急状态

责任编辑: 酆煊

发布时间: 2024-09-20 06:23:41

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

俄军占领乌重要村庄

2

3

贵阳贵安学习贯彻党的二十届三中全会精神市委宣讲团动员会召开

4

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

5

普京前保镖受命坐镇库尔斯克:常在身边晃的,才是领导最信任的?

6

烟台市领导干部党的二十届三中全会精神专题学习班举办

7

注册资本200亿元!湖北水利发展集团揭牌成立

8

陈梦谈女乒牵手领奖

9

“坪地理响号”2.0版启动龙岗坪地联合深圳特区报社升级打造理论宣讲平台

10

肃北:推进民生工程建设为群众幸福“加码”

11

广湛高铁广佛段顺利完成首梁浇筑

12

广西大锰:以党建引领带动企业降本增效

13

进一步提升新职业人才队伍质量

14

南川区城市管理局:推进垃圾分类先锋区创建,督导检查推动整改落实

15

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

16

最新!福建省人民政府领导成员分工公布

17

低价团拒收年轻人

18

这是真正的火车呀,电动车锂电池的危害之大,不可想象。

19

20

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

21

市场监管总局:正在制定国家标准规范公平竞争管理

22

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

23

樊振东扔球拍庆祝

24

省妇联副主席王玉花到稷山县进行调研

25

唐山又一厅官落马,曾任副市长

26

银龙驰骋,乡村振兴美丽新画卷徐徐铺展

27

广东省云浮市政府党组成员、副市长王巍被查

28

岸田文雄时代结束,日本新首相浮现,对华态度曝光,中方定调统一

29

营商环境优化升级甘肃政务服务全程网办率从98%提升至100%

30

避开这三种肥料,让萝卜白菜远离烂根困扰:老农民的种植智慧

31

我国进出口再创新高

32

两年内将修订294项标准

33

2024年南海伏季休渔执法任务圆满完成

34

大祸临头!18国派兵入韩,德国终于点头,朝鲜大动作轰动全球

35

“一屏一带二网多点”!日照这样构建生态修复总体格局

36

"没有限制:加拿大允许乌克兰在库尔斯克地区任意使用其武器

37

九江新余宜春回复帖文又快又好!

38

泰国最年轻女总理“做月子”参加竞选,当选总理后首次公开亮相

39

大连机场给韩国人挂白牌,韩国网友破防:这是把我们当下属对待!

40

大陆用了6个月,让赖清德明白一条硬道理,台湾回归要快很多!

20

"法律何在?公道又何在?

20

《广东省科技创新条例》有哪些首创性制度?

20

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

20

临泉县关庙镇:“一呼即应”解困难内生动力促发展

20

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

20

八旬老人被室友打死

20

聊城大学青年学生讲师团走进泰安市开展走访调研活动

20

命名四年就更名,“成语街道”问题在哪儿?丨人民锐见

20

赖清德欲哭无泪,马英九“立下大功”?关键时刻,大陆强硬表态!

热门攻略

1

岚山区金融调解中心在岚山农商银行揭牌

2

台湾气象部门:花莲今日地震为“4·3花莲强震”余震

3

湖南东安县:“双线并行”遏制“舌尖上的浪费”

4

近东救济工程处:以军发布新撤离令后加沙居民已“无处可去”

5

我们的习以为常却是他们的遥不可及,此生无悔入华夏

6

台湾发生6.1级地震多地震感强烈威力相当于0.18颗原子弹

7

强化制约监督健全公正执法司法体制机制

8

党的地方组织包括哪些?

9

尼日利亚中部至少20名大学生遭绑架

10

印度眼中的十大强国

11

TikTok非洲多次裁员

12

3名中国公民在安哥拉身亡,均为熟人作案

13

埃尔多安政党的议员与库尔德议员在土耳其议会发生激烈斗殴

14

巴基斯坦西南部发生炸弹袭击致1死12伤

15

民政部集中回应离婚冷静期、结婚无需户口簿等热点

16

年过80,还能轻松做到这3件事,多半会长寿!

17

中国电信圆满完成全国生态日主场活动通信保障任务

18

湖南发布暴雨蓝色预警,这些地方将出现暴雨

19

轿车追尾货车被拖行

20

金砖扩员风云再起,俄罗斯力推菲律宾加入?但南海争端成拦路虎

20

联合国人权机构:超4万人在加沙地带死亡是“残酷的里程碑”

20

市场监管总局:涉企违规收费专项整治已督促退还3.93亿元

20

文明河北|让文明实践从“指尖”到“心间”

20

中共临沂市委组织部干部任前公示公告

20

长了白蘑菇的苹果后续来了!“果郡王”后代到底有没有苹果味?她说….(供稿:德清台)

20

河北省唐山市一级巡视员曹全民接受纪律审查和监察调查

20

张之臻王欣瑜获银牌

20

江西省市场监督管理局局长谢来发接受审查调查

20

特朗普飞机故障降落

20

雷雨季航班取消延误增多收到此类信息要警惕

20

河北省唐山市一级巡视员曹全民接受审查调查

20

光伏板下牧牛羊

20

#遵纪守法才是正道#严惩黑恶势力#违法必究

20

中国限制锑出口,对发“战争财”的美国不是好消息

20

关于奥运会,虽然印度这次成绩不理想,但你不得不佩服印度人对于此事从不角度的深入分

20

闫剑波率团赴新加坡、肯尼亚、坦桑尼亚开展经贸促进和合作交流活动

20

特朗普办公室被盗

20

热点问答|三问“北溪”爆炸调查新进展

20

166元面吃出腐臭物

20

山西临汾:电力护航一“糯”千金

20

静安区召开重点用能单位(楼宇)交流座谈会

20

海底捞回应零食收费

20

贵阳市率先在全省实现企业上市合法合规信息核查“一件事”高效办理

20

刘光耀离婚

20

邱贻可感谢孙颖莎

20

王毅谈澜湄合作下阶段发展,提出四点建议

20

赖岳谦:绍伊古为什么会下台?三位副部长涉及贪腐被抓

20

香港文体旅局答南都:已签署合作协议书落实大熊猫赴港安排

热门游戏

  • 1
    发生在加拿大多伦多市的一幕,他最后被五花大绑带走了。#老外真会玩

    射击枪战 /热度:48764

    点击下载

    出行注意!山西降雨频繁局地有大到暴雨警惕短时强降雨及雷暴大风

  • 2
    女子3米板跳水决赛

    射击枪战 /热度:45455

    点击下载

    珠海海事:激发“红色引擎”助力乡村振兴

  • 3
    国家铁路局修订《铁路旅客车站设计规范》

    射击枪战 /热度:07390

    点击下载

    拜特对决从总统辩论到美式骂街拜登辩论惨败的背后是谁的错?

  • 4
    崩坏3 巴西劳工党前主席:我们的奋斗目标是为了让巴西完成其未竟的革命

    射击枪战 /热度:65210

    点击下载

    男子6个月减重60斤

  • 5
    原神 世界上第一座氢摩天大楼将建在埃及——它将不连接电网

    射击枪战 /热度:59153

    点击下载

    俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

  • 6
    出发吧麦芬 俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

    射击枪战 /热度:79131

    点击下载

    社会类:优秀作品奖-《村里回来了个年轻人》

  • 7
    永劫无间手游 蔡壁如是民众党最后的战将?韩粉林佳新批黄珊珊没有战力

    射击枪战 /热度:86749

    点击下载

    俄罗斯酒鬼把我堵在院子里,要钱买酒喝,房东老太用棍子赶走他们

  • 8
    向僵尸开炮 两岸统一大局已定!大陆换了打法,赖清德感到大事不妙,来不及了

    射击枪战 /热度:36596

    点击下载

    "台媒:沙特王储自爆CIA要暗杀他!

  • 9
    鸣潮 卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

    射击枪战 /热度:31503

    点击下载

    约旦谴责以色列定居者袭击约旦河西岸村庄

  • 10
    艾塔纪元 "

    射击枪战 /热度:69998

    点击下载

    巴基斯坦阿富汗交火

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 独家专访 | 游戏声优访谈 | 热门排行 |