OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 澳总理访华前,澳籍华裔间谍成蕾被驱逐出境,澳外长亲自接机

责任编辑: 胡宥

发布时间: 2024-09-21 02:29:58

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

曝0元得充电宝套路

2

"中国最佳印度洋出海口在哪里?

3

国际局势风云起,越南军事科普引人关注

4

澜湄合作第九次外长会联合新闻公报

5

罕见!一镇政府发文,被撤销

6

郑钦文致敬刘翔

7

种植萝卜的黄金时机是什么?如何提高产量?揭秘经验丰富的老农之策

8

川维化工:“四注重”抓实反腐倡廉教育

9

台媒:台湾民众党“一人政党”的定位,应该趁机彻底改变了

10

“巴铁”好消息,#国际局势#巴铁

11

真相的力量!以色列代表谎言遭全球媒体狂批,加沙之痛难掩!

12

【学习贯彻党的二十届三中全会精神】我区召开学习贯彻党的二十届三中全会精神宣讲动员会

13

卡塔尔首相与伊朗代理外长通电话讨论地区局势

14

2024山东省绿色低碳冷链技术交流会成功举办

15

以官员:以军在加沙地带的作战已“基本结束”

16

佳县召开2024年度招商引资工作委员会第二次会议

17

《大国之道》:国家文化安全是国家安全重要保障

18

单县县直机关党建工作推进会召开

19

8月17日凌晨,国际传来11个新消息,全球局势发生了很大的变化!

20

奥运会数十人染新冠

21

出国发朋友圈流量费1.6万?上海回应

22

以高质效公益诉讼检察履职护航铁路运行安全

23

普京单挑半个地球的男人,已经72岁了,为了国家和妻子离婚

24

热点问答|三问“北溪”爆炸调查新进展

25

“伏特台风”事件:美国炮制的谎言与国际社会的觉醒

26

广州荔湾沙面街道:以“四大工程”助力沙面历史文化街区保护和提升

27

济南高新区管委会与恒瑞医药签署项目合作框架协议

28

【上海机场联络线计价方案公示,虹桥机场—浦东机场26元】根据上海市发改委发布公告

29

翁卓辉到大沙镇宣讲党的二十届三中全会精神

30

广东云浮市副市长王巍被查!他是80后、博士、教授!可惜也腐败了

31

大医精诚,格物致知——荆州市中心医院举办第七届中国医师节表彰庆祝大会

32

胖莎取关早田希娜

33

自贡富顺古佛镇:全力维护人民群众生命财产安全

34

台风“安比”继续北上将给日本多地带来强降雨

35

最高人民法院党组成员、政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

36

瑞典国王看小莫比赛

37

韩教练哭诉输给中国

38

财联社8月16日电,美国国务卿布林肯将于周日抵达以色列

39

天凉如水,吴盐胜雪,纤指破新橙,锦幄初温,馨香不断,相对坐调笙

40

高温下水产养殖危机四伏:热应激、肝出血与虹彩病毒频发,应对策略速来了解!

20

哈里斯经济议程聚焦降低成本,提议补贴首次购房者2.5万美元

20

苏丹中部一村庄遭袭致80人死亡

20

淮南凤台:城乡联动助困难家庭学子圆大学梦

20

访华前夕,新西兰总理翻脸,直言倒向美西方,曾要求中方提供援助

20

市市场监管局召开特种设备赋码试点工作动员部署会

20

加强施工污染防治监管营造舒适宜居环境

20

市场监管总局:涉企收费违法违规加快出台处理办法

20

巴基斯坦阿富汗交火

20

水安全保障看山西:省水利厅开展2024年度防汛关键期复盘分析会

热门攻略

1

俄罗斯成立边境地区军事安全协调委员会#俄乌冲突#库尔斯克#俄罗斯#保障#后勤

2

我国森林覆盖率超24%!还有这两项数据,居世界第一

3

国台办:民进党当局歪曲惩“独”措施、混淆违法行为和两岸正常交流

4

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

5

一张“托底网”帮得准、托得稳

6

拜登表示加沙停火谈判人员将在多哈停留

7

拜登和普京有哪些区别?

8

苹果一夜蒸发1609亿

9

重庆官方通报,2名干部被“双开”

10

滨州市高质量发展工作推进会议召开

11

基金12.52亿剩8.6万

12

安徽省宁国市“腾笼换鸟”盘活低效闲置土地纪实

13

西方嗅到风险:库尔斯克可能是陷阱?专家:乌或面临“军事终结”

14

市场监管总局:正在加快制定《经营者公平竞争合规管理规范》国家标准

15

巴拿马运河管理局再次提高运河通行能力

16

现河采油厂创新管理稠油调驱增油2350吨

17

网红桃花水一瓶卖到42元

18

这些政府服务“全省首创”“全市率先”均诞生在西安高新区

19

以河长制为抓手,守护邛崃清江碧水

20

惊险一幕!美国犹他州连续遭遇雷暴天气,居民拍下洪水冲破窗户涌入地下室瞬间

20

主播说联播丨让作弊者站出来、把违规者揪出来

20

台湾花莲县海域发生6.1级地震暂无灾情传出台北震感明显

20

澳专家撰文批美炮制“伏特台风”,美国的黑客帝国曝光

20

六台:亚马尔的父亲已经出院

20

波兰总理:波兰将申请举办奥运会

20

北溪管道,真是乌克兰炸的?

20

喊打的伊朗没有出手,要谈的乌克兰攻入俄境内,中国咋办?

20

学习全会精神助推法院高质量发展

20

铁南社区坚持党建引领“六微治理”,办好为民实事

20

“中国造”的特朗普娃娃被隐去产地,特朗普粉丝被背刺了…

20

"他信之女当选泰国新总理,这里头有门道!

20

国家电投与中国安能签署战略合作框架协议

20

潼关县委统战部不忘老朋友、广交新朋友、深交好朋友

20

以色列对加沙狂轰滥炸,中方发出警告,不留任何商量余地

20

中央赠港大熊猫“盈盈”诞下龙凤胎

20

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

20

中国人寿江西省分公司全力推进打击保险诈骗犯罪专项行动

20

丑橘备受欢迎,这几点种植要点要保障,给农户更多收益

20

河南省安阳市殷都区曲沟镇党委书记李爱文被查

20

中方要求菲律宾:立即停止!立即撤出!

20

世卫最高级别警报!猴痘怎么防?快收藏这份指南

20

广德开展全国生态日手工主题活动

20

拳击6人锁定5枚奖牌

20

孙颖莎回应决赛失利

20

V观财报|中达安信披不准确被警示

20

黔西南州委理论学习中心组举行集中学习研讨会

20

中纪委罕见怒批中国高校四大官僚主义!反腐进入高校!

20

“被震醒!”刚刚杭甬温多地网友:整栋楼在摇!台湾突发地震,热搜爆了

热门游戏

  • 1
    印尼总统佐科发表任内最后一次国情咨文

    射击枪战 /热度:73606

    点击下载

    共筑红色堡垒携手慰问老党员

  • 2
    "王法官两年审结七百件案子,去了节假日每天结案一件也多。

    射击枪战 /热度:78024

    点击下载

    忻府公安召开2024年上半年工作总结暨下半年工作部署会议

  • 3
    干部任职前公示

    射击枪战 /热度:40151

    点击下载

    富士康在印度的“悲催之旅”

  • 4
    崩坏3 澳门特区行政长官选举候选人提名期为8月29日至9月12日

    射击枪战 /热度:65297

    点击下载

    澳门公布行政长官选举日程表

  • 5
    原神 河北蠡县开展“全国生态日”主题宣传活动

    射击枪战 /热度:62717

    点击下载

    福建省人民政府领导成员最新分工公布

  • 6
    出发吧麦芬 滨州市学习宣传贯彻党的二十届三中全会精神暨市委宣讲团宣讲动员会议召开

    射击枪战 /热度:06179

    点击下载

    法国一小型民用飞机坠海1人死亡

  • 7
    永劫无间手游 广东云浮“80后”博士副市长王巍通报被查

    射击枪战 /热度:00048

    点击下载

    美国在破产的道路上越走越远,拜登紧急派人访华,这次有要事相求

  • 8
    向僵尸开炮 李佳琦否认整容

    射击枪战 /热度:73565

    点击下载

    最高法政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

  • 9
    鸣潮 1级地震,引起福建多地有震感。

    射击枪战 /热度:96964

    点击下载

    [长三角日报]刚刚,安徽一厅级干部被查

  • 10
    艾塔纪元 黑龙江省牡丹江市政府原副市长齐忠彦被“双开”

    射击枪战 /热度:75525

    点击下载

    美以两国防长通电话,讨论中东地区局势

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏产业分析 | 游戏美术设计 | 玩家自制MOD分享 |