OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 否认决赛做侮辱手势

责任编辑: 柯铭

发布时间: 2024-09-20 20:54:19

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

苏丹中部一村庄遭袭致80人死亡

2

台州建设:全省唯一一家县融,温岭融媒入选全国典型

3

高新区召开党工委第9次理论学习中心组学习会

4

情况不妙,岸田文雄被逼下台,辞职前派人访华,求中国答应2件事

5

第十二届海峡青年节峰会在榕举行

6

权威发布|大力弘扬见义勇为精神,聊城这样做

7

台湾两高校分获两岸名校电竞赛亚季军

8

利津河务局联合胜利油田开展崔庄控导运行管理检查

9

邵阳大祥区:铁拳出击打非治违守牢烟花爆竹安全关

10

台当局赴澳拒签一中,后又出言不逊,澳门回应:不签就别来了

11

油价跌回7元时代

12

曲阜市姚村镇召开网格员业务能力提升培训会

13

14

英法以外长耶路撒冷举行会谈

15

录取通知书当废纸卖

16

巴基斯坦奎达市发生炸弹袭击致1死12伤

17

“以需定购”,哈尔滨市这份“好房子”建设问卷调查继续邀您填

18

挪威专家出来说实话了!8月16日,挪威专家格伦·迪森表示,美国作为以前的霸主,正

19

[企业动态]中顺洁柔新增1件法院诉讼,案由为不正当竞争纠纷

20

滨州市生态环境局与多部门联合开展“企业环保法律服务日”活动

21

外媒花式夸赞潘展乐

22

广西壮族自治区政协经济委员会副主任李延强接受审查调查

23

利用职务便利为亲属谋利,中国移动上海公司原资深经理(总经理级)张维华被开除党籍

24

媒体看奉贤:法治“小人物”发挥治理“大作用”

25

工电联整全力应“烤”护航中欧班列

26

#日本研究机构预测全球变暖将导致大米产量下降#日本

27

马林退赛

28

乌克兰是怎样攻入俄罗斯本土的?对之后的局势又会产生怎样的影响

29

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

30

突发!瑞典首都确诊非洲以外首例猴痘变种病例

31

或许印度也没有想到,一次简单的瑜伽运动竟然将高度机密"

32

TikTok在禁令法律纠纷中辩称:美国夸大其与中国关系

33

总统大选首场辩论特朗普完胜!新总统已定?对中美关系影响重大

34

澳门公布行政长官选举日程表

35

2024年全国生态日启动仪式暨研讨会在香港举行

36

打造“敏捷服务”,江苏部署实施29项“高效办成一件事”

37

黑龙江省委批准:开除齐忠彦党籍!任职地原市长已被查

38

日本发巨大地震预警

39

揭秘:与荔枝完美搭档的神秘水果!吃完别急着丢核皮

40

日本钢板仙人,最高端的钢板是如何制造的

20

福田粉丝探秘“城市野性居民”,共建万物和谐美丽家园

20

民族败类必被清算!大陆不再忍耐,10人被点名,“台独”好日子到头

20

以色列定居者大规模纵火!有村民被打死

20

20

芒果应该怎么种?这些要点应掌握,高产很简单

20

揭秘:与荔枝完美搭档的神秘水果!吃完别急着丢核皮

20

岸田文雄将下台,日本下届首相浮现,对华态度更强硬

20

法国一小型民用飞机坠海1人死亡

20

俄罗斯指认西方为乌克兰攻打库尔斯克“支招”

热门攻略

1

2024年中华文化大乐园葡萄牙里斯本营开营

2

翁源县领导深入企业,共谋乡村文化振兴新篇章

3

真人版“分小萌”上线顺义区光明街道深入推进垃圾分类工作

4

印度女医生遭奸杀引愤慨

5

台州建设:沈铭权调研专精特新企业培育、历史经典产业发展工作

6

以官员:以军在加沙地带的作战已“基本结束”

7

国家市场监管总局:规范市场竞争维护公平竞争市场秩序

8

郑钦文父亲眼睛哭肿

9

《广东省科技创新条例》有哪些首创性制度?

10

突发!俄拒和谈,乌军被包围回不去,乌高官称:无意夺取俄领土!

11

莒县农商银行大力发展农村普惠金融赋能乡村振兴

12

利津河务局:采砂监管不松弦

13

财联社8月17日电,美国国务院消息,美国国务卿布林肯将于当地时间8月17日访问以色列

14

樊振东回复小莫

15

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

16

印度夏季50度高温,当地人如何避暑

17

瑞幸向易烊千玺道歉

18

2024中国—东盟周系列活动开幕

19

中澳高级别对话第八次会议在阿德莱德举行

20

全红婵成了社交悍匪

20

日本股市大涨超8%

20

省“社科专家市县行”咸宁调研交流会召开

20

吃达美乐被二度烧伤

20

李宁龙服被嘲吸汗差

20

拜登表示加沙停火谈判人员将在多哈停留

20

不见棺材不落泪?赖清德紧急赴美国求救,我防长为两岸统一定调

20

外交部:对佩通坦女士当选泰国总理表示祝贺

20

美国加州发现3.6米长罕见深海鱼尸体,或与地震等自然灾害有关

20

两大消息:菲律宾再次非法坐摊?中国若支持俄罗斯或已爆发三战

20

黑数据与假排名背后阴谋:美国政治的虚假面纱,如何沦为权力游戏

20

山西省晋城市召开生态环境专项资金项目谋划推进会

20

但是"

20

茅台红缨子高粱种植面积累计推广超3000万亩

20

川陕甘跨境电商产业园暨对外贸易服务中心项目落地广元

20

“80后”副市长王巍,任上被查

20

这就是亲美的下场?赖清德的报应来了!大局已定,根本不用大陆出手

20

美国国务院批准向加拿大出售战术导弹

20

马拉松奥运新纪录

20

安洗莹炮轰韩国羽协

20

大搞权钱交易!广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被“双开”

20

潘展乐惊天逆转

20

被女装背刺改买男装

20

美总统羡慕中国高铁

20

湖南省人大常委会执法检查组调研生态环境卫片图斑与监测网络建设情况

20

一个北大的女学生对日本记者的回答

20

美国降息的影响+美国经济的猜想+美国股市的猜想

20

省政协委员工作委领导来涟调研

20

谷爱凌和游泳队合照

热门游戏

  • 1
    婚登中取消户口簿是否会导致重婚、骗婚?民政部回应

    射击枪战 /热度:25599

    点击下载

    法国一小型民用飞机坠海1人死亡

  • 2
    周六你需要知道的隔夜全球要闻

    射击枪战 /热度:48849

    点击下载

    结婚登记不需户口簿

  • 3
    俄女演员向乌克兰慈善机构捐款52美元被判12年刑期

    射击枪战 /热度:61602

    点击下载

    普京忙着开会,美国代表团到访中国,要让中国帮两个忙

  • 4
    崩坏3 非洲联盟驻华代表到访南宁畅谈合作前景

    射击枪战 /热度:35534

    点击下载

    何忠友,已明确正部长级

  • 5
    原神 防范!广东今明天迎明显降雨过程局地或现大暴雨伴强对流

    射击枪战 /热度:92856

    点击下载

    女子输液被收座位费

  • 6
    出发吧麦芬 川陕甘跨境电商产业园暨对外贸易服务中心项目落地广元

    射击枪战 /热度:14934

    点击下载

    哈马斯官员:以色列方面试图破坏加沙停火谈判进程

  • 7
    永劫无间手游 [党纪学习教育]抓实警示教育提升学习质效

    射击枪战 /热度:10718

    点击下载

    联想杨元庆AI是未来趋势但大模型不应成为唯一的追逐目标

  • 8
    向僵尸开炮 农发行哈尔滨阿城支行:创新征信“十加”工作方法提升金融服务质效

    射击枪战 /热度:55543

    点击下载

    地铁11号线二期完成热滑今年内通车,将串联宝安、南山与罗湖

  • 9
    鸣潮 打头骨老师当庭翻供

    射击枪战 /热度:70041

    点击下载

    法国一小型民用飞机坠海1人死亡

  • 10
    艾塔纪元 中国建设银行甘肃省分行副行长邵茂丰被查

    射击枪战 /热度:66470

    点击下载

    国外油罐卡车也太先进了吧

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 战队风采 | 游戏内活动预告 | 游戏MOD分享 |