OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 中越"

责任编辑: 诸葛翔

发布时间: 2024-09-20 12:32:34

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

俄罗斯总统普京会见巴勒斯坦总统

2

英媒:“银发旅游”正在中国兴起

3

盛阅春会见采埃孚集团执行副总裁汪润怡一行

4

玉泉区召开优化营商环境工作推进会

5

绘就中国绿色发展的“工笔画”

6

杨昊10米台预赛失误

7

V观财报|中达安信披不准确被警示

8

日本投降79周年

9

小莫谈奥运夺金可能

10

省妇联副主席王玉花到稷山县进行调研

11

澜沧江-湄公河合作第九次外长会在泰国举行

12

印度仍未收获首金

13

南京市江宁高新区以共商共治探索破解停车难题

14

射击5金2银3铜收官

15

山东省中医院获批筹建山东省重点实验室

16

一直以来,民进党当"

17

他信之女成泰国新总理,揭秘百年钦那瓦家族

18

台经理剪掉五星红旗

19

弘扬中医文化共享健康生活丨城阳街道多措并举开

20

特朗普飞机故障降落

21

高分考生挤二本大专

22

泰国迎来亲中80后总理,挖掘克拉运河还远吗

23

美国反兴奋剂机构丑闻·国际人士表示美国干扰中国运动员为自身获奖创造条件

24

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

25

《人民代表报》全国通讯员培训班在包头市委党校举行

26

内塔尼亚胡警告伊朗

27

中国对锑等物项出口管制引关注,商务部:不针对任何特定国家和地区

28

老祖宗的谚语告诉你:入秋后种植这些农作物,错过时机可就晚了!

29

彻底翻脸?富士康做出重大决定,郭台铭:不再给大陆“赏饭”吃

30

广东省云浮市政府党组成员、副市长王巍被查

31

江西省药监局召开药品安全形势分析暨监管工作推进会

32

伊朗革命卫队驻叙军事顾问身亡

33

台有关部门公布“2·14”恶性撞船事件调查结论,国台办:不能接受

34

社评:维护全球金融稳定,美方应同中国相向而行

35

综合英国《天空新闻》以及塔斯社的消息,乌军的"

36

悉尼一公寓发生命案

37

北投能源集团鑫祥石油公司创建“节约型”加油站

38

乡村产业齐发力振兴发展潜力足——“强三农促振兴”系列报道之一

39

国家市场监督管理总局:国家企业信用信息公示系统日均访问量突破1.31亿人次

40

百舸争流喜开渔

20

最快15个工作日就能开饭店市场监管总局推行“高效办成一件事”改革

20

抵制开始!国内多家涉长荣企业急声明,长荣连续道歉整改也没用?

20

樊振东进行多球训练

20

国防部:强化使命担当努力建设强大稳固的现代边海空防

20

澜湄清洁空气倡议联合声明(摘要)

20

辟谣久躺更伤身体

20

黎智英案细节曝光,监狱成最终归宿,陈方安生与李柱铭何时收监?

20

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

20

最新!福建省人民政府领导成员工作分工公布

热门攻略

1

京津冀地区用电报装首次实现“跨域办”

2

苏州市相城区黄桥街道:议政代表搭建沟通桥梁,为民解忧无小事

3

游泳混合接力获银牌

4

凝聚改革共识做到双岗建功2024-08-1706:47:22 [今日聚焦] 太原日报 阎轶洁2024-08-1706:47

5

俄称在库尔斯克州打击乌军,乌称战斗仍在继续

6

黄一鸣晒婚纱照

7

助力统战文化建设!嘉定区统一战线文化研究会成立

8

过度用呼吸机致死亡

9

加强安全防范加快灾后重建

10

第八届金砖国家工业部长会议在俄罗斯下诺夫哥罗德召开

11

省委宣讲团赴各地宣讲党的二十届三中全会精神:凝聚前行共识,激发奋进力量

12

"

13

美国国务卿布林肯或前往以色列会见内塔尼亚胡

14

俄乌和谈将长期暂停

15

尼日利亚中部至少20名大学生遭绑架

16

澜沧江-湄公河合作第九次外长会在泰国举行

17

张雨霏晒1银5铜告别

18

好City丨成立石墨产业联盟、开展节庆活动……网友描绘鸡西未来蓝图

19

翁源县领导深入企业,共谋乡村文化振兴新篇章

20

广东省人民政府最新任免工作人员

20

美媒称朝鲜或将开放旅游市场

20

河北举办首批排污权跨区流转签约

20

南方都市报社拟申领新闻记者证人员名单公示

20

国台办:台方应严惩“2·14”恶性撞船事件责任人

20

潍坊寒亭:优化政务公开助力人居环境整治提升

20

澜湄合作框架下加强打击跨境犯罪合作的联合声明(摘要)

20

海南到广东仅9公里,为何不造一座跨海大桥?

20

以色列定居者袭击巴勒斯坦村庄致1死1重伤,遭联合国、欧盟、英法猛批

20

孙杨世界纪录被打破

20

龙哥出手,“小越子”服了!#国际局势#大运河

20

学习贯彻党的二十届三中全会精神,贵阳贵安这么干⑨

20

以色列公开称伊朗与黎巴嫩真主党在密谋暗杀以色列高级官员。因为俄罗斯方向的战斗不理

20

"惊爆全球!

20

济南市教育局新增一名副局长,此前任职市科技局

20

美记者傲慢质问:你们为啥不能放弃台湾?中国学者一句话霸气回应

20

王毅:为缅甸实现稳定、和解和发展发挥建设性作用

20

外交部发言人就佩通坦当选泰国新任总理答记者问

20

中老缅泰外长举行非正式会晤

20

官员性侵女童和山羊

20

支持!商务部彻底放开外国投资者投资限制!谁能搞好,就让谁搞

20

莫斯科利用最近囚犯交换的胜利

20

全红婵陈芋汐双保险

20

国安重拳出击,抓获“台独”头目!39国阻拦统一,美高层紧急来华

20

央企领导班子成员都是由哪一级任命?

20

伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

20

巴西空难致62人遇难“黑匣子”被破译

20

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

20

助力科特迪瓦可可产业加速发展(新时代中非合作)

热门游戏

  • 1
    孙杨参加明年全运会

    射击枪战 /热度:14315

    点击下载

    泰国总理的权力有多大?怎么就被法院解职了?

  • 2
    民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

    射击枪战 /热度:01499

    点击下载

    唐山又一厅官落马,曾任副市长

  • 3
    联合国机构:也门暴雨引发洪水逾18万人受灾

    射击枪战 /热度:12410

    点击下载

    胖东来郑州分胖来了

  • 4
    崩坏3 拒挂中国国旗台资酒店道歉

    射击枪战 /热度:72320

    点击下载

    广州花都:开局即冲刺,跑好基层社工部“第一棒”

  • 5
    原神 专项培训、实地勘察、新闻发布……模拟政协活动展现青少年智慧

    射击枪战 /热度:80827

    点击下载

    珠海海事:激发“红色引擎”助力乡村振兴

  • 6
    出发吧麦芬 中国再增美债至7802亿,谈了2天拜登终于笑了,日本却成定时炸弹

    射击枪战 /热度:02305

    点击下载

    青海、江苏两地法院联合设立三江源生态环境司法修复基地

  • 7
    永劫无间手游 中航集团:完成第二轮内部巡视反馈

    射击枪战 /热度:33765

    点击下载

    终于改变主意,首访选择中国。

  • 8
    向僵尸开炮 孙颖莎小卡炒至上万

    射击枪战 /热度:59813

    点击下载

    明查|内塔尼亚胡称美国投下原子弹是对日本的“报应”?

  • 9
    鸣潮 中企承建巴基斯坦莫赫曼德水电站实现截流

    射击枪战 /热度:13175

    点击下载

    伊朗大使馆:伊朗拥有从本国境内任何地点打击敌人的技术能力

  • 10
    艾塔纪元 我们收回了台湾海峡的捕鱼权,民进党只能盯着它看!8月16日,据岛上媒体报道,岛上

    射击枪战 /热度:56086

    点击下载

    退捕渔民安置保障措施实现全覆盖

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏竞技教学 | 怀旧游戏时光 | 玩家自制游戏 |