OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 助柬埔寨城市告别“电网孤岛”(海外纪闻)

责任编辑: 霍艺

发布时间: 2024-09-20 07:19:14

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

当西方试图在科技领域给我们设限时,我国果断"

2

何其精彩!总书记对这项技艺高度赞赏

3

华裔女子死在床底

4

青理工“种子支教团”:12年,希望的种子种进五千山里娃的心里

5

热点问答|三问“北溪”爆炸调查新进展

6

江西永新:开展暑期关爱儿童志愿服务活动

7

国台办:民进党当局歪曲惩“独”措施、混淆违法行为和两岸正常交流

8

渝昆高铁渝宜段进入运行试验阶段

9

以外长声称:“希望与英法共同打击伊朗”

10

高效养猪新视角:优化日粮配比,助力生猪快速生长

11

外交部发言人就佩通坦当选泰国新任总理答记者问

12

台海局势一夜突变!美给台当局致命一击,赖清德想逃都逃不了!

13

结婚登记不需户口簿

14

美国宣布将破产!

15

“浙”一周||热门研报精选20240816第131期

16

判断俄乌战争形势和结局不能凭直觉主观意识,必须注重客观事实

17

王宗源谢思埸进决赛

18

郑钦文比赛因雨暂停

19

重庆官方通报,2名干部被“双开”

20

英国刚刚公开表示!

21

网格通讯员媒体新力量太原市第二期网格通讯员培训举办

22

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

23

“共享智造”推动河北特色产业集群高质量发展

24

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

25

青海省总工会启动2025年职工医疗互助保障活动

26

广州市召开推进城中村改造工作现场会

27

如何杜绝暴力事件再次发生

28

土耳其当地时间8月12日,一名头戴头盔、身穿防弹背心的蒙面男子,在土耳其西北部一座清真寺外刺伤至少5人,随后被警方逮捕。据报道,这名18岁的行凶者,他穿着像电子游戏中的人物,在网络上直播了自己的行凶的整个过程,直到他最后被警方逮捕。……

29

存款利率进入1时代

30

现在有个不好的舆论导向,但凡是漂亮的女干部或者女高管,只要被提拔了,就会有人说肯

31

夺冠姐妹花香港读博

32

下限4027元,上限20133元!湖南调整社保月缴费基数上下限

33

黄晓明恭喜陈梦

34

四川巴塘县水利局原四级调研员朱扎严重违纪违法被开除党籍和公职

35

“业委会”所涉典型行政诉讼简评

36

2024年全国生态日启动仪式暨研讨会在香港举行

37

否认决赛做侮辱手势

38

两部门联合发布《渔业行政违法行为名称规范》

39

俄别尔哥罗德州进入联邦级紧急状态

40

约旦谴责以色列定居者袭击约旦河西岸村庄

20

巴基斯坦西南部发生炸弹袭击致1死12伤

20

俄罗斯女孩主动到你想象不到#俄罗斯生活

20

川观夜读丨巴黎残奥会中国体育代表团成立;“十四五”重大工程银昆高速公路通车;巴西举办灯光秀庆祝中巴建交50周年

20

"金山在澳大利亚寻找更多的巴西稀土

20

综合英国《天空新闻》以及塔斯社的消息,乌军的"

20

晋中市开展“开门搞整治群众来评价”活动“问诊开方”抓实校园食品安全

20

泰国总理的权力有多大?怎么就被法院解职了?

20

8月15日,自治区党委书记李邑飞,自治区党委副书记

20

法国乒乓男团获铜牌

热门攻略

1

区统计局做好调查单位入库纳统工作

2

支持率只剩下6%!柯文哲推翻两党政治的挑战已结束!

3

宁夏与多地签订“社保通”合作框架协议推进社保服务事项“跨省通办”

4

湖南冷水滩:“以点带面”构建全域清廉格局

5

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

6

欧盟提高疫情警戒级别准备迎接更多输入性猴痘病例

7

120多名准大学生受益!兴宁市举行“张庆华教育基金”助学金发放仪式

8

与涉案人员订立攻守同盟,擅权滥权,贪敛钱财!黑龙江一原副市长涉嫌“三宗罪”

9

巴基斯坦阿富汗交火

10

美记者傲慢质问:你们为啥不能放弃台湾?中国学者一句话霸气回应

11

农发行牡丹江市分行召开2024年年中工作会议

12

美政府“旗舰产业政策”缘何面临困境

13

郑钦文致敬刘翔

14

乌突袭会否成为战事转折?双方实力是否发生实质改变?曹卫东解析

15

推动科技服务业高质量发展南通专题部署相关工作

16

大祸临头!18国派兵入韩,德国终于点头,朝鲜大动作轰动全球

17

美国想打败中国真的有那么难吗

18

梅根哈里到波哥大危险区,保镖展开“防弹公文包”,16辆警车护送

19

泰国坠崖孕妇,五年前被丈夫推下悬崖,如今故地重游感谢恩人

20

烟台农商银行牟平区高陵支行开展送金融知识进乡村活动

20

以色列定居者袭击巴勒斯坦村庄致1死1重伤,遭联合国、欧盟、英法猛批

20

张本智和输后笑了

20

刘洋卫冕吊环金牌

20

域见长丰

20

全市科协系统学习贯彻党的二十届三中全会精神市区科协党组书记(主席)座谈会召开

20

2024年7月南京市查处违反中央八项规定精神问题90起,给予党纪政务处分124人

20

无棣县润禹水务集团召开信访维稳及12345热线工作分析研判会

20

商务部:1-7月全国吸收外资5394.7亿元人民币

20

上城新建校园里“藏”着百年老宅当年小有名气的“花”牌锦缎就出自他家

20

澜湄合作第九次外长会发布联合新闻公报

20

业界:中国品牌发展迅速本质在于创新

20

以色列代表联合国告别演说:我们国家最道德!引发全球热议

20

美国男篮奥运五连冠

20

周雅琴平衡木银牌

20

里海,中国和欧洲未来的贸易枢纽?

20

关于防治“指尖上的形式主义”相关问题举报的公告

20

民心守护:三甲医院资源下沉解民忧

20

HPV疫苗降至奶茶钱

20

"乌克兰突袭俄罗斯库尔斯克,就像一个照妖镜,揭示了“10个真相”!

20

加沙女孩用嘴接卡车漏下的水滴解渴

20

“被震醒!”刚刚杭甬温多地网友:整栋楼在摇!台湾突发地震,热搜爆了

20

不把中国警告放眼里!美“盟友”接连收到噩耗,这就是亲美的代价

20

[党纪学习教育]抓实警示教育提升学习质效

20

中老缅泰外长举行非正式会晤

20

市委常委会召开(扩大)会议专题传达学习省委书记王晓晖莅眉调研指示精神

20

佩通坦当选泰国新任总理中国外交部:愿同泰方一道深化务实合作

20

小莫拿两块银牌显摆

20

沧州最新人事任免!

热门游戏

  • 1
    市场监管总局:将继续加强和优化反垄断监管执法,更好维护市场秩序、弥补市场失灵

    射击枪战 /热度:60384

    点击下载

    大陆一举轰动两岸,不到一天,美国口风大变,赖清德害怕的发生?

  • 2
    城市里的人突然消失,仅存的人还遭到面具人追杀

    射击枪战 /热度:23690

    点击下载

    沙特计划开发15个伊斯兰场所迎接副朝者

  • 3
    第十二届海峡青年节峰会在福州圆满举办

    射击枪战 /热度:87282

    点击下载

    张博恒被送错场馆

  • 4
    崩坏3 职员请假参加奥运

    射击枪战 /热度:85742

    点击下载

    宜春市中级人民法院原党组成员、副院长况柳根接受审查调查

  • 5
    原神 美国强行嫁祸乌克兰,乌克兰拒绝接受,却愚蠢地要甩锅给俄罗斯

    射击枪战 /热度:68524

    点击下载

    运河之舟讲习所启航:讲好运河故事弘扬运河文化

  • 6
    出发吧麦芬 “高效办成一件事”改革效果如何?数据来说明

    射击枪战 /热度:27703

    点击下载

    3分钟打开闽台乡建乡创的“福建模式”协商民主不仅可以解决生活中的难题,也能帮助台青在大陆找到广阔的发展空间

  • 7
    永劫无间手游 四川一副局长变"富"局被谈话后仍敛财

    射击枪战 /热度:43640

    点击下载

    西方嗅到风险:库尔斯克可能是陷阱?专家:乌或面临“军事终结”

  • 8
    向僵尸开炮 “K粉女王”长袖善舞,无良医生贪财害命,好莱坞明星之死牵出犯罪网络

    射击枪战 /热度:38696

    点击下载

    特朗普和高龄粉丝互动:你真美你看起来也就60多岁高龄女粉丝:我快100了

  • 9
    鸣潮 外交部发言人就佩通坦当选泰国新任总理答记者问

    射击枪战 /热度:76674

    点击下载

    湖南泸溪:多彩非遗展演璀璨沅水之夏(图)

  • 10
    艾塔纪元 张雨霏奖牌太多超重

    射击枪战 /热度:58013

    点击下载

    菲律宾海警船在仙宾礁潟湖非法滞留,外交部回应

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 策略游戏攻略 | 玩家视频投稿 | 游戏公会招募 |