OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 网络作家吴鹏飞-关于官员财产公示的建议

责任编辑: 融巍

发布时间: 2024-09-20 10:41:40

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

女子火锅店被浇头实录,只因嫌上菜慢辱骂服务员,结果被开水浇头

2

澳门公布行政长官选举日程表

3

突发!巴黎奥运首例奖牌被回收事件诞生,美国紧急申诉,结果待定

4

2024年淄博市化妆品不良反应监测工作培训班举办

5

福建省商务厅领导会见马方重要来宾一行

6

李炳军会见中国五百强产业联盟主席江南、刘志强一行

7

加快经济社会发展全面绿色转型

8

24小时内,岛内传来2个爆炸性消息!赖清德有新行动

9

区委全面深化改革委员会召开第二十二次会议

10

南昌市公安局原四级高级警长被双开详情:管项目“吃”项目

11

泰国政局“三足鼎立”佩通坦为何能够顺利当选?

12

微视频|绿水青山间

13

美国大选变天?哈里斯宣布重磅消息!关键时刻,特朗普开始喊话

14

美国白宫发言人柯比:在接下来的几天里,美国将宣布更多对乌克兰的安全援助

15

初秋晒葵忙

16

体验跳水视网膜脱离

17

通知书切西瓜不怕烧

18

中国贸促会会长任鸿斌会见广西壮族自治区副主席谭丕创一行

19

破船不拖不行?中方启用B计划,“最强帮手”上阵,南海大局已定

20

出行注意!山西降雨频繁局地有大到暴雨警惕短时强降雨及雷暴大风

21

台湾花莲县发生4.0级地震,震源深度18千米

22

上海公布市域线票价机制方案:两大机场互通单程26元,只需40分钟

23

他信之女成泰国新总理,揭秘百年钦那瓦家族

24

杨军到通山县调研重点项目建设工作找准定位明确方向夯实底盘加快发展

25

开渔日,海南省近1.4万艘渔船从各地渔港扬帆起航

26

4件事帮你缓解劳累

27

石家庄高新区外国语学校党支部开展主题党日活动

28

特朗普等他大权在握,先和中国搞好关系,不急着对中国下战书?

29

小林制药退红曲业务

30

以外长喊话英法:共同打击伊朗

31

台湾气象部门:花莲今日地震为“4·3花莲强震”余震

32

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

33

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

34

零突破!资阳乐至生丝产品有了商标“护身符”

35

吴愉击落第33金

36

多米尼加总统阿比纳德尔宣誓就职

37

合肥“大外环”北环线涉铁转体桥完成首次转体

38

中国发展是全球南方国家的重要机遇(国际论坛·读懂中国·读懂中国式现代化)

39

樊振东示意关闪光灯

40

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

20

晚安,玛卡巴卡[月亮]

20

潍坊寒亭:优化政务公开助力人居环境整治提升

20

特朗普火力全开!发布会半程怒怼哈里斯,直言:骂的就是你

20

邱建良真给力,霸气打败泰国高手

20

接受中国调解的沙特王储,面对美国促和却不敢冒险

20

热点问答|三问“北溪”爆炸调查新进展

20

李克勤初舞台第一

20

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

20

拜登发声明,夸即将卸任的岸田文雄,还称“将永远感激”

热门攻略

1

库里连中四个三分

2

3

北京今天最高气温32℃,有分散性雷阵雨,双休日降雨明显

4

林武在烟台调研核电产业发展时强调积极安全有序推进核电项目建设加快经济社会发展全面绿色转型

5

阿比纳德尔宣誓就任多米尼加总统

6

世界卫生组织:苏丹霍乱疫情已致316人死亡

7

第二届全区公诉人与律师论辩大赛总决赛圆满落幕

8

黔西南:河长制从"有名""有实"到"有能""有效"转变

9

日本发生7.1级地震

10

法国一小型民用飞机坠海1人死亡

11

中纪委官网刚刚通报,李延强接受审查调查

12

李显龙震撼发声:中国力量势不可当,美国应学会低头共谋发展!

13

2024年前7个月访港旅客约2500万人次同比增加52%

14

方正赴六安高新区宣讲党的二十届三中全会精神并调研

15

建设“南方牙谷”,南海信心满满

16

李政道逝世

17

深入学习贯彻市委十四届八次全会精神丨新城镇:立足自身着眼大局奋力谱写高质量发展新篇章

18

意外触电致1死1轻伤

19

特朗普和马斯克想不通,美国基建,为啥远远落后中国了?

20

越南美女与碉堡的传奇故事令人惊叹

20

焦点对话:中国管制“工业味精”出口缘何引来美西方紧盯?

20

西藏拉日铁路通车十周年记:再远的路也变近了

20

ESG一周丨我国首次系统部署加快经济社会发展全面绿色转型;国家发改委将从5方面推进生态文明建设

20

中山一地发生命案

20

世界卫生组织:苏丹霍乱疫情已致316人死亡

20

关于防治“指尖上的形式主义”相关问题举报的公告

20

多国官员预期“伊朗推迟报复计划”美官宣布林肯周六启程赶赴中东

20

美国总统大选辩论将于9月10日在费城举行

20

中老缅泰外长举行非正式会晤

20

美国某种程度上宣判了多边机制的死亡,而中国正在努力重建它们

20

台湾气象部门:花莲今日地震为“4·3花莲强震”余震

20

严防山洪、地质灾害,湖南省防办连夜发布汛情提醒!

20

南京通报5名干部被查

20

女导游嘲讽游客穷

20

奥运奖牌开始脱皮了

20

辟谣龙脊广场有命案

20

烟台市自8月起陆续举办5项大型人才对接活动

20

关于奥运会,虽然印度这次成绩不理想,但你不得不佩服印度人对于此事从不角度的深入分

20

美国正利用“亚速营”,完全解除武器限制,不分善恶都要利用

20

澳门特区政府集体学习中共二十届三中全会精神

20

美国大选变天?哈里斯宣布重磅消息!关键时刻,特朗普开始喊话

20

美国强行嫁祸乌克兰,乌克兰拒绝接受,却愚蠢地要甩锅给俄罗斯

20

惺惺相惜!孙颖莎基普乔格相互关注,闭幕式联手,熄灭圣火

20

专家解读教培放开

20

郑钦文金牌已经回国

20

美国总统大选辩论将于9月10日在费城举行

20

华人女子遭黑人歧视,当街被一拳爆头,在国内时的豪横呢?

20

这是关系中华民族永续发展的根本大计→

热门游戏

  • 1
    快看!万亿沙特资本“加码”布局中国,背后有这些关键因素

    射击枪战 /热度:09523

    点击下载

    中央气象台:湖南南部部分地区今晚至明天将有大到暴雨

  • 2
    苏纳克又给英国人上了一课

    射击枪战 /热度:86424

    点击下载

    县委书记耿振华赴北城街道宣讲党的二十届三中全会精神

  • 3
    雄安早知道丨雄安新招聘!事业编!(2024.08.16)

    射击枪战 /热度:65502

    点击下载

    中华医学会2024年组织建设工作会议在济南开幕

  • 4
    崩坏3 在事实面前,美国的“全球叙事”不攻自破|参考独家

    射击枪战 /热度:24910

    点击下载

    陈梦分享海边美照

  • 5
    原神 最新!福建省人民政府领导成员工作分工

    射击枪战 /热度:13985

    点击下载

    阿比纳德尔宣誓就任多米尼加总统

  • 6
    出发吧麦芬 吴艳妮谈带妆比赛

    射击枪战 /热度:97384

    点击下载

    美国总统大选辩论将于9月10日在费城举行

  • 7
    永劫无间手游 岸田辞职对中国不是好事,他其实是自民党内的鸽派,在他任自民党总裁期间虽然中日关系

    射击枪战 /热度:05473

    点击下载

    澳门特区行政长官选举候选人提名期为8月29日至9月12日

  • 8
    向僵尸开炮 印度女医生遭奸杀引愤慨示威者:哪里才安全?

    射击枪战 /热度:27735

    点击下载

    国台办:民进党当局歪曲惩“独”措施、混淆违法行为和两岸正常交流

  • 9
    鸣潮 越南能源与环境专家笔下的福南运河

    射击枪战 /热度:81485

    点击下载

    四川首条跨市域轨道交通线路7座车站亮相

  • 10
    艾塔纪元 江西电信4500家“爱心翼站”让这个暑期更舒心

    射击枪战 /热度:33243

    点击下载

    塞尔维亚高官:尽管欧盟施加巨大压力,塞永远不会制裁俄罗斯

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏声音设计大赛 | 跨平台游戏推荐 | 游戏技巧 |