OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 宁夏银川:智慧化葡萄园高效节约黄河水

责任编辑: 屠帆

发布时间: 2024-09-21 00:37:40

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

澳门特区行政长官选举候选人提名期为8月29日至9月12日

2

银昆高速太彭段建成通车

3

#在顿涅茨克,乌克兰向Galaktika购物中心开火。大楼着火,里面有平民伤亡。

4

美不看好泽连斯基,美欲逼其辞职,谁当乌总统差别不大

5

台湾民众苦民进党“禁团令”久矣丨湾区望海峡

6

安徽省蚌埠市人大常委会原副主任汤春义接受审查调查

7

徐卓一跑进半决赛

8

巴拿马运河管理局再次提高运河通行能力

9

澳IT专家撰文揭批美炮制“伏特台风”虚假叙事

10

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

11

科目二考试中途熄火

12

【中国网评】以中国式现代化新成就为世界发展提供新机遇

13

赖清德可以死心了!不用等大陆出手?关键时刻,拜登给出当头一棒

14

俄乌和谈将长期暂停

15

镇平县工商联(总商会)携手爱心企业开展“光彩助学”捐赠活动

16

全球市场需求收缩,葡萄酒行业迎来“关键时刻”

17

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限。

18

黄浦区三届人大常委会举行第二十二次会议

19

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

20

中方加速从菲撤资退出三大项目不再给菲贷款美日也拒绝接盘

21

高效养猪新视角:优化日粮配比,助力生猪快速生长

22

味蕾游成暑期新选择

23

女实习医生被奸杀引发全国抗议,印度医师团体:至少30万医护人员走上街头

24

喊打的伊朗没有出手,要谈的乌克兰攻入俄境内,中国咋办?

25

贵阳市率先在全省实现企业上市合法合规信息核查“一件事”高效办理

26

乌苏里江海青段洪峰正平稳过境

27

王皓扛起樊振东

28

阿巴斯:即使付出生命也要去加沙

29

特朗普称美国必须有能力同中国在人工智能领域竞争

30

墨西哥暴力事件频发的恰帕斯州,一辆废弃卡车内发现19具尸体

31

果树成长关键时刻:果实膨胀期如何正确补钙?这篇文章告诉你答案!

32

北京大学人民医院青岛医院开展第七个中国医师节系列活动

33

全疆首个“数字政务门牌”在高新区(新市区)上线

34

“一股下水道臭味……”166元老鸭面吃出腐鼠?官方通报:养殖环节异物没入鸭腿造成内部肌肉组织感染

35

旧物当钱花成年轻人新时尚杭州首届绿色生活消费季活动在银泰百货启动

36

加强施工污染防治监管营造舒适宜居环境

37

邹敬园为体操队发声

38

滨州市体育局为财政局培训班授课引关注

39

赖清德彻底坐不住?“整顿台立法机构”突响,韩国瑜大动作上演,民进党猝不及防

40

广西一景区设施故障

20

阿比纳德尔宣誓就任多米尼加总统

20

美国某种程度上宣判了多边机制的死亡,而中国正在努力重建它们

20

市场监管总局:办理环节需要提交的要件能减则减,该免尽免

20

赖清德清算政敌其中一环?端木正被收押交保,事件风暴疑云重重

20

印度一医生惨遭轮奸致死,体内取出大量体液,引发30万人罢工暴乱

20

美国邀请印度加入北约被拒,看看外网怎么说?#油管五常

20

澜湄合作框架下加强打击跨境犯罪合作的联合声明(摘要)

20

烈日下的基建狂魔@国家电网@抖音短视频

20

刘文华专题调研制造业数字化转型工作并主持召开全市制造业数字化转型工作座谈会

热门攻略

1

农发行哈市城郊支行完成全省农发行系统首次"智链贷2.0"维护环节

2

莱尔斯男子百米夺冠

3

拜登法案执行不顺,超250亿锂电项目被迫暂停!

4

绘就山川秀美现代化甘肃画卷

5

垃圾桶内发现男婴

6

非法收受巨额财物,中山一村党委原书记苏池结被开除党籍

7

老美肠子悔青!中国真的无解太可怕!(下)

8

三伏天偷20多台空调

9

杨军到通山县调研重点项目建设工作找准定位明确方向夯实底盘加快发展

10

也门胡塞武装,禁止以色列船只过海峡,为什么说美国骑虎难下

11

12

韩检方调查文在寅夫妇银行账户,共同民主党27名议员发联名声明:明显的政治报复,应立即停止

13

老鸭面里吃出“腐鼠”?官方通报!

14

加强施工污染防治监管营造舒适宜居环境

15

中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

16

“80后”陈章杰履新湖南省政府副秘书长

17

台风“安比”继续北上将给日本多地带来强降雨

18

"真悬!幸亏当时中国没有答应乌克兰的要求!

19

明查|内塔尼亚胡称美国投下原子弹是对日本的“报应”?

20

专家解析美国大选:马斯克“带资进组”,硅谷富豪为何右转?丨

20

司机拒运遗体被投诉

20

男孩遭铁链栓脖拖行

20

又贵又慢!荷兰互联网费用居欧洲高位,质量却只排第六

20

欧洲实拍!比利时移民殴打白人,视频涉禁

20

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

20

2024年北京十大律师事务所排名(最新整理)

20

多米尼加总统阿比纳德尔宣誓就职

20

福建省委书记向台湾青年发“招贤令”

20

长荣饭店刚道歉,台当局就混淆视听,14亿国人的统一愿望不可阻挡

20

“林溪”和“一家”“萌动”华蓥山

20

“一门四总理”的他信家族卷土重来,37岁佩通坦如何迎接严峻挑战?

20

改变柬埔寨命运的运河已开建,越南遭受重大打击,发展之路更艰辛

20

国台办:民进党当局歪曲惩“独”措施,意图欺骗、恐吓台湾民众

20

河北省唐山市一级巡视员曹全民接受审查调查

20

马栋龑违规吃喝,被降级

20

市场监管总局:企业注销办理最快缩短至46天包含法定公告期45天

20

国台办:民进党当局故意混淆极少数“台独”顽固分子和广大台湾同胞,用心险恶

20

汤春义,被查

20

国家金融监督管理总局就《金融机构合规管理办法(征求意见稿)》公开征求意见

20

郑钦文无缘闭幕旗手

20

李依晓官宣恋情

20

沈丹阳向群团组织党员干部宣讲党的二十届三中全会精神

20

北溪管道,真是乌克兰炸的?

20

“茶和天下”中国茶全球传播启动仪式在京举行

20

英将有更多抗议活动

20

访华前夕,新西兰总理翻脸,直言倒向美西方,曾要求中方提供援助

20

中老缅泰外长举行非正式会晤

20

大转变!乌军攻入俄罗斯的第七天,美国才意识到:有三个没想到

热门游戏

  • 1
    2024年全国“新时代好少年”先进事迹

    射击枪战 /热度:13958

    点击下载

    北京15区雷电预警,今起三天雨水频繁

  • 2
    德国美女到中国,下飞机仅仅半小时:你们管这叫发展中国家

    射击枪战 /热度:36816

    点击下载

    以色列代表联合国告别演说:我们国家最道德!引发全球热议

  • 3
    “行进中国”调研行|一步跨两国去边境打卡神圣又繁忙的“中国门”

    射击枪战 /热度:56550

    点击下载

    重庆两名干部被“双开”

  • 4
    崩坏3 用法治力量护航营商环境优化浙江省人大常委会机关以法护航

    射击枪战 /热度:28843

    点击下载

  • 5
    原神 巴基斯坦报告3例新增猴痘感染病例

    射击枪战 /热度:30239

    点击下载

    中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

  • 6
    出发吧麦芬 佩通坦当选泰国总理,中方回应

    射击枪战 /热度:94336

    点击下载

    全国生态日“小手拉大手”,镇江市“生态文明第一课”火热开讲

  • 7
    永劫无间手游 漯河市市长黄钫调研城市建设者管理者之家、人才公寓和“断头路”打通项目建设情况

    射击枪战 /热度:25037

    点击下载

    三亚12345热线功能“上新”12个审批事项可“电话办”

  • 8
    向僵尸开炮 孙志刚敛财8.13亿

    射击枪战 /热度:86094

    点击下载

    闭幕式太抽象了

  • 9
    鸣潮 俄罗斯在库尔斯克乱了分寸,俄媒想起中俄曾有个约定

    射击枪战 /热度:26107

    点击下载

    马龙问你要考研啊

  • 10
    艾塔纪元 重庆全面推行千年古树司法守护人制度

    射击枪战 /热度:88986

    点击下载

    TikTok在禁令法律纠纷中辩称:美国夸大其与中国关系

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 明星玩家 | 游戏社区活动 | 虚拟现实游戏区 |