OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 派出所秒变高粱晒场

责任编辑: 百里悦

发布时间: 2024-09-20 09:12:53

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

介文汲:石破茂比岸田文雄还要右与大陆保持关系紧张来提升军备

2

长春市企业联合会长春市企业家协会会员代表大会成功召开

3

关于深化澜沧江-湄公河水资源合作的倡议(摘要)

4

大漠骄阳下的“巡线人”

5

南通市审计局机关干部积极参加市级机关体育锻炼达标赛

6

国新办举行新闻发布会介绍2024年跨国公司领导人青岛峰会有关情况

7

马晓光吁台湾青年:多来长安常来长安!

8

岸田文雄供靖国神社

9

港媒:目前没任何国家可取代中国,中国依旧是“世界工厂”

10

美国能熬死苏联,同样也能熬死中国?李显龙却表示不认同

11

四川万源市草坝中学原党支部书记、校长游江被开除党籍和公职

12

港媒称越来越多非洲学生留学首选中国

13

中国移动通信集团上海有限公司原资深经理张维华被开除党籍

14

线上线下融合服务,高效创新便企利民,长沙望城持续提升不动产登记效能

15

网红桃花水一瓶42元

16

未雨绸缪!看看日本家庭都做了哪些防灾对策?

17

太原:全力以赴加快“一泓清水入黄河”项目建设

18

印度悬疑犯罪片《因果报应》豆瓣评分涨至8.2。讲述一位理发师在警方不管事的情况下

19

海关总署:严防猴痘疫情,守护人民安全

20

“锡”引力丨在碧水蓝天中亮出生态答卷,无锡开启生态文明新篇章

21

时政微观察丨厚植高质量发展的绿色底色

22

赖岳谦:中国崛起让美国很不爽,挑起中和日韩菲矛盾来拖住中国!

23

内蒙古公安厅推出便民新举措“个人无犯罪记录证明”可全程网办

24

高标准农田不需要低标准管理

25

泰国:国会下议院投票选出新一任总理

26

“让世界看见鄂州”湖北鄂州启动中外媒体主题采访活动

27

国家命脉交给中国!援建柬埔寨运河项目开工,让其能“自主呼吸”

28

“凤来雁归智荟桦南”2024桦南人才盛典举行

29

在中国亮明态度之后,法国媒体对中国的态度非常不满!法媒表示,中国这是在“威胁”一

30

滨州市高质量发展工作推进会议召开

31

全红婵卫冕冠军

32

文化中国行·传统村落人文影像志|花明泉村:会稽山麓揆文奋武的江南古村

33

美国的火车是内燃机,我国高铁却用电!哪个更先进?

34

巴西绝大部分商界精英并不在意国家利益

35

中老缅泰外长非正式会晤:在缅甸问题上要坚守三条底线

36

天凉如水,吴盐胜雪,纤指破新橙,锦幄初温,馨香不断,相对坐调笙

37

脚盆鸡福岛第一核电站发生核泄漏#国际局势#日本核废水#猴痘

38

印度眼中的十大强国

39

美国想打败中国真的有那么难吗

40

美宇航员滞留8个月

20

市场监管总局:督促退还涉企违规收费3.93亿元

20

市人大常委会检查组开展大气污染防治“一法一条例两规定”执法检查

20

抓捕“台独”头目!国安重拳出击,美官员赶赴大陆,39国阻拦统一

20

樊振东说今天失误多

20

王楚钦被裁判问比分

20

运河之舟讲习所启航:讲好运河故事弘扬运河文化

20

野生动物园袋鼠打人

20

揭秘:花卉园林的水质处理秘籍,原来这么关键!

20

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

热门攻略

1

民政部集中回应离婚冷静期、结婚无需户口簿等热点

2

产品生态双管齐下银河麒麟蓬勃发展

3

辟谣黔江5.2级地震

4

重庆渝北区:办好民生实事,托起群众“稳稳的幸福”

5

美国国家飓风中心:百慕大地区将出现强风、危险的风暴潮以及威胁生命的洪水

6

女导游嘲讽游客穷

7

苏丹外交部:快速支援部队袭击村庄造成85人死亡

8

乌征兵办一大早抓捕壮丁男子转身就跑被抓后崩溃大哭

9

让“头回客”变“回头客”第二届西部氢能博览会在榆林举办

10

国家级荣誉!西峡一公司技术中心主任陈守杰获授国务院政府特殊津贴!

11

每天2瓶碳酸饮料男子牙齿全毁了

12

“巴铁”好消息,#国际局势#巴铁

13

伊朗副总统上任10天就辞职,美伊又展开秘密外交,极力避免开战

14

美国大选民调:特朗普重新确立领先优势

15

周六你需要知道的隔夜全球要闻

16

【每周经济观察】绘就中国绿色发展的“工笔画”

17

世界卫生组织:苏丹霍乱疫情已致316人死亡

18

挪威东南大学的教授格"

19

专家解读教培放开

20

新一轮加沙地带停火谈判在多哈举行示威者要求英国停止向以色列供武

20

擅权滥权给国家造成重大经济损失,牡丹江市原副市长齐忠彦被“双开”

20

20

蓬莱区“立德树人公益课堂”走进杏花苑社区开展爱国主义教育活动

20

哥伦比亚中部一商业区发生火灾多处商业场所被毁

20

忻府公安召开2024年上半年工作总结暨下半年工作部署会议

20

也门南部发生汽车炸弹爆炸事件已造成19人死亡

20

如何有效消灭竹子?揭秘老祖宗留下的两种“天敌”方法

20

晴天霹雳!英国宣布破产,新首相斯塔默面临财政大考,将何去何从

20

台湾海峡的捕鱼权我们拿回来了,民进党只能干瞪眼!8月16日,根据岛内媒体报道,岛

20

多家银行停发信用卡

20

被打士兵头发有些许花白,年龄应该有50了吧

20

超级全满贯只有三人

20

董宇辉否认员工百人

20

中国贸促会会长任鸿斌会见广西壮族自治区副主席谭丕创一行

20

陈攀任湖北省政府副秘书长此前担任鄂州市委常委

20

中国移动通信集团上海有限公司原资深经理张维华被开除党籍

20

国台办:民进党当局歪曲惩“独”措施,混淆违法行为和两岸正常交流

20

总台记者观察丨以媒称停火谈判分歧缩小哈马斯希望以“认真回应”

20

澳门公布行政长官选举日程表

20

尼日利亚中部至少20名大学生遭绑架

20

"不要断章取义了!

20

伊朗副总统上任10天就辞职,美伊又展开秘密外交,极力避免开战

20

也门南部发生汽车炸弹爆炸事件已造成19人死亡

20

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

20

广东省云浮市政府党组成员、副市长王巍被查

20

到嘴的鸭子飞了?富士康前脚回国,后脚印度马上对苹果反垄断调查

20

加沙地带确认一例脊髓灰质炎病例

20

好City丨成立石墨产业联盟、开展节庆活动……网友描绘鸡西未来蓝图

热门游戏

  • 1
    陈梦谈奥运混双首金

    射击枪战 /热度:83996

    点击下载

    国防部:强化使命担当努力建设强大稳固的现代边海空防

  • 2
    美媒把运动员脸P白

    射击枪战 /热度:50037

    点击下载

    民警被前妻举报猥亵

  • 3
    奥运奖牌开始脱皮了

    射击枪战 /热度:64419

    点击下载

    印度女医生遭奸杀引愤慨示威者:哪里才安全?

  • 4
    崩坏3 学习贯彻党的二十届三中全会精神|单县召开学习宣传贯彻党的二十届三中全会精神暨县委宣讲团宣讲动员会

    射击枪战 /热度:29049

    点击下载

    江小白硬刚东方甄选

  • 5
    原神 [学习贯彻党的二十届三中全会精神]以更优服务促进民营企业大发展

    射击枪战 /热度:66487

    点击下载

    8.13亿!这个贪官够狠够黑够毒的!

  • 6
    出发吧麦芬 美国华人保姆遭残酷虐待,揭露跨国雇佣的黑暗一面

    射击枪战 /热度:05395

    点击下载

    湖北南漳全面推进“一业一查”部门联合双随机抽查工作

  • 7
    永劫无间手游 辟谣乌在俄领土公投

    射击枪战 /热度:35155

    点击下载

    世卫组织就猴痘疫情发布最高级别警告,中国海关总署加强防范

  • 8
    向僵尸开炮 特斯拉召回168万辆

    射击枪战 /热度:97551

    点击下载

    民间怪谈录:民间怪事来袭!小镇发生惊悚命案,恐怖氛围直接拉满

  • 9
    鸣潮 信阳职业技术学院附属医院举办第七届中国医师节庆祝暨表彰大会

    射击枪战 /热度:97559

    点击下载

    推动新兴技术与司法行政业务深度融合,青年有话说

  • 10
    艾塔纪元 巩立姣告别巴黎奥运

    射击枪战 /热度:55901

    点击下载

    8月16日,据《日经亚洲》援引消息人士的话报道,孟加拉国可能从印度引渡前总理哈西

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 礼包领取 | 游戏声音设计工作室 | 游戏声音创作分享 |