OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 曝光!嘲讽辱骂全红婵的记者被曝老婆孩子全都是美国国籍,难怪了

责任编辑: 伯媛

发布时间: 2024-09-20 15:24:22

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

党的根本组织原则是什么?

2

铜仁中院召开2024年8月审判质效工作调度会

3

济南市教育局新增一名副局长,此前任职市科技局

4

最快15个工作日就能开饭店市场监管总局推行“高效办成一件事”改革

5

洛杉矶12分钟

6

点“绿”成“金”|吃干“榨”净绿色青菜头垒起百亿大产业

7

罗森回应崩了

8

这么好的惠民政策,不该人人赞成吗?为何处处反对呢?

9

YouTube前CEO去世

10

广东省首个行政执法监督码深圳上线为330万商事主体赋予“保护码”

11

澜湄合作第九次外长会联合新闻公报

12

澜沧江—湄公河合作第九次外长会在泰国举行

13

官宣喜讯:诞下龙凤胎!

14

自媒体口中的“国际黑话”,你知道多少?

15

高新区召开党工委第9次理论学习中心组学习会

16

南通通州兴东街道:播撒法治的“种子”收获和谐的“果实”

17

尼日利亚中部至少20名大学生遭绑架

18

农发行哈市城郊支行完成全省农发行系统首次"智链贷2.0"维护环节

19

广西壮族自治区政协经济委员会副主任李延强接受审查调查

20

市场监管总局:正在加快国家网络交易监管平台建设

21

宁夏某镇党委副书记做为人民服务的工作就应该有与工作匹配的身材

22

台媒曝:美议员访台,传哈里斯对台“坚定盟友”信号

23

射阳县洋马镇政协联络委开展“送清凉”走访慰问活动

24

运城市司法局召开重点工作推进会

25

野生动物园袋鼠打人

26

美国犹他州连续遭遇雷暴天气,居民拍下洪水冲破窗户涌入地下室的惊险瞬间

27

淮南凤台:城乡联动助困难家庭学子圆大学梦

28

滨州发布|市委党校:围绕“1+1188”发展格局不断深化教学改革创新提升科研咨政水平

29

新闻人物|泰国新当选总理佩通坦·钦那瓦

30

中纪委官网通报,汤春义接受审查调查

31

福建省商务厅领导会见马方重要来宾一行

32

中美已经谈妥?中国增持152亿美债,拜登派人给中方传话

33

全国生态日|国家发展改革委:我国可再生能源装机规模全球最大、发展速度全球最快

34

东亚陷入“低生育率陷阱”,日本72万、韩仅22万新生儿,中国呢?

35

地铁跑酷拉斯维加斯解读

36

孟加拉国总理辞职

37

最新!福建省人民政府领导成员工作分工

38

Жививплотьдовремени,живидосебя,живидотого,чтобыбытьлюбимым,живидотого,чтобыжитьдолюбви#声音控#你怕不怕我在你的世界里永远消失#听说片尾有彩蛋#路易十三是什么酒#内容过于真实

39

大葱、韭菜、大蒜种植指南:避开这些肥料,防止干尖黄叶的秘诀!

40

市(州)委书记座谈会在贵阳召开徐麟出席会议并讲话

20

专门袭击骑行者!男子夜间暴力“拽人下车”,荷兰警察紧急搜捕

20

符攀婵副县长前往定城市场监督管理所开展智慧监管调研指导工作

20

3小时喝10升水进ICU

20

土耳其大胆推测:中国空军歼-20已部署14个旅,数量突破300大关

20

没有限制:加拿大允许乌克兰在库尔斯克地区任意使用其武器

20

河南姑娘冲击三连冠

20

市级机关事业单位中有哪些冷门但其实还不错的单位?

20

是否后悔过早地与拜登进行辩论?特朗普回应

20

印尼总统佐科发表任内最后一次国情咨文

热门攻略

1

不得不说,民进党当局极其擅长撒"

2

8月16日,普京召开紧急安全会议,要用“新技术”打败乌克兰。

3

联合国人权机构:超4万人在加沙地带死亡是“残酷的里程碑”

4

综述|互利合作共发展携手同行谱新篇——巴西各界人士热议巴中建交50周年发展成就

5

印度人就纳闷了,总造价1000亿美元的高铁项目,我国居然不咬钩

6

港媒称越来越多非洲学生留学首选中国

7

市场监管总局:深化重点领域反垄断监管执法,2022年以来罚没金额超过25亿元

8

雄安早知道丨雄安新招聘!事业编!(2024.08.16)

9

江油市举办2024年高校毕业生等青年就业服务攻坚行动专场招聘

10

谢来发,任上被查

11

库尔斯克激战正酣,乌后院起火?白俄罗斯出兵南下,陈兵乌白边境

12

泰国政局“三足鼎立”佩通坦为何能够顺利当选?

13

商务部:尽快实现制造业外资准入限制措施“清零”

14

这就是惹怒中国的代价!越南惹起众怒,中方一招断了其“命脉”

15

美国加州发现3.6米长罕见深海鱼尸体,或与地震等自然灾害有关

16

中国运载火箭解体形成碎片云?外交部回应消息来源于环球时报,《“中国火箭解体形成碎片云”?外交部回应》。

17

欧盟新外长浮现,对华政策不简单,王毅送出2句话,普京下令通缉

18

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

19

2024年全球537人因猴痘死亡,世卫组织为猴痘拉响最高级别疫情警报!

20

银昆高速太彭段建成通车

20

"俄罗斯人在克林基附近变得更加活跃,乌克兰人撤退到新的阵地

20

利用职务便利为亲属谋利,中国移动上海公司原资深经理(总经理级)张维华被开除党籍

20

又是波音!特朗普副手万斯所乘飞机出现紧急情况迫降

20

西藏政协工作交流座谈会在拉萨召开

20

三伏天偷20多台空调

20

台湾花莲海域6.1级地震后发生7次余震有居民被困电梯

20

美国国务卿布林肯或前往以色列会见内塔尼亚胡

20

美媒称朝鲜或将开放旅游市场

20

也门南部自杀式袭击死伤人数升至34人

20

交通安全“救”在身边

20

陈梦要赢给所有人看

20

若尔盖毕岗村种出“新希望”

20

社评:维护全球金融稳定,美方应同中国相向而行

20

经营主体发展质量提升

20

王自如被限制高消费

20

昆明市不动产登记中心办公室主任宋伟烨接受纪律审查和监察调查

20

乌军杀进俄罗斯10天后,有点束手无策的普京,终于提到俄朝同盟

20

日本又要换首相了!自民党内斗根源何在?岸田文雄退选透露何信号

20

苏林刚上台就要访华,印尼也转向中方,美菲被孤立,南海图谋破产

20

俄罗斯的错误绝不能再犯!若是台海开战,中国必须咬死这3点

20

日本大阪府部分水体严重污染约三成受检者血检异常,祸源多头

20

印度实习医生被奸杀引发大罢工,抗议活动恐升级社会冲突

20

一岁萌娃出门溜达

20

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

20

阿根廷总统米莱表示,阿根廷年通胀率预计在7%至14%之间

20

年轻干部要给自己压担子,强化责任担当

20

邓亚萍解析女单决赛

20

台风悟空已生成

热门游戏

  • 1
    据报道8月16日,韩国政坛迎来重大新闻:"

    射击枪战 /热度:95960

    点击下载

    最高检:严打财务造假“一条龙”服务

  • 2
    泽连斯基冒险打进俄国土,随之而来的是4条坏消息,条条都很致命

    射击枪战 /热度:90871

    点击下载

    局长谢来发,主动交代问题

  • 3
    欧盟提高疫情警戒级别准备迎接更多输入性猴痘病例

    射击枪战 /热度:96129

    点击下载

    万斯所乘飞机遇紧急情况迫降!又是波音737!#美国

  • 4
    崩坏3 热点问答|三问“北溪”爆炸调查新进展

    射击枪战 /热度:54812

    点击下载

    辟谣购车位入读名校

  • 5
    原神 中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

    射击枪战 /热度:93357

    点击下载

    中国夺双人划艇金牌

  • 6
    出发吧麦芬 一朵玫瑰花的数字蝶变

    射击枪战 /热度:32353

    点击下载

    樊振东再胜莫雷加德

  • 7
    永劫无间手游 新华时评丨携手打造中国和巴西关系下一个“黄金50年”

    射击枪战 /热度:39040

    点击下载

    云南丽江3.0级地震

  • 8
    向僵尸开炮 四川大英县交通运输局原党组书记、局长赵翔被“双开”:面对糖衣炮弹,放弃了抵抗

    射击枪战 /热度:37738

    点击下载

    菲律宾海警船在仙宾礁潟湖非法滞留,外交部:中方要求菲方立即撤出有关船只

  • 9
    鸣潮 男子下跪向女子表白,结果女子将礼物丢地上后还一顿踩

    射击枪战 /热度:19408

    点击下载

    文化中国行·传统村落人文影像志|花明泉村:会稽山麓揆文奋武的江南古村

  • 10
    艾塔纪元 胡志莉当选随州市人民政府市长

    射击枪战 /热度:76123

    点击下载

    永福县广福乡:“人才+”模式探索乡村振兴新路子

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏人物传记 | 玩家风采展示 | 游戏剧情深度解析 |