ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

对话梅宏院士:现在的大语言模型技术路径不可能通往AGI,天花板是能预测到的

时间:2024-10-26 14:00:46来源:搜狐科技编辑:快讯团队

【ITBEAR】《思想大爆炸——对话科学家》栏目第92期,对话中国科学院院士,北京大学教授梅宏。

嘉宾简介:

梅宏,中国科学院院士,北京大学教授,计算机软件专家。主要从事软件工程和系统软件领域的研究。

划重点:

1. 现在的大语言模型技术路径无法通往AGI,几年内可能会达到天花板。

2. AI还取代不了人类,它缺乏创造力,只能说是辅助性工具。

3. 从科技伦理的视角来看,智能是人类的专有特征,特别是认知能力,我们为什么要去造出一个替代我们认知的东西?

4. 机器没有所谓的什么意识,也没有涌现,它本质上还是把已经存在的内容进行基于概率统计的整理和组织。就这个意义而言,大语言模型可被视为是已有“语料”压缩而成的“知识库”。

作者|郑松毅

编辑|杨锦

近日,第二十一届中国计算机大会(CNCC2024)在浙江省东阳市横店举办。

大会期间,围绕AI大模型发展现状、是否存在“泡沫”现象、以及AI是否将对人类生活构成威胁等话题,与中国科学院院士,北京大学教授梅宏展开了对话。

梅宏直言,“当前的AI技术路径缺乏创造力,无法通向AGI(通用人工智能),更做不到替代人类。从人文和科技伦理的视角看,追求让AI去替代人类本身就是个错误的想法。”

他提到,“除了技术问题,还有伦理道德、知识产权以及产出质量等诸多问题尚未解决,大模型在应用层面还面临着不小的挑战。”

这段时间,大模型战场的炮声变小了。外界疑惑,“大模型的路,还走得下去吗?”

在梅宏看来,“现有大模型主要是靠数据驱动实现,但可见的是,可开放访问的数据已经被‘吃’得差不多了。不难预测,大模型能力的天花板在未来几年内或将到顶,当然输出内容的质量还会不断改善。”

他还呼吁,中国的科研人员应该培养批判性思维,为人师者也应该抱有共同学习的心态。不怕争论,思维碰撞的火花应该再多一些,别怕走别人没有走过的路。

在科技竞技场,很多人把美国看作是“排头兵”,疑惑如何才能找到“从0到1”的创新路径?

梅宏说,“绝大部分“从0到1”的原始创新都不是规划出来的,无前路可寻,基本都是来自基于兴趣去探索未知。”

他指出,中国当下的要紧任务是形成良性的科研文化。“中国在科研领域全面发力也就是不到30年的事,在短时间内能有今天的成就,我认为很了不起。”

以下为对话实录(经整理编辑):

:今天是“1024”,听了您的演讲,我想程序员们可以好好过节了。您说AI替代不了程序员,为什么这么肯定?

梅宏:这是现有AI技术路径的底层逻辑决定的。现在的AI没有我们人类的智能,自然无法取代。当然,未来是不是会出现别的技术路径,有可能走向“替代”,还不好说。

但AI确实能帮助程序员提升开发效率和质量,如推荐代码、代码补全、避免低级错误等。但总的来说它还是辅助性工具,缺乏用软件实现业务需求所需要的创造力。

另外,AI在应用层面还有很多问题没有解决,比如伦理道德、知识产权以及产出质量等。

人类智能是地球上的顶端智慧,也没有那么容易被取代。实际上,在计算机、AI发展早期的主流媒体报道中,“替代”人类的声音一直都有。只不过,早期报道的主角是计算机,也是涉及两个方面:“盲目、过度的高估”和“脱离实际的担忧”。

这些报道放到今天,主角换成AI,仍然可以适用。只是纸质媒体的传播影响有限,远赶不上今天互联网、自媒体时代的喧嚣。

:您也不认同机器取代人这件事儿?

梅宏:从人文和科技伦理的视角来看,去追求替代人的认知、替代人的智能,到底有没有必要?

大家想一想,智能是什么?是人区别于动物的最重要的特征。人为什么能成为地球上生物链的主宰,成为地球的主人?就是因为他的智能,他的认知能力,归纳演绎等逻辑能力,还有我们的语言。

我们为什么要去造出一个替代我们智能的东西,进而让出我们地球主人的地位?

我个人是反对追求AI取代人类认知的。我们应该是把它视为工具,来帮助我们做好各类事情,提升做事效率和质量。

:但是现在产业上已经在做了,机器越来越强大。

梅宏:AI技术确实进步很大,但其中炒作和泡沫也很多。

我还是想从科技伦理的视角来看这个问题,智能是属于人的。现在满社会都在炒作“智能”,似乎人类做的事已经不是智能了。

举一个例子,很多“设计”均属于人类的智力创造性活动,当然用计算机辅助设计无疑会大大提升效率。但现在很多人只提所谓“智能设计”,实际上它只是“AI设计”。AI设计是“智能”,那人的设计是什么?

:今年听到很多质疑的声音,说大模型越来越“吃”算力,训练的数据也面临枯竭,您判断大模型未来的三五年会怎么发展?

梅宏:我们应该看到,目前成功的两个领域都是因为有了大量的数据:一个是自然语言文本,人类数千年来,通过语言记录积累了海量的文本资源,在互联网上能够公开访问的文本语料是大语言模型成功的重要因素。大语言模型实际上是压缩了人类已有的可公开访问的绝大多数知识。另一个就是文生视频,互联网上已经存在了海量的视频数据。

但是到别的领域就没有那么多数据了,这是当前大模型应用落地面临的最大问题。当然,也还有其他障碍,如模型行为的不可解释性导致缺乏可信性等。

很多人问我行业AI应用怎么推进?我给出的建议是,面对AI技术发展现状,如果对AI的落地应用有所疑问和彷徨,那么,积累数据——可采尽采、能存尽存。

我非常认可当前AI技术的进步,但我反对过度泡沫化。当前的AI仍处于Hype Cycle的高峰阶段,喧嚣埋没理性,对成功个案不顾前提地放大、泛化,以偏概全,甚至神化AI的预期效果。我以为,我们需要一个冷静期。

我也认为,沿袭当前的技术路径,AI的能力“天花板”已隐隐可见。

:天花板在哪?

梅宏:很可能就在几年之内。这里我指的是大模型能力的天花板,模型产出内容的质量还是会有不断改善。

:您提出理想的AI应该是低熵的,这种理想它存在或者有可能实现吗?

梅宏:这是个理想。我只是觉得现在的模式熵增太快,过于耗费资源。以当前可以看到的发展路径,离这个理想还有很长很长的路。

:您认为大模型能否通往AGI?

梅宏:我认为不可能,现在的大模型不可能。这是其技术实现的底层逻辑决定的。

它覆盖的知识量大面广,确实是我们人类比不了的,但要想达到所谓的通用人工智能,当前技术路径应该是做不到的。

当前的大模型严重依赖数据和算力,但实际上可开放访问的数据已经被用得差不多了。当前大模型的竞争已经成为“数据工程”的竞争。

我还想再次表达我在今年9月的《中国计算机学会通讯》发表的文章“对当前人工智能热潮的几点冷思考”中提到的一个观点:大语言模型在未来需要像互联网一样,走向开源。全世界共同维护一个开放共享的基础模型,让全世界共同受益,共同维护,避免无谓的浪费。

在这个开放共享的基础模型上,全球范围内的研究者和开发者可以面向各行各业的需求探讨各种应用,构建相应的领域模型。

:您相信机器会产生意识,产生思想吗?

梅宏:我不认为现在的AI有什么所谓的意识,我也不认为它有知识涌现能力。

从基本原理来看,大模型是基于“概率统计”,将如图像分类或文本生成等任务建模为概率模型,将数据的分布或生成过程表示为概率分布函数。神经网络能够以任意的精度来逼近这些概率分布函数,从而构建这些概率模型。

就这个意义而言,大语言模型可被视为是已有“语料”压缩而成的“知识库”。生成结果的“语义”正确性高度依赖于数据的空间广度、时间深度以及分布密度,更高度依赖于数据的质量。

基于当前的技术路径,大模型不可能“无中生有”,做出超越人类预期的事情。

不过,大模型可以产生基于内容“基元”的新组合,虽然它本身并不知道该“组合”的含义。这种组合有可能是某种“知识”,也有可能是“幻觉”,这就需要人类专家去验证审核了。

我还想再强调一下,这也是我前面提到的文章中的观点。当前主流的AI工作机制,与人类大脑的工作方式仍相去甚远。我们不应该过度使用类人的术语来描述机器,比如“意识”、“心智”甚至“硅基生命”等,很容易在公众中造成误解。

我个人也特别不喜欢“硅基生命”之类的提法,说重一点,这是对生命的不尊重。我们不要忘记,真正的生命是地球上的生物,包括动物和植物,而我们人类则是其中的主导者。

更多热门内容
昆仑万维正式开源Matrix-Game:从图像出发构建可控交互世界,重塑交互式世界生成标杆
5月13日,昆仑万维正式开源(17B+)Matrix-Game大模型,即Matrix-Zero世界模型中的可交互视频生成大模型。Matrix-Game是Matrix系列在交互式世界生成方向的正式落地,也是工业界首个开源的10B+空间智能大模型,它是一个面向游戏世界建模的交互式世界基础模型,专为开放式环

2025-05-13

艾德金融:钧达股份(02865.HK)成功在港上市,为“光伏电池A+H第一股”
(2025年5月8日,香港)海南钧达新能源科技股份有限公司 Hainan Drinda New Energy Technology Co., Ltd.(简称「钧达股份」,股票代码02865.HK)成功于香港联交所主板挂牌上市。钧达股份本次全球发行6,343.23万股新股,集资总额约14.05亿港元。艾德金融担任本项目的联席牵

2025-05-08

2025年4月28日圆梦终章:泓基控股最高限度开放二级市场原始股权置换及抛售 ——泓基控股携手香港港交所释放全民持股共同富裕政策红利
在国家全民持股战略指引下,香港泓基集团(控股)有限公司(以下简称泓基控股)作为全民持股的标杆实践主体,于2025年4月28日正式启动二级市场原始股权置换流通股抛售计划,通过与香港港交所深度协作,开创性打通全民共享资本红利的通道。此举标志着全民持股政策进入实质落

2025-04-29

昆仑万维一季报亮点:营收大幅增长46%,多款大模型达到行业SOTA,AI算力芯片实现重大突破
4月29日,昆仑万维(300418.SZ)(以下简称“公司”)披露2025年第一季度业绩报告。2025年第一季度,公司实现营业收入17.6亿元,同比增长46%;全力推动AI算力芯片、大模型及应用的研发迭代工作,研发费用4.3亿元,同比增长23%。AI业务商业化落地加速。截至报告期末,AI音乐年

2025-04-29

“从遗产管理到财富传承的传家方案”研讨会召开,传家律所分享成功经验
2025年4月20日,由桂客学院、律新社主办、北京传家律师事务所承办的“从遗产管理到财富传承的传家方案”研讨会在京召开,中国老龄事业发展基金会遗嘱库项目办荣誉主任、桂客学院院长刘桂明,中国行为法学会总监事黄永维,中国政法大学法律学院院长,教授、博士生导师许

2025-04-22

SkyReels-V2开源:突破视频生成技术边界,开启无限时长电影生成新时代
4月21日,昆仑万维SkyReels团队正式发布并开源SkyReels-V2——全球首个使用扩散强迫(Diffusion-forcing)框架的无限时长电影生成模型,其通过结合多模态大语言模型(MLLM)、多阶段预训练(Multi-stage Pretraining)、强化学习(Reinforcement Learning)和扩散强迫(Diffusion

2025-04-21

元鼎智能1亿美金出售股份:创始人套现背后的战略困局
近日,元鼎智能旗下清洁机器人品牌Aiper宣布获得全球泳池设备巨头Fluidra的1亿美元战略投资。Fluidra以发行新股方式获得Aiper 27%股权,投后估值3.7亿美元。然而,这一交易因复杂的对赌条款和行业前景争议引发市场关注——创始人选择此时套现离场,究竟是顺势而为,还是

2025-04-15

喜讯!西安小巷科技传媒斩获4200万天使轮融资,打造电动车产业智慧生态新标杆
近日,西安小巷科技传媒有限公司宣布完成 4200万元天使轮融资 。此次融资不仅彰显了资本市场对公司在电动车产业链创新领域的深度认可,更标志着这家扎根西安的科技企业正式迈入高速发展新阶段。深耕电动车全链服务,构建智慧生态护城河作为国内领先的 电动车综合品牌供

2025-04-14

逆势扩张150㎡,用“大店思维”让张亮麻辣烫在县域称王
从71㎡小店到150㎡大店,张建军用7年时间完成了县城里从生存到引领的蜕变。他的经历验证了县域经济的一个道理:真正的下沉不仅是模式降维,更是门店空间和服务内容的重构。在张建军看来,餐饮从业者的护城河,从来不在那多收的“三五斗”,而在于持续进化的勇气。当绝大

2025-04-08