关闭广告

张钹院士:大模型存在难以逾越的天花板,必须建立可解释AI理论

澎湃新闻9188人阅读

·GPT-4只能和数字世界打交道,我们最终必须跟物理世界打交道,这就需要机器人,也就是具身智能。张钹认为不一定要做人形机器人,不需要把硬件搞得非常复杂,他主张以一定的硬件为基础进行强化学习研究。

·全世界对大模型强大的生成能力、迁移能力、交互能力感到惊讶却无法解释,只能归结为“涌现”。为了人工智能产业的健康发展,必须将科学研究、技术创新、产业发展结合起来。要发展第三代人工智能,必须建立可解释和鲁棒的人工智能理论和方法,否则AI技术永远难以令人相信。


大语言模型存在天花板。

“通向通用人工智能的道路虽然依然艰难,但大语言模型为AI产业的发展打开一条通向通用AI宽广的道路。”1月16日,中文认知大模型企业北京智谱华章科技有限公司(以下简称“智谱AI”)举办的2024年度技术开放日上,中国科学院院士、清华大学人工智能研究院院长、清华大学计算机系教授张钹表示,大模型提供了发展通用硬件和软件的机会。

传统AI范式利用特定的算法和规则完成特定任务,生成式AI范式是基于一种称为基础模型的通用模型,通过广泛文本数据的训练,在开领域(open domain,开域)内可以生成类似于人类水平的高质量文本、图像和其他内容,通过微调等方式可适配于广泛的下游任务。生成式AI向通用AI迈出一步,第二步是AI智能体,第三步则是具身智能。张钹表示,GPT-4只能和数字世界打交道,我们最终必须跟物理世界打交道,这就需要机器人,也就是具身智能。具身智能的提出有助于构造完整的智能体,让智能体既有感知,又有思考。“不一定要做人形机器人,因为很多时候只要用手或脚就可以了,不需要把硬件搞得非常复杂。”他主张以一定的硬件为基础进行强化学习研究。

生成式AI大模型具备三大能力和一大缺点,即强大的生成能力、强大的迁移(推广)能力、强大的交互能力和幻觉。强大的语言生成能力可基于上下文和过去的对话,在开领域能够生成多样性令人惊讶的类似人类的连贯文本。强大的迁移能力可在代理任务上训练一个模型,通过细调适配到感兴趣的下游任务。强大的交互能力包括与人类的交互(人机交互)、机器之间的交互(多智能体)、与环境的交互(具身智能),通过交互在不同专业和科学的测试基准上表现出人类水平的智能。而针对幻觉,大模型有时会生成看似合理的编造或无意义的答案。

人工智能有助于推动经济增长,建筑、维护、安装等行业难以被自动化和智能化,但行政管理等白领工作或被AI替代。AI可提高大多数人类工作的质量和效率,但被AI完全替代的工作仍是少数。之所以AI还不能替代大多数工作,是因为大模型还存在难以逾越的天花板。张钹表示,大模型的所有工作都是外部提示而非主动,并且在外部提示的情况下利用概率预测完成任务,而人类的工作依靠内部意图驱动。大语言模型生成语言与人类语言生成只是行为上的相似性,而内在机制根本不同,大语言模型存在不自知、质量不可控、不可信、不鲁棒等天花板,给出不同的提示词,大模型会输出不同的回答。大模型也会产生幻觉,“不管模型多么大,幻觉这个缺点一直存在。”

他提出,要发展第三代人工智能,必须建立可解释和鲁棒的人工智能理论和方法,发展安全、可控、可信、可靠、可扩展的AI技术,推动AI的创新应用和产业化。如果不能建立可解释和鲁棒的人工智能理论,AI技术是不可靠的,AI技术永远难以令人相信。“到现在为止,这个理论还没有建立起来,这也是人工智能之所以发展缓慢和曲折的原因。理论建立不起来,是因为受到三个特定限制,过去只能在特定领域利用特定模型解决特定任务,这怎么可能建立通用理论?大模型的出现为建立这个理论提供了可能性。”

张钹表示,大模型为我们提供了发展通用硬件和软件的机会。人工智能正进入稳步发展的阶段,对各行各业有巨大影响,必须抓住机遇发展人工智能产业。但仍有大量不确定性,因为AI不可预测、不可控。全世界对大模型强大的生成能力、迁移能力、交互能力感到惊讶,却无法解释,只能归结为“涌现”。所以为了人工智能产业的健康发展,必须将科学研究、技术创新、产业发展结合起来。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

尤文:如果博格巴恢复最佳状态,他将会是欧洲最好的球员之一

直播吧 浏览 11514

过年第五天,大学生已经“产后抑郁”了

她刊 浏览 8734

拉波尔塔:已考虑和哈维续约 若后防线无伤病我们仍在欧冠赛场

直播吧 浏览 15353

ICML2024高分!魔改注意力,让小模型能打两倍大的模型

量子位 浏览 7242

白宫回应客机坠毁事故:出动6架F-16战机拦截

环球网资讯 浏览 12760

容祖儿谈《你好李焕英》观后感:变成张小斐女儿粉

网易娱乐 浏览 22438

王嘉尔见粉丝捂鼻子,素颜皮肤差,小腿粗壮变胖

叶公子 浏览 10457

抖音外卖未在全国18城上线:实为早已开启的饿了么抖音小程序试点

Tech星球 浏览 15271

数据解读医药反腐风暴:已有179位医院院长、书记被查,哪些领域是重点?

上观新闻 浏览 10601

2023年又亏损200多亿,蔚来能否靠阿尔卑斯自救?

郑谊 浏览 8179

央视打出王炸抗日剧,热度超过杨紫新剧指日可待

最爱酷影视 浏览 8878

6月新势力交付量出炉!理想首破3万辆,蔚来重回万辆阵营

时代财经 浏览 11630

媒体:守卫巴赫穆特的乌军危在旦夕 结局很难预料

经济观察报 浏览 76333

布朗是绿军季后赛头号选择?大将军:塔图姆被包夹 布朗没有

直播吧 浏览 6909

以色列空袭加沙最大难民营 哈马斯否认其领导人在内

环球时报国际 浏览 59282

甄子丹称约杨紫琼庆功要排队 合作可能排到30年后

网易娱乐 浏览 16245

恩里克:当姆巴佩想上场时,我没什么好说的,只需要看和享受

懂球帝 浏览 9078

接二连三 马克龙“挺乌”言论引担忧

北青网-北京青年报 浏览 8351

俄媒:“瓦格纳事件”后,普京与绍伊古等安全部门负责人举行工作会议

环球网资讯 浏览 11579

捐红十字会羽绒服后又被对方捐回公司所在地 企业回应

封面新闻 浏览 64974

以军称在汗尤尼斯的战斗取得巨大进展

环球网资讯 浏览 8489
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1