梅宏院士:当前 AI 存在三大问题!

   日期:2024-12-26    作者:hnhxhgyl 移动:http://mip.riyuangf.com/mobile/quote/34186.html

前言:11月22日在以“跨越边界的科技伦理”为主题的第二届中国科技伦理高峰论坛上,中国科学院院士、北京大学教授梅宏,再度发声认为,当前AI面临此三大问题。

梅宏院士:当前 AI 存在三大问题!

(1)泡沫太大,仍处于技术成熟度曲线(hype cycle)的高峰阶段,喧嚣埋没理性,需要一个冷静期;

(2)以偏概全,对成功个案不顾前提地放大、泛化,过度承诺;

(3)期望过高,用户神化AI的预期效果,提出难以实现的需求。

文 | 《中国科学报》 (2024-11-27 第3版 领域)

“智能是人类区别于其他动物的专有特征,特别是认知能力。我们可以接受机器在感知能力方面超越人类,但对机器认知智能的研发,需要高度审慎。从科技伦理的视角来看,我们为什么要造出一个替代我们认知的东西?”


11月22日,在以“跨越边界的科技伦理”为主题的第二届中国科技伦理高峰论坛上,中国科学院院士、北京大学教授梅宏直指当前数字技术面临的伦理挑战。


从智能制造到智慧城市,从医疗健康到金融服务,当前大语言模型火爆,人工智能(AI)风头正盛。梅宏认为,在AI热潮中,泡沫太大,仍处于技术成熟度曲线的高峰阶段,喧嚣埋没理性,需要一个冷静期


他强调,虽然基于当前的技术路径,大模型尚不能“无中生有”,做出超越人类预期的事情,但一味信奉“蛮力”、追求规模,也极易发展出在覆盖面和复杂度上人们难以掌控的“巨兽”。


“拿着手机读不到有价值的内容”


在经历了两个“春天”和两个“冬天”后,AI迎来了第三个“春天”,深度学习技术带来的一次次突破不断刷新着人们对AI的认知。

但是,从脸书公司(Facebook)数据泄露到大模型生成内容引发侵权纠纷和虚假信息传播,数字技术在为人类社会经济发展带来益处的同时,也带来了数据隐私保护、算法偏见、责任认定等一系列伦理问题。

例如,就当前大语言模型的技术路线而言,“黑盒”导致的不可解释性是其最大“罩门”。如果不加任何规制而大量应用,可能导致人类知识体系面临严峻挑战。训练语料的质量缺陷、概率统计的内生误差等因素会导致大模型产生幻觉,生成错误内容;再加上人为干预诱导,极易生成虚假内容。

“通过算法,平台可以个性化推送内容,但也可能形成用户的信息茧房。我最近最大的困扰就是拿着手机却读不到想读的有价值的内容。”梅宏表示,目前几乎大部分网络平台都在AI算法和大数据驱动下运营,这就带来对算法和数据应用的有效监管问题,这些亟待通过建立完善的治理体系加以解决。当涉及平台跨境时,还需要有相应的国际治理体系。

现实情况不尽如人意


当前,社会对“AI+”或“AI for everything”(一切皆人工智能)抱有很高的期望,然而,现实情况却不尽如人意。

“雷声隆隆,雨点并不大。”梅宏坦言,“从当前的热潮中,我看到了太多‘炒作’和‘非理性’导致的 AI‘过热’现象,也对当前AI发展技术路径多样性的欠缺产生了一些担忧。”

“大语言模型的成功依赖于人类长时间积累的庞大语料库,文生视频的成功也依赖于互联网上存在的海量视频。然而,其他行业的数据积累尚未达到这个量级。获取全数据,关键是跨越足够的时间尺度。”梅宏表示,AI的应用还需要经历一段时期的探索、磨合和积累,才可能迎来繁荣。

“在我看来,AI当前的问题有3个泡沫太大,仍处于技术成熟度曲线的高峰阶段,喧嚣埋没理性,需要一个冷静期;以偏概全,对成功个案不顾前提地放大、泛化,过度承诺;期望过高,用户神化AI的预期效果,提出难以实现的需求。”梅宏说。

面对AI技术发展及其应用的现状,梅宏建议,在尚搞不清如何应用、用到何处时,不妨先积累数据,“可采尽采、能存尽存”。

没有跳出概率统计框架


那么,大语言模型能走向通用人工智能吗?梅宏认为,从基本原理来看,目前的大语言模型没有跳出概率统计这个框架。

梅宏并不认为现在的AI有所谓“意识”或者知识涌现能力。以大语言模型为例,模型本身无法产生新的东西,其生成的内容取决于对大量文本内容的统计,如果某些内容反复出现,它们大概率就会将之视为“合理存在”的内容。

“就这个意义而言,大模型可被视为是由已有语料压缩而成的知识库,生成结果的语义正确性高度依赖于数据的空间广度、时间深度以及分布密度,更高度依赖于数据的质量。”他提到,学术界的研究更应关心大模型构建过程的可重复性和可追溯性,尽可能保证结果的可解释和可信任。

“大胆预测,作为压缩了人类已有的可公开访问的绝大多数知识的基础模型,大语言模型将像互联网一样走向开源。全世界共同维护一个开放共享的基础模型,尽力保证其与人类知识同步。”梅宏说,“这至少也是表达自己的一种期望。”

适时调整伦理审查的复核清单


“发明技术的最终目的是为了让人类的生活变得更好,毫无疑问应该充分考虑技术可能带来的伦理问题。”梅宏表示,在AI快速发展的热潮下,需要对可能的风险进行研判,并提醒科技工作者时刻牢记科技向善、以人为本。

随着数字技术的发展,科技伦理治理也应当跟上。梅宏强调,目前应当完善科技伦理治理体制机制,明确数字技术领域的治理重点和安全护栏,对数字技术进行分级分类治理,同时建立健全AIGC(生成式人工智能)的主动披露标注制度并开展相关技术研究。

那么,数字技术领域是否应该存在研究禁区?梅宏认为,在基础研究阶段一般不做限制,涉及对人的认知能力调控、违背人的自由意志的研究应列为禁区。在技术和产品应用阶段,要根据具体场景及影响来确定。

“例如大规模远程监控、自主决策的社会评价体系、操纵个人意识和行为并造成个体或他人身体或心理伤害的技术,以及以超越或替代人的认知能力为目标的AI技术研发,应当受到限制。”梅宏说。

同时他表示,数字技术领域的研究禁区应该建立动态调整机制,适时调整伦理审查的复核清单。

此外,他呼吁建立AI生成内容的披露标准机制,建立涵盖大模型开发者、创作者、使用者的标注责任机制;鼓励多条技术路线推进大模型生成内容标注技术研发;完善大模型内容审核制度规范和检测技术开发;推进相关标准和规范制定并将之国际化。







延伸阅读:

日前,中国计算机学会刊发中国科学院院士梅宏《对当前人工智能热潮的几点冷思考》一文。文章指出,当前社会经济发展中,“人工智能”(AI)无疑是焦点之一。技术的迅猛发展,尤其是深度学习方面的突破,不仅推动了AI技术本身,也对社会经济产生了深远的影响。然而,在这一片繁荣景象的背后,AI领域的大同行却对当前AI发展中的“过热”现象表达了担忧,并对AI技术路径多样性欠缺的问题提出了思考。

文章原文


对当前人工智能热潮的几点冷思考



注:

1 第一定律是机器人不得伤害人类,或因不作为而让人类受到伤害;第二定律是机器人必须服从人类的命令,除非这些命令违背了第一定律;第三定律是在不违背第一与第二定律的前提下,机器人必须保护自己。

2 https://openai.com/

3 https://openai.com/chatgpt/

4 https://deepmind.google/

文章整理自《中国科学报》、中国计算机学会 、数据君


本文转自微信公众号“工业互联说”。




更多精彩文章请点击下面“蓝字”标题查看:

  • CALL FOR PAPERS|《物理与工程》征稿量子世纪年

  • 乌云里的常数——4.14话h

  • 会议纪要|2024年全国高等学校物理基础课程教育学术研讨会

  • 2023版《理工科类大学物理课程教学基本要求》内容细化修订解读

  • 中国大学物理教育MOOC联盟2023年工作会议(扩大)暨典型案例交流会 会议纪要

  • 2021年《物理与工程》优秀论文、优秀审稿专家、优秀青年学者名单

  • 王青教授:源自苏格拉底的问题驱动式教育——在互动中共同学习和成长

  • 读后感:教育中的现实和远方

  • 王青教授:昨晚(6月9日),清华电动力学期末考试

  • 朱邦芬院士:“减负”误区及我国科学教育面临的挑战

  • 《物理与工程》2024年第2期目录

  • 乐永康:新冠肺炎疫情防控下美国物理实验教学及中美情况对比
  • 顾牡:对于重新制定的《非物理类理工学科大学物理课程教学基本要求》的认识和体会

  • 朱邦芬院士:从基础科学班到清华学堂物理班

  • 朱邦芬院士:对培养一流拔尖创新人才的思考

  • 李学潜教授:物理是一种文化

  • 李学潜教授:如何帮助物理系学生迈过从高三到大一这个坎

  • 穆良柱:物理课程思政教育的核心是科学认知能力培养

  • 穆良柱:什么是物理及物理文化?

  • 穆良柱:什么是ETA物理认知模型

  • 穆良柱:什么是ETA物理教学法

  • 吴国祯教授:我的国外研究生经历印象——应清华大学物理系“基科班20年·学堂班10年纪念活动”而写

  • 陈佳洱,赵凯华,王殖东:面向21世纪,急待重建我国的工科物理教育

  • 王亚愚教授:清华物理系本科人才培养理念与实践

  • 葛惟昆教授:关于中外人才培养的几点思考

  • 安宇教授:为什么传统的课堂讲授模式需要改变

  • 安宇教授:其实教学就是积累的过程

  • 刘玉鑫教授:关于本科生物理基础课程教学和教材编著的一些思考

  • 沈乾若:重创理科教育的美加课程改革

  • Henderson C:美国研究基金支持下的物理教育研究及其对高等物理教育的影响


《物理与工程》期刊是专注于物理教育教学研究的学术期刊,是中国科技核心期刊,1981年创刊,欢迎踊跃投稿,期刊投审稿采编平台:

欢迎关注


特别提示:本信息由相关用户自行提供,真实性未证实,仅供参考。请谨慎采用,风险自负。


举报收藏 0评论 0
0相关评论
相关最新动态
推荐最新动态
点击排行
{
网站首页  |  关于我们  |  联系方式  |  使用协议  |  隐私政策  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  鄂ICP备2020018471号