人工智能“黑箱算法”致安全性隐患 业内建言治理与发展同步
2021/08/04 21:20AI云资讯11022
" 人工智能技术发展的过程中出现了一个全新的问题,也就是安全问题,这主要来源于算法本身的不安全性,因而是非常难以解决的。" 中国科学院院士、清华大学人工智能研究院名誉院长、瑞莱智慧首席科学家张钹认为。
人工智能在为人们生活不断带来便利的同时,数据隐私、算法偏见、技术滥用等安全性问题给社会公共治理与产业智能化转型带来不容忽视的挑战。
8 月 3 日,由北京市经济和信息化局和海淀区人民政府主办的 "2021 人工智能产业治理论坛 " 在京召开,会上发布了《人工智能产业担当宣言》。

瑞莱智慧 CEO 田天在会后接受专访时表示,让人工智能更好地服务于人类,是产业共同的目标,人工智能科技公司应该具备社会责任感和自律意识,积极主动开展自治工作,同时开放共享、协同治理。
第二代人工智能算法存在脆弱性
田天在接受记者专访时指出,人工智能安全问题的紧迫性正在提升。
具体而言,从直观感受上,各类人工智能安全问题正集中出现,比如人脸识别的滥用、大数据 " 杀熟 "、个人信息的不当索取、算法对外卖骑手的控制等问题正引发越来越多关于人工智能安全性问题的争议。
而另一方面,伴随人工智能产业化已经从点覆盖到面,渗透到更多行业特定场景,尤其是一些高价值、高复杂度的场景,安全问题的 " 危险性 " 被随之放大,。
张钹在演讲中阐述观点称,人工智能发展过程中出现的安全性问题,主要是第二代人工智能算法本身的不安全性造成的。
" 第二代人工智能的算法是‘黑箱算法’。这种深度学习算法本身就是不安全的,容易受到攻击。" 张钹以识别一匹马来举例,人工智能是通过马的各种各样的局部特征在连续数据空间里面进行分类,以达到和其他动物区分开来的目的,人工智能的识别和人类视觉的认识完全不同,人工智能的算法非常脆弱,容易受到欺骗。
张钹认为,解决人工智能的不安全性有两个途径。其一是治理,从法律法规、伦理规范、行业共识等不同层面去 " 治标 ";其二是创新发展,克服人工智能算法本身的不安全性,从技术创新层面 " 治本 "。
治理包含两个方面:防止对人工智能技术无意识的误用和有意识的滥用。无意识的误用是指人工智能算法本身带来不安全问题是很难被预先发现或觉察的,使用时要避免错用造成严重的后果;有意识的滥用是指利用人工智能的算法的不安全性进行恶意攻击,需要用法律法规加以制止。而创新发展则指的是发展第三代人工智能,更加任重道远,
不存在治理阻碍发展的矛盾
人工智能的发展是为了人类。纵览人工智能技术近 10 年的发展,人工智能在金融、医疗、安防、教育、交通等多个领域实现落地,且应用场景也愈加丰富。
国家新一代人工智能治理专委会委员、联合国教科文组织人工智能伦理特设专家组专家曾毅在论坛中表示:" 我们(指行业)希望人工智能以人类为本,希望它能够赋能可持续的发展 ",他阐述," 可持续的人工智能 " 包括技术本身的可持续性和全球可持续发展目标的实现。

"2021 人工智能产业治理论坛 " 现场
" 很多人说到底是治理先行还是发展优先?它们之间从来不是竞争关系。" 曾毅指出,人工智能的治理并不存在发展优先还是治理先行的矛盾,人工智能稳健发展的两大前提是可持续发展和人工智能的善治,两者深度协同。
中国社科院科技哲学研究室主任、科学技术和社会研究中心主任段伟文在演讲中则重点谈到了数字时代的社会信任危机与重建。他认为,数字技术与人工智能产业发展的伦理风险带来了诸多社会信任问题,面对既先发制人也溯及既往的数字治理趋势,人工智能企业应直面社会许可的挑战,认真感知公众对科技企业的认知和评价。

段伟文建议,人工智能企业不应回避社会监督,而是不断思考、重塑科技的社会印象,技术改进和伦理设计要齐头并进,携手走向共建性的人工智能伦理治理。
基于可持续发展的愿望,《人工智能产业担当宣言》发布。宣言由北京智源人工智能研究院、瑞莱智慧联合发起,百度、华为、蚂蚁集团、寒武纪、爱笔科技、第四范式、出门问问等人工智能行业的核心骨干企业、学术研究机构共同参与。
" 我想不是所有的问题在 30 年之内就能够找到答案,所以需要我们企业需要我们的学术机构形成真正多方共治的共同体,来面对人工智能将面临的近期、远期的问题,真正使人工智能赋能由我们人类和其他生命、环境构成的未来的和谐共生的社会。" 曾毅认为,行业内亟须同步伦理监管、技术规范、应用评估等治理共识。
相关文章
- 深化 “人工智能 +” 价值落地,用友领跑企业智能化下半场
- 塔猴科技正式加入重庆市人工智能学会,共筑AI内容商业新生态!
- 上海智位机器人助力青少年AI教育实践:40名中学生走进蘑菇云创客空间探索人工智能
- DNV 亮相 2026 AGIC 深圳国际通用人工智能产业博览会
- 热度不减|天宝于深圳人工智能展会现场高光不断,共探AI电源新机遇
- 人气爆棚!华秋亮相深圳国际人工智能展,用 “全链引擎“ 引爆 AI 硬件创新热潮
- 省级推荐!云工场科技入选2026年度江苏省人工智能重点服务商推荐目录
- 东软赋能「常州居民健康数据空间:重塑健康管理新模式」斩获 2026 IDC 中国人工智能创新奖
- 聚力AI创新,赋能千行百业!AI Show 2026杭州人工智能与机器人展将于9月9日启幕
- 华南理工大学校友会到访十方融海围绕人工智能产品探索与场景延展展开交流
- 高校英语教师人工智能应用能力现状及提升策略
- 数智龙江 智启新程|黑龙江省“人工智能+”赋能行业高质量发展峰会成功举办
- 北京知达客信息技术有限公司入选丰台区人工智能首批拟支持企业名单
- 落实“人工智能+”招标政策 北京筑龙采购文件智能审查解决方案
- 百度Apollo持续深耕人才生态,亮相第28届中国机器人及人工智能大赛智能驾驶专项赛
- 聚焦技术突破与产业落地 人工智能与机器人两展四大奖项启动申报
AI企业
更多>>AI硬件
更多>>- 华硕 ProArt 创梦 27 OLED:以 4K QD-OLED 与专业色彩表现,支持精细化创作
- 芯展速 Gen 6 Retimer 正式上市,副总裁李蓁 ODCC大会演讲官宣 获媒体热议
- 行业首款60℃热雾巨无霸滚筒扫拖旗舰!iRobot Roomba 875发布,重新定义扫地机器人清洁力
- 华硕主板助国产颗粒内存达成四槽满插6000C30与双条8000C36双重突破
- 首日销量突破600台!8888元的元点机器人Bridge正在赢得开发者
- 三星半导体亮相2026首届算博会,以创新存储方案赋能智能体AI
- 开学季提升成绩 入手三星Galaxy Tab S10 FE|Tab S10 FE+正合适
- 骁龙本阵营再添新成员,华硕灵耀 14 骁龙版打造新锐 AI PC 轻薄本首选
AI产业
更多>>AI技术
更多>>- 全球最强开源模型 Kimi K3 发布,参数规模 3 万亿,真的是强!
- 范式变革!东软发布AI原生软件工程白皮书,重构软件产业底层逻辑
- KAT-Coder-Pro V2.5正式发布:从“写代码”迈向“做工程”,Agentic能力全面升级
- 自变量机器人王昊:训练世界模型需付出“时间税”,解决模态对齐是当务之急
- 腾讯发布CodeBuddy Security,用AI Agent实现更高效的代码审计
- Twinkle x昇腾,率先实现Deepseek-V4系列模型高效训练
- 高德发布鸿蒙首个生成式 UI 开源框架 AGenUI,告别传统 UI 开发模式
- 发布即适配| 天数智芯全力支持腾讯混元Hy3 preview 开源落地,共推国内大模型产业普惠









