您的当前位置:首页 > 焦点 > 《自然》:训练运行模式缺陷或致AI提供危险建议 正文
时间:2026-07-16 18:32:31 来源:网络整理 编辑:焦点
新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,人工智能AI)聊天机器人可能向用户提供危险或非法建议,引发越来越广泛的担忧,出现这种情况的部分原因在于AI的训练和运行模式存在固有缺陷,这也加
新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,训练人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供
文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷
一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。
文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。
《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。
儿童局麻小手术,让孩子轻松解决“身体小烦恼”2026-07-16 17:22
9.8万个涉农账号被封!“卖惨”“造谣”套路曝光:歪曲惠农政策,便宜水果伪装成“滞销农产品”高价卖出,村民互殴婆媳大战丑化农村形象2026-07-16 17:13
哈啰再回应“员工聚会脚踩青桔、美团单车合照”:已依规处理涉事人员,开展职业道德与职业规范教育,杜绝类似问题再次发生2026-07-16 16:54
不让中小企业掉队,华为坤灵品牌日全景呈现四大场景化能力2026-07-16 16:51
天气周报(5月11日—17日):前暖后凉,风雷需防2026-07-16 16:44
致敬杜塞尔多夫学派五十年,“影像上海”邀全球近七十家画廊共赴视觉之约2026-07-16 16:44
湘鄂赣毗邻地区茶行业齐聚湖北赤壁“斗茶”2026-07-16 16:39
黑龙江哈尔滨:中医文化“圈粉”市民2026-07-16 16:30
反邪进校园 伊法伴同行——伊通法院开展反邪教普法进校园活动2026-07-16 16:12
沈亦晨:上海对硬核科技的耐心与果敢,是科学创业者最强有力的资本后盾2026-07-16 15:54
南京一条长江隧道将全封闭管养2026-07-16 18:15
北京种植牙哪位专家好?实力派种植牙医生权威推荐2026-07-16 17:57
湘鄂赣毗邻地区茶行业齐聚湖北赤壁“斗茶”2026-07-16 17:03
哈啰再回应“员工聚会脚踩青桔、美团单车合照”:已依规处理涉事人员,开展职业道德与职业规范教育,杜绝类似问题再次发生2026-07-16 16:58
儿童局麻小手术,让孩子轻松解决“身体小烦恼”2026-07-16 16:57
沈亦晨:上海对硬核科技的耐心与果敢,是科学创业者最强有力的资本后盾2026-07-16 16:55
四川成都:列车穿行紫色花海2026-07-16 16:52
北京科博会发布148项成果 现场签约额达5.9亿元2026-07-16 16:28
入境游火热 打卡中国不止看风景2026-07-16 16:23
追光丨男足亚洲杯抽签揭晓 国足再出发2026-07-16 16:08