训练运行模式缺陷或致AI提供危险建议
[综合] 时间:2026-07-16 19:51:24 来源:顶火百科 作者:休闲 点击:118次
英国《自然》杂志网站日前发表文章说,训练人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供
文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷
一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。
文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。
《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。
来源:新华社
(责任编辑:综合)
相关内容
- “别怕!叔叔带你们去找爷爷!”——宁江特警一小时暖心寻回走散祖孙
- 正定县扎实开展2026年《职业病防治法》宣传周系列活动
- 住建部门回应“外卖员借灭火器救火被收50元”:救火不应让好人买单;涉事物业已将50元退还给外卖小哥
- V观财报|林州重机业绩“变脸”收监管函
- 拿下香港三张金融牌照,长城证券国际化提速!
- V观财报|中国中冶:陈建光因工作调整辞任董事长
- 政声直达|河北出台基础教育规范管理系列措施
- 规模盈利双增长,风控分红双稳健!解码长沙银行稳健成长逻辑
- 五部门:目标2028年培育不少于25个纺织服装卓越品牌
- 纵览文娱|13分钟演绎家国大义,爆火短剧《ENEMY》灵感源自河北唐山伶人抗日传说
- 男子偷邻居车去外地“发展” 民警跨三省追回
- 科技赋能五一惠民书市 打造沉浸式阅读新体验
- 不拼产量拼“小众” 不论斤卖按份销!郓城武安镇大棚里藏“小玄机”
- 【经纬晚班车】4月近四成百强房企销售正增长;BBA一季度业绩集体走弱
