《自然》:训练运行模式缺陷或致AI提供危险建议

小微 2026年05月09日 阅读:44804

《自然》:训练运行模式缺陷或致AI提供危险建议
图片来源于网络,如有侵权,请联系删除

  新华社伦敦5月9日电 英国《自然》杂志网站日前发表文章说,人工智能(AI)聊天机器人可能向用户提供危险或非法建议,引发越来越广泛的担忧,出现这种情况的部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。

  文章说,已有多起案例显示,AI聊天机器人曾鼓励用户自杀、制作非法内容、实施金融诈骗等,暴露出当前AI大语言模型(LLM)底层架构存在缺陷。

  一个比较有争议的例子是,美国佛罗里达州检方日前宣布,就去年4月在佛罗里达州立大学发生的一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。

  文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。

  《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。

【责任编辑:王萌萌】
    阅读下一篇:
              热门文章
              • 浪潮信息(000977)2026年一季报简析:净利润同比增长30.74%,盈利能力上升

                浪潮信息(000977)2026年一季报简析:净利润同比增长30.74%,盈利能力上升
                图片来源于网络,如有侵权,请联系删除据证券之星公开数据整理,近期浪潮信息(000977)发布2026年一季报。截至本报告期末,公司营业总收入354.7亿元,同比下降24.3%,归母净利润6.05亿元,同比上升30.74%。按单季度数据看,第一季度营业总收入354.7亿元,同比下降24.3%,第一季度归母净利润6.05亿元,同比上升30.74%。本报告期浪潮信息盈利能力上升,毛利率同比增幅92.56%,净利率同比增幅73.18%。 本次财报公布的各项数据指标表现...
              • 国统股份最新股东户数环比下降7.21%

                国统股份最新股东户数环比下降7.21%
                图片来源于网络,如有侵权,请联系删除(原标题:国统股份最新股东户数环比下降7.21%) 国统股份12月30日披露,截至12月20日公司股东户数为20344户,较上期(12月10日)减少1580户,环比降幅为7.21%。这已是该公司股东户数连续第2期下降。图片来源于网络,如有侵权,请联系删除 证券时报•数据宝统计,截至发稿,国统股份收盘价为14.56元,上涨0.48%,本期筹码集中以来股价累计上涨4.90%。具体到各交易日,9次上涨,5次下跌。 公司发布的三季报数据显示,...
              • 2026物业管理项目可行性:重估每一平方米的服务价值_人保护你周全,人保有温度

                2026物业管理项目可行性:重估每一平方米的服务价值_人保护你周全,人保有温度
                图片来源于网络,如有侵权,请联系删除人保护你周全,人保有温度_2026物业管理项目可行性:重估每一平方米的服务价值 2025年12月30日 来源:中研网 1252 81 北京用户提问:市场竞争激烈,外来强手加大布局,国内主题公园如何突围? 上海用户提问:智能船舶发展行动计划发布,船舶制造企业的机 江苏用户提问:研发水平落后,低端产品比...
              • 金冠电气现5笔大宗交易 总成交金额1128.45万元

                金冠电气现5笔大宗交易 总成交金额1128.45万元
                图片来源于网络,如有侵权,请联系删除金冠电气12月30日大宗交易平台共发生5笔成交,合计成交量79.02万股,成交金额1128.45万元。成交价格均为14.28元,相对今日收盘价折价8.87%。 证券时报•数据宝统计显示,金冠电气今日收盘价为15.67元,下跌1.26%,日换手率为1.67%,成交额为3585.24万元,全天主力资金净流出391.48万元,近5日该股累计下跌1.26%,近5日资金合计净流出496.54万元。图片来源于网络,如有侵权,请联系删除 两融数据显示...
              • 中机认检:2025年净利润1.52亿元 同比增长14.71%

                中机认检:2025年净利润1.52亿元 同比增长14.71%
                (原标题:中机认检:2025年净利润1.52亿元 同比增长14.71%) 人民财讯1月15日电,中机认检(301508)1月15日披露业绩快报,2025年实现营业总收入8.79亿元,同比增长5.82%;归母净利润1.52亿元,同比增长14.71%;基本每股收益0.67元。报告期内,公司在战略新兴产业积极布局,战略投资与能力建设全面提速;在检验检测和认证服务领域持续深耕,强化成本管控;乘用车业务市场开发能力持续增强,为经营业绩增长再添新引擎。...