首页  »  财经  »  经济观察

“一本正经胡说八道”:AI幻觉到底有多可怕?

2025-04-01 19:46:18

来源:中国新闻网

  中新网北京4月1日电(记者 吴涛)在享受AI带来便捷的同时,你是否发现这个问题挥之不去——AI幻觉,一种“看似真实、实则虚构”的内容生成现象,正渗透进我们的生活。它到底是通往更强大智能的阵痛,还是技术发展的“魔性副产物”?未来,AI幻觉能否为我所用?

  幻觉乱象,层出不穷

  AI大模型固然“聪明”,但在“胡说八道”方面也毫不逊色。虚构引用、杜撰人物、逻辑混乱,在与AI的互动中屡见不鲜。

  例如,它会引用一篇根本不存在的“2023年哈佛研究”;或者,为并不存在的“诺贝尔物理学奖得主约翰·史密斯”编织一段“量子物理贡献”的叙述。有时候,它甚至会在你一再否认其内容后“动摇立场”,反复修改说法。

  中新网记者在测试中还发现,AI模型在面对较为复杂的推理问题时,可能“宕机”或自相矛盾。而当你编造出一个根本不存在的概念,比如“高数几何睡眠法”,它也会一本正经地回答:“这是一种将睡眠科学与高等数学相结合的个性化学习策略……”——说得头头是道。

某大模型截图。

  当中新网记者输入自己的名字请AI大模型进行介绍,还出现了一名乍看上去完全合理,但其实完全不存在的人,可以说除了“记者”是真的,其他全是假的。

AI大模型介绍的记者身份,职业生涯背景等均为虚构。

  技术问题,还是认知演进?

  “AI幻觉就是生成看起来像真的一样的虚假信息。”互联网行业从业者、58同城CEO姚劲波接受中新网采访认为,它当然需要治理,但现阶段还未构成决定性风险。“互联网发展这么多年,虚假信息仍然很多,没有被彻底消除,但网友的识别能力也越来越高。我认为AI领域也一样,随着用户教育的积累,越来越多的网友自己可以分辨出AI幻觉。”

  不过,并非所有从业者都如此乐观。科大讯飞董事长刘庆峰曾指出,生成式AI的幻觉问题不仅关乎内容真假,更可能形成算法偏差的恶性循环——虚假内容被AI再次学习、放大,反复再生产。

  但值得注意的是,AI幻觉在部分场景中却意外成了创作“灵感来源”。游戏开发、动漫设计、小说创作等领域,恰恰欢迎那种“不合常理”的奇思妙想。比如AI生成的创意图片不少是违反自然规律的,但这不影响创意图的效果。

  一位不愿具名的开源大模型社区负责人坦言:“今年的大模型比往年更好,就是因为产生了一部分想象力的创作。”

  治理AI幻觉,路径几何?

  如何治理AI幻觉?技术手段正在快速跟进。一方面,企业正在为大模型接入权威知识库或实时搜索能力,使其答案更具事实依据;另一方面,“标注AI生成内容”也成为监管部门推动的方向。

  上述开源大模型社区负责人就表示,AI大模型如今引入联网搜索,各个平台也在用算法和工程解决一部分幻觉问题。

  中国工程院院士张亚勤近日表示,幻觉在横向模型里会越来越少,但是它不会消失,这是生成式AI的特点。要消失的话,一定需要具体到某个行业时,用更精准的数据和更精准的模型结合起来,才会达到效果。

  多位科技领域企业家也提出了相应对策。360集团创始人周鸿祎强调企业模型需对接专有知识库进行校正,刘庆峰则建议,要定期清理模型中的“幻觉数据”。

  零一万物CEO李开复则认为,“联网搜索能力”是降低AI幻觉的关键路径,但现实操作中并不轻松。每个企业都有自己的数据库、CRM、ERP系统,联网不是难,而是难以实时、完整。这方面还需继续突破。

  政策层面也已展开行动。近日,国家互联网信息办公室、工业和信息化部、公安部、国家广播电视总局联合发布《人工智能生成合成内容标识办法》(以下简称《办法》)。

  《办法》聚焦人工智能“生成合成内容标识”关键点,通过标识提醒用户辨别虚假信息,明确相关服务主体的标识责任义务,规范内容制作、传播各环节标识行为,将于2025年9月1日起施行。

  国家互联网信息办公室有关负责人介绍,《办法》重点解决“哪些是生成的”“谁生成的”“从哪里生成的”等问题,推动由生成到传播各环节的全流程安全管理,力争打造可信赖的人工智能技术。(完)

  • 相关阅读
  • 前2个月我国服务进出口总额同比增长9.9%

    本报记者 刘萌4月1日,商务部发布数据显示,2025年1月份至2月份,我国服务贸易较快增长,服务进出口总额13095.6亿元(人民币,下同),同比增长9.9%。其中,出口5495.8亿元,增长13%;进口7599.8亿元,增长7.8%。服务贸易逆差2104亿...

    时间:04-02
  • “东数西算”新支点 “中国算谷”正崛起

    本报记者 贾丽随着全球AI算力需求爆发性增长,中国西部悄然崛起一座“绿色智算高地”。近日,《证券日报》记者走进位于甘肃庆阳的燧弘华创庆阳绿色智算中心(以下简称“智算中心”)。推开智算...

    时间:04-02
  • 国家金融监督管理总局等三部门联合发布《银行业保险业科技金融高质量发展实施方案》推进科技金融政策试点

    本报记者 刘琪4月1日,国家金融监督管理总局(以下简称“金融监管总局”)发布消息,为贯彻落实中央经济工作会议、中央金融工作会议、全国科技大会精神,按照《国务院办公厅关于做好金融“五篇大文章&...

    时间:04-02
  • 美国“对等关税”靴子将落地,全球市场不安加剧

      中新网4月2日电 (张乃月)美国“对等关税”靴子即将落地。  总统特朗普此前表示,可能会在4月1日晚或4月2日宣布关税细节,并承诺将征收“对等关税”。  风暴即将袭来,投资者的担忧加剧,已有不少美国本土企业采取游...

    时间:04-02
  • 琼港澳签约合作构建“黄金旅游三角区”

      中新社海口4月1日电 (李艺娜)琼港澳旅游发展战略合作交流座谈会暨签约仪式1日在海口举行。海南省旅游协会分别与香港旅游业议会、澳门旅游商会签署旅游发展战略合作协议,将重点打造“一程多站”跨境精品旅游线路,构...

    时间:04-01
  • 海南离岛免税“即购即提”“担保即提”实施两年购物额超70亿元

      中新社海口4月1日电(记者 王子谦)海口海关4月1日发布数据显示,自2023年4月1日海南离岛免税“即购即提”“担保即提”政策实施以来,截至2025年3月31日,海口海关共监管“即购即提”购物总金额69.4亿元(人民币,下同)、购...

    时间:04-01
  • 中国—瑞典经贸联委会第21次会议在瑞典召开

      中新社北京4月1日电 中国商务部1日发布消息,商务部副部长兼国际贸易谈判副代表凌激与瑞典外交部国务秘书言禾康于当日在瑞典斯德哥尔摩共同主持召开中国一瑞典经贸联委会第21次会议。  双方一致认为,贸易战没有...

    时间:04-01
  • 中国机械工业仪器仪表集团在重庆揭牌成立

      中新网重庆4月1日电 (记者 刘相琳)中国机械工业仪器仪表集团1日在重庆揭牌成立。未来,该集团将通过整合国内优势研发力量与产业化能力,打造集技术攻关、产品研制、市场应用于一体的行业龙头。图为签约仪式现场。中...

    时间:04-01
  • 五问小米SU7“爆燃事故”

      近日,一辆小米SU7在高速公路发生碰撞后车辆爆燃,造成3人身亡,引发关注。  据网络视频及图片显示,3月29日深夜,安徽一新能源车撞上高速公路中间护栏起火燃烧,另有被烧毁的车架显示事故车辆为小米SU7,车头已经基本全毁。...

    时间:04-01
  • 毕马威:2025年首季香港IPO集资额同比增加近三倍

      中新社香港4月1日电 国际知名会计师事务所毕马威4月1日发布报告指,2025年第一季度,香港共完成15宗首次公开招股(IPO),集资额达177亿港元,同比增加近3倍,创下自2021年以来第一季度的新高。4月1日,国际知名会计师事务所毕...

    时间:04-01
免责声明:本网对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。 本网站转载图片、文字之类版权申明,本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除。