首页 家电百科 实时讯息 常识
当前位置: 首页 > 实时讯息 >

“一本正经胡说八道”:AI幻觉到底有多可怕?

0次浏览     发布时间:2025-04-01 19:51:00    

中新网北京4月1日电(记者 吴涛)在享受AI带来便捷的同时,你是否发现这个问题挥之不去——AI幻觉,一种“看似真实、实则虚构”的内容生成现象,正渗透进我们的生活。它到底是通往更强大智能的阵痛,还是技术发展的“魔性副产物”?未来,AI幻觉能否为我所用?

幻觉乱象,层出不穷

AI大模型固然“聪明”,但在“胡说八道”方面也毫不逊色。虚构引用、杜撰人物、逻辑混乱,在与AI的互动中屡见不鲜。

例如,它会引用一篇根本不存在的“2023年哈佛研究”;或者,为并不存在的“诺贝尔物理学奖得主约翰·史密斯”编织一段“量子物理贡献”的叙述。有时候,它甚至会在你一再否认其内容后“动摇立场”,反复修改说法。

中新网记者在测试中还发现,AI模型在面对较为复杂的推理问题时,可能“宕机”或自相矛盾。而当你编造出一个根本不存在的概念,比如“高数几何睡眠法”,它也会一本正经地回答:“这是一种将睡眠科学与高等数学相结合的个性化学习策略……”——说得头头是道。

某大模型截图。

当中新网记者输入自己的名字请AI大模型进行介绍,还出现了一名乍看上去完全合理,但其实完全不存在的人,可以说除了“记者”是真的,其他全是假的。

AI大模型介绍的记者身份,职业生涯背景等均为虚构。

技术问题,还是认知演进?

“AI幻觉就是生成看起来像真的一样的虚假信息。”互联网行业从业者、58同城CEO姚劲波接受中新网采访认为,它当然需要治理,但现阶段还未构成决定性风险。“互联网发展这么多年,虚假信息仍然很多,没有被彻底消除,但网友的识别能力也越来越高。我认为AI领域也一样,随着用户教育的积累,越来越多的网友自己可以分辨出AI幻觉。”

不过,并非所有从业者都如此乐观。科大讯飞董事长刘庆峰曾指出,生成式AI的幻觉问题不仅关乎内容真假,更可能形成算法偏差的恶性循环——虚假内容被AI再次学习、放大,反复再生产。

但值得注意的是,AI幻觉在部分场景中却意外成了创作“灵感来源”。游戏开发、动漫设计、小说创作等领域,恰恰欢迎那种“不合常理”的奇思妙想。比如AI生成的创意图片不少是违反自然规律的,但这不影响创意图的效果。

一位不愿具名的开源大模型社区负责人坦言:“今年的大模型比往年更好,就是因为产生了一部分想象力的创作。”

治理AI幻觉,路径几何?

如何治理AI幻觉?技术手段正在快速跟进。一方面,企业正在为大模型接入权威知识库或实时搜索能力,使其答案更具事实依据;另一方面,“标注AI生成内容”也成为监管部门推动的方向。

上述开源大模型社区负责人就表示,AI大模型如今引入联网搜索,各个平台也在用算法和工程解决一部分幻觉问题。

中国工程院院士张亚勤近日表示,幻觉在横向模型里会越来越少,但是它不会消失,这是生成式AI的特点。要消失的话,一定需要具体到某个行业时,用更精准的数据和更精准的模型结合起来,才会达到效果。

多位科技领域企业家也提出了相应对策。360集团创始人周鸿祎强调企业模型需对接专有知识库进行校正,刘庆峰则建议,要定期清理模型中的“幻觉数据”。

零一万物CEO李开复则认为,“联网搜索能力”是降低AI幻觉的关键路径,但现实操作中并不轻松。每个企业都有自己的数据库、CRM、ERP系统,联网不是难,而是难以实时、完整。这方面还需继续突破。

政策层面也已展开行动。近日,国家互联网信息办公室、工业和信息化部、公安部、国家广播电视总局联合发布《人工智能生成合成内容标识办法》(以下简称《办法》)。

《办法》聚焦人工智能“生成合成内容标识”关键点,通过标识提醒用户辨别虚假信息,明确相关服务主体的标识责任义务,规范内容制作、传播各环节标识行为,将于2025年9月1日起施行。

国家互联网信息办公室有关负责人介绍,《办法》重点解决“哪些是生成的”“谁生成的”“从哪里生成的”等问题,推动由生成到传播各环节的全流程安全管理,力争打造可信赖的人工智能技术。(完)

相关文章
英特尔与联想集团为北京市八十中人工智能实验室揭牌

英特尔与联想集团为北京市八十中人工智能实验室揭牌

近日,英特尔与联想集团为北京市第八十中学建立的人工智能实验室揭牌仪式举行。在建立人工智能实验室的同时,八十中还与英特尔、联想集团共同建立了人工智能课程体系。

与“星链”竞争 亚马逊拟发射“柯伊伯计划”首批卫星

与“星链”竞争 亚马逊拟发射“柯伊伯计划”首批卫星

本文转自【新华社】新华社北京4月3日电 美国亚马逊公司2日宣布,计划9日发射其卫星互联网“柯伊伯计划”的首批27颗卫星。这意味着该公司将与美国太空探索技术公司的“星链”卫星互联网项目正式展开竞争。路透社援引亚马逊公司声明报道,这批卫星定于美国东部夏令时9日正午(北京时间10日零时)从佛罗里达州卡纳维

天津市2025年民营企业服务月启动专场招聘活动

天津市2025年民营企业服务月启动专场招聘活动

4月2日,“支持民营经济发展 促进高质量充分就业”天津市2025年民营企业服务月启动专场招聘活动在天津滨海高新区举办。120家天津市重点民营企业参与,现场提供2536个岗位,涵盖人工智能与智能技术应用、工业自动化与智能制造、新能源与新材料、半导体与先进通信技术、数字内容与互联网服务等多个热门产业领域

宁德市召开未成年人思想道德建设工作推进会暨联席会

宁德市召开未成年人思想道德建设工作推进会暨联席会

东南网4月2日讯(记者 陈玲汇 见习记者 江琳琳) 4月1日,宁德市2025年未成年人思想道德建设工作推进会暨宁德市未成年人思想道德建设工作联席会议召开,总结2024年全市未成年人思想道德建设工作成效,部署下一阶段重点工作。市委常委、宣传部部长叶其发出席并讲话,市政府副市长刘笃凡主持会议。会议现场。

白玉京|欧版“星链”:心比天高命比纸薄,想摆脱美国没那么容易

白玉京|欧版“星链”:心比天高命比纸薄,想摆脱美国没那么容易

【文/观察者网专栏作者 白玉京】 长期以来,欧洲在关键技术和战略安全领域对美国的依赖如影随形——无论是性能先进却价格高昂的F-35战斗机,还是如今在俄乌战场发挥关键作用的“星链”卫星网络,主动权始终掌握在大西洋彼岸的手中。 近期,德国、英国媒体相继披露,美国可能通过F-35内置的后勤信息系统,在特殊

北京市举办2025年生态葬清明公祭活动

北京市举办2025年生态葬清明公祭活动

新京报讯(记者叶红梅)4月2日,由北京市民政局主办的“春融同祭 生命长青”2025年北京市生态葬清明公祭活动在长青生命纪念园举行。2025只平安鸽腾空而起,在祭文朗诵、鲜花敬献中,人们礼赞生态葬逝者、传递对亲人的思念。4月2日,“春融同祭 生命长青”2025年北京市生态葬清明公祭活动,现场放飞平安鸽

重庆:高校上演“机器人大战”

重庆:高校上演“机器人大战”

来源:人民网-图片频道 2025年3月29-30日,第二十四届全国大学生机器人大赛RoboMaster2025机甲大师高校联盟赛(西南站)在重庆大学举行,来自成都大学、重庆大学、云南大学等30余所高校战队的近500名学生,上演了一场精彩纷呈的“机器人大战”。联盟赛是融合了机器人技术、人工智能技术与战

龙岗街道举办“百师助百企”党建引领AI赋能企业高质量发展专题培训班

龙岗街道举办“百师助百企”党建引领AI赋能企业高质量发展专题培训班

为全面落实深圳市“深i暖流行动”部署要求,深圳市龙岗区龙岗街道以党建引领聚合力,创新“党建+校企合作+人才培育”模式,联合深圳城市职业学院、辖区重点企业共同开展“AI赋能人才培养”。3月29日上午,龙岗街道在仙田外国语学校星空剧场举办“百师助百企”党建引领AI赋能企业高质量发展专题培训班,吸引辖区“