“一本正经胡说八道”：AI幻觉到底有多可怕？
中新网北京4月1日电(记者 吴涛)在享受AI带来便捷的同时，你是否发现这个问题挥之不去――AI幻觉，一种“看似真实、实则虚构”的内容生成现象，正渗透进我们的生活。它到底是通往更强大智能的阵痛，还是技术发展的“魔性副产物”？未来，AI幻觉能否为我所用？
幻觉乱象，层出不穷
AI大模型固然“聪明”，但在“胡说八道”方面也毫不逊色。虚构引用、杜撰人物、逻辑混乱，在与AI的互动中屡见不鲜。
例如，它会引用一篇根本不存在的“2023年哈佛研究”；或者，为并不存在的“诺贝尔物理学奖得主约翰・史密斯”编织一段“量子物理贡献”的叙述。有时候，它甚至会在你一再否认其内容后“动摇立场”，反复修改说法。
中新网记者在测试中还发现，AI模型在面对较为复杂的推理问题时，可能“宕机”或自相矛盾。而当你编造出一个根本不存在的概念，比如“高数几何睡眠法”，它也会一本正经地回答：“这是一种将睡眠科学与高等数学相结合的个性化学习策略……”――说得头头是道。
某大模型截图。
当中新网记者输入自己的名字请AI大模型进行介绍，还出现了一名乍看上去完全合理，但其实完全不存在的人，可以说除了“记者”是真的，其他全是假的。
AI大模型介绍的记者身份，职业生涯背景等均为虚构。
技术问题，还是认知演进？
“AI幻觉就是生成看起来像真的一样的虚假信息。”互联网行业从业者、58同城CEO姚劲波接受中新网采访认为，它当然需要治理，但现阶段还未构成决定性风险。“互联网发展这么多年，虚假信息仍然很多，没有被彻底消除，但网友的识别能力也越来越高。我认为AI领域也一样，随着用户教育的积累，越来越多的网友自己可以分辨出AI幻觉。”
不过，并非所有从业者都如此乐观。科大讯飞董事长刘庆峰曾指出，生成式AI的幻觉问题不仅关乎内容真假，更可能形成算法偏差的恶性循环――虚假内容被AI再次学习、放大，反复再生产。
但值得注意的是，AI幻觉在部分场景中却意外成了创作“灵感来源”。游戏开发、动漫设计、小说创作等领域，恰恰欢迎那种“不合常理”的奇思妙想。比如AI生成的创意图片不少是违反自然规律的，但这不影响创意图的效果。
一位不愿具名的开源大模型社区负责人坦言：“今年的大模型比往年更好，就是因为产生了一部分想象力的创作。”
治理AI幻觉，路径几何？
如何治理AI幻觉？技术手段正在快速跟进。一方面，企业正在为大模型接入权威知识库或实时搜索能力，使其答案更具事实依据；另一方面，“标注AI生成内容”也成为监管部门推动的方向。
上述开源大模型社区负责人就表示，AI大模型如今引入联网搜索，各个平台也在用算法和工程解决一部分幻觉问题。
中国工程院院士张亚勤近日表示，幻觉在横向模型里会越来越少，但是它不会消失，这是生成式AI的特点。要消失的话，一定需要具体到某个行业时，用更精准的数据和更精准的模型结合起来，才会达到效果。
多位科技领域企业家也提出了相应对策。360集团创始人周鸿 强调企业模型需对接专有知识库进行校正，刘庆峰则建议，要定期清理模型中的“幻觉数据”。
零一万物CEO李开复则认为，“联网搜索能力”是降低AI幻觉的关键路径，但现实操作中并不轻松。每个企业都有自己的数据库、CRM、ERP系统，联网不是难，而是难以实时、完整。这方面还需继续突破。
政策层面也已展开行动。近日，国家互联网信息办公室、工业和信息化部、公安部、国家广播电视总局联合发布《人工智能生成合成内容标识办法》(以下简称《办法》)。
《办法》聚焦人工智能“生成合成内容标识”关键点，通过标识提醒用户辨别虚假信息，明确相关服务主体的标识责任义务，规范内容制作、传播各环节标识行为，将于2025年9月1日起施行。
国家互联网信息办公室有关负责人介绍，《办法》重点解决“哪些是生成的”“谁生成的”“从哪里生成的”等问题，推动由生成到传播各环节的全流程安全管理，力争打造可信赖的人工智能技术。(完)
国际天文学家团队绘制了迄今最大的三维宇宙地图，记录了大约130万个活跃类星体在空间和时间上的位置。它将成为探测类星体、暗物质晕和超大质量黑洞的强大工具。发表在最新一期《天体物理学杂 今年1月，英国分子生物学家肖尔托·戴维发表文章，指控美国哈佛大学医学院附属丹娜-法伯癌症研究所科学家通过修改图片伪造数据。随后该研究所正式宣布撤回6篇论文，并纠正了另外31篇论文的 记者3月20日从中国科学技术大学获悉，该校郭光灿院士团队在量子态分辨研究中取得重要进展：他们在最小资源消耗的量子态分辨问题中首次提出了全局最优自适应策略，并发展了自适应集体测量实验技术， 记者3月20日来到广东深汕西高速公路改扩建施工现场，看到智能机器人、自动化生产线等智能制造设备在不停运行。3月19日—20日，由茅以升科技教育基金会和广东省交通集团联合主办的全国高速 自2023年以来，人工智能的“触角”已延伸到生活的方方面面。其中，“人工智能+情感”的赛道正悄然崛起。目前，国内外已经出现了多款较为成熟的AI伴侣应用。不少网友在社交媒体上晒出了与自己“AI 所谓香喷喷的婴儿，到底是源于人们的爱意，还是说确有其香？《通讯·化学》21日一项小型研究首次分析了婴儿和青少年体味化学组成的差异。研究显示，有两种较难闻的化合物仅在青少年体味样本中 。本文链接：“一本正经胡说八道”：AI幻觉到底有多可怕？http://www.sushuapos.com/show-2-11809-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。