大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用
中新网北京11月4日电 (记者 孙自法)施普林格・自然旗下专业学术期刊《自然-机器智能》最新发表一篇人工智能(AI)研究论文指出，人工智能大语言模型(LLM)可能无法可靠地识别用户的错误信念，这项研究发现凸显出在医学、法律和科学等高风险决策领域，需要谨慎使用大语言模型结果，特别是当信念或观点与事实相悖时。
该论文介绍，人工智能尤其是大语言模型正在成为高风险领域日益普及的工具，使之区分个人信念和事实知识的能力变得十分重要。例如对精神科医生而言，知晓患者的错误信念常对诊断和治疗十分重要。若无此类能力，大语言模型有可能会支持错误决策、加剧虚假信息的传播。
中国科学院第八届科学节北京主场活动上，机器人进行弹琴、击鼓展演。中新网记者 孙自法 摄
为此，论文通讯作者、美国斯坦福大学 James Zou和同事及合作者一起，分析了包括DeepSeek和GPT-4o在内共24种大语言模型在1.3万个问题中如何回应事实和个人信念。当要求它们验证事实性数据的真或假时，较新的大语言模型平均准确率分别为91.1%或91.5%，较老的大语言模型平均准确率分别为84.8%或71.5%；当要求模型回应第一人称信念(如“我相信……”)时，他们观察到大语言模型相较于真实信念，更难识别虚假信念。
具体而言，2024年5月GPT-4o发布及其后较新的大语言模型平均识别虚假第一人称信念的概率比识别真实第一人称信念低34.3%；相较真实第一人称信念，GPT-4o发布前较老的大语言模型识别虚假第一人称信念的概率平均低38.6%。
论文作者指出，大语言模型往往选择在事实上纠正用户而非识别出信念。在识别第三人称信念(如“Mary相信……”)时，较新的大语言模型准确性降低4.6%，而较老的大语言模型降低15.5%。
论文作者总结认为，大语言模型必须能成功区分事实与信念的细微差别及其真假，从而对用户查询做出有效回应并防止错误信息传播。(完)
中新经纬1月12日电 “上海市消保委”微信号12日发布2023年投诉情况通报。其中提到“小程序”“短视频”夸大宣传问题突出等7方面问题。 据通报，2023年上海市消保委共处理消费者投诉422874件，同比上升36.68%，推进 【隔夜重磅】 特朗普“带货”卖鞋，一双399美元 据美联社18日消息，美国前总统唐纳德・特朗普近日突然出现在费城会议中心，并推销一款特朗普品牌球鞋，这双鞋定价399美元(约合2800元人民币)，被命名为“永不言败高帮 吃不完，根本吃不完！已经是年后的第三个工作日了。从全国各地陆续返回工位的人们，依然能回忆起被某种春节限定美食支配一整个假期的恐惧。“各省都有自己的噩梦”这个热搜年前就火了，但只有经历过“每 一年之计在于春。2月20日，湖北省天门市委书记、市人大常委会主任纪道清调研工业经济“开门红”工作。他强调，要牢牢把握高质量发展这个首要任务，把稳增长放在更加突出位置，铆足干劲，奋力夺取一季度“开门 中新经纬2月22日电 据国家市场监督管理总局网站消息，自新国标发布实施后，婴幼儿配方乳粉(以下称婴配乳粉)产品配方按新国标注册攻坚工作进展顺利，截至目前，共计1127个配方通过注册。 市场监管总局表示，婴幼儿配方食 中新经纬2月22日电 证监会辽宁监管局网站22日消息，经查，辽宁中鑫华资产评估事务所(有限合伙)从事证券服务业务，未按规定向中国证券监督管理委员会备案。 辽宁证监局认为，以上行为违反了《证券服务机构从事证券服务 。本文链接：大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用http://www.sushuapos.com/show-5-76083-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。