巨人天成
产经 科技 企业 数据 峰会 快讯 商业

AI幻觉泛滥,我们该如何重建对智能体的信任?

2025-03-21来源:ITBEAR编辑:瑞雪

2025年,人工智能领域迎来了前所未有的热潮,AI智能体的广泛应用被视为科技发展的里程碑。然而,在这场技术盛宴中,一个名为“AI幻觉”的现象悄然浮现,成为不容忽视的隐忧。

AI幻觉,指的是AI系统在面对未知或超出其训练范围的问题时,会编造出难以辨真伪的细节,生成与事实相悖的答案。这种“胡说八道”的能力,让AI在医疗、法律、新闻等多个领域引发了信任危机。例如,今年2月,一组关于“中国80后累计死亡率为5.20%”的数据在网络上广泛传播,后经证实为AI大模型出错所致,这一事件引发了公众对AI准确性的质疑。

不仅如此,AI大模型还成为了谣言的放大器。从股市“黑嘴”到网络平台虚假信息,再到错误答案或谣言,AI已经形成了一个完整的谣言传播闭环。最近,一则关于“超一线明星在澳门输了10亿”的谣言在网络上疯传,最终证实为一名网民利用AI智慧生成功能制作的虚假信息,该网民也因此受到了行政处罚。

AI幻觉的产生,源于多个方面的技术缺陷。首先,基础训练数据的参差不齐和无法保障的准确度,为AI幻觉埋下了病根。互联网语料库中的错误、偏见、虚构或不完整的信息,都会被AI模型学习并复现。其次,AI大模型在设计上更注重生成文本的流畅性,而非事实准确性,这导致AI在遇到冷门问题时,宁可编造细节也不会回答“我不知道”。最后,AI缺乏人类的常识和物理世界的体验,无法验证生成内容是否符合现实逻辑,因此容易生成不合理的内容。

在众多AI大模型中,DeepSeek的幻觉问题尤为突出。据Vectara机器学习团队的研究显示,DeepSeek-R1的幻觉率高达14.3%,远超行业其他推理模型。这与其出色的推理能力密切相关,推理增强的模型在处理复杂推理逻辑时,可能产生更多无法与数据源完全匹配的内容。

DeepSeek在撰写专业内容时,尽管已经要求信源准确,但给出的答案依然差强人意。在医疗领域,DeepSeek给出了详细的数据及信源,但经核查大部分为虚构信息。例如,在回答AI医疗方面的问题时,DeepSeek提到的Google Vision Transformer ViT-22B的数据和信源,实际上是Transformer进阶版ViT-G/14在2021年的数据,被DeepSeek张冠李戴,并以极专业的表述让人信服。

AI幻觉的危害已经显现,它不仅侵蚀了人类真实世界,还引发了一场前所未有的信息真实性“战争”。据南都大数据研究院发布的报告,2024年搜索热度较高的50个国内AI风险相关舆情案例中,超1/5与AI造谣有关。AI谣言已经成为社会公害,68%的网民曾因AI生成的“专家解读”“权威数据”而误信谣言。

为了应对AI幻觉泛滥,技术修补和社会联防成为必要手段。技术平台需要慎重处理互联网海量文本筛选,加强数据监管,确保AI训练数据的真实性和合法性。同时,要通过自然语言处理(NLP)技术,分析数据的语义、逻辑结构,识别文本中的矛盾、不合理表述。要合理处理推理能力和准确性的平衡,避免创造力与准确度失衡。

对于内容平台来说,应该守好内容底线,及时发现、治理和辟谣AI幻觉产出的内容及利用AI产出的虚假内容。同时,相关法律法规和政策也需要尽快落实。更重要的是,用户自己要学会辨别虚假信息,加强防范意识,对AI保持警惕,进行交叉验证,引导模型输出真实信息。



未来十年科技新图景:智能硬件跃迁、AI赋能与网络无感化变革
本文将从智能硬件、AI 算法、未来网络、数字经济、安全体系等多个维度,分析科技浪潮下的核心趋势。 设备变得更聪明网络变得无形AI 成为能力底座数字经济成为主引擎安全体系成为关键支撑科技不是未来,而是现在正在发…

2025-11-15

避开苹果锋芒,聚焦外卖小哥:打造专属他们的超实用蓝牙耳机
试着聚焦一个特定人群,比如外卖小哥。电量要非常足,最好能用一整天。麦克风要特别好,因为外卖小哥大部分时间都在路上,环境嘈杂,麦克风不好的话,对方根本听不清。如果能将耳机固定在头盔上,那就更好了,不怕掉。如果…

2025-11-13

2025微信数据保护全攻略:误删聊天记录别急,多场景恢复方案来了
提前备份是数据安全的核心,2025年微信已支持电脑、云服务、外部存储等多种备份方式,恢复时只需简单操作即可找回记录。苹果和安卓厂商的云服务早已支持微信数据备份,关键是确认误删前有有效备份记录。 2. 选择…

2025-11-13

SK海力士VFO工艺打造HBS技术,为移动设备AI性能提升带来新突破
据闪德资讯获悉,SK海力士正在研发结合移动DRAM和NAND的高带宽存储(HBS)技术,可提高智能手机和平板电脑等移动设备的AI性能。 相比HBM使用的硅通孔(TSV)技术,VFO无需穿孔,成本更低、良率更高…

2025-11-12

等保2.0成企业必答题!网络合规差距与优化路径全解析
实践中发现,许多企业在宽带层面存在共性差距,亟需从专业角度优化改进。在网络核心节点部署流量探针,实现全量网络流量采集;建议搭建专用日志审计平台,统一存储日志并支持多维度分析,确保日志完整性与可追溯性。 1.…

2025-11-12

开放式蓝牙耳机怎么选?2025十款热门开放式耳机深度测评来助力
推荐理由:在百元价位中音质体验非常出色,可媲美千元级别耳机通常选择耳夹式耳机的消费者都有骑行和户外运动的爱好,难以避免遇到下雨天气和大量出汗的情况,因此耳机的防水级别也成了筛选的指标,建议选择防水等级在IP…

2025-11-11

立讯精密液冷方案:从前瞻布局迈入规模化商用新阶段
证券之星消息,立讯精密(002475)11月11日在投资者关系平台上答复投资者关心的问题。投资者提问:公司的液冷散热解决方案在AI服务器中的应用情况如何?是否已获得头部云服务提供商或AI企业的认可? 谢谢!…

2025-11-11

爱立信完成上行L4S技术测试,为5G时延敏感业务提供网络支撑
(全球TMT2025年11月11日讯)近日,在IMT-2020(5G)推进组的组织下,爱立信成功完成了上行L4S技术测试,验证了L4S在提升上行实时交互业务体验方面的显著效果。测试结果表明,L4S技术能够有效…

2025-11-11

上海贝尔发布《2025年AI-ICT赋能与重构白皮书》:剖析趋势、需求与战略方向
《2025年AI-ICT赋能与重构白皮书》由上海贝尔发布,系统剖析了AI与ICT产业融合的核心趋势、技术需求及战略方向,展现了全球AI发展浪潮下ICT基础设施的变革路径与机遇。实施路径上,需夯实数据与模型基础…

2025-11-11

2025年AI智能鼠标深度体验:星火大模型赋能,它能替代哪些办公工具?
AI智能鼠标2025深度测评:星火大模型加持,AI问答、AI绘图能替代哪些工具?当一款鼠标,内嵌了如科大讯飞星火这般强大的认知大模型时,它所带来的,远不止是光标移动的流畅,更是一场关于效率与创造力的革命。我们…

2025-11-10