当前位置: 首页  >> 资 讯  >> 24小时新闻  >> 查看详情

眼见还为实吗?AI造假侵入公共记忆 操纵“社会共识”

来源: 新华网   日期:2026-03-20 09:34:55  点击:724 
分享:

       新华社柏林3月19日电 新闻分析|AI时代,眼见还为实吗

  新华社记者褚怡

  视频电话那头,出差在外的“伴侣”焦急地索要转账;班级群里,“班主任”用熟悉的声音发布紧急缴费通知……如今,在人工智能(AI)的加持下,普通人也能在几分钟内生成足以以假乱真的内容。AI学会了模仿人的笔迹、复刻人的声音、合成人的面容,这类技术一旦被恶意利用,会令人“眼睁睁”地被骗。这不禁让人怀疑,AI时代,眼见还为实吗?

  AI造假侵入公共记忆

  近期,一段“以色列士兵躲在墙后痛哭”的视频在社交媒体平台X上广泛传播。发布者称以军在伊朗火箭弹和无人机袭击下遭受重创,该视频播放量迅速突破160万。德国电视二台调查发现,该视频系典型的AI生成产物。视频中士兵佩戴的徽章时隐时现,上面的文字更是一串毫无意义的乱码。多名网友也指出,视频中制服样式、哭声音效和枪械细节都与真实场景存在明显偏差。

  生成式工具进入新闻报道流程后,专业新闻机构的把关机制同样面临考验。2月,德国电视二台紧急召回并解职了该机构一名驻纽约记者,因为其发回的一则关于美国移民与海关执法局执法行动的报道中,混入了一段由视频生成模型Sora生成的虚假视频,画面角落清晰可见Sora水印。事件发生后,德国电视二台宣布为员工开设强制性培训课程,规范AI工具在新闻报道中的使用。“漠视新闻准则造成的损害是巨大的。这关乎报道的公信力。”德国电视二台总编辑贝蒂娜·绍斯滕说。

  AI造假甚至侵入历史记忆。今年年初,达豪、布痕瓦尔德等约30家德国集中营纪念机构和博物馆联合签署一封公开信,敦促社交媒体平台严厉打击利用AI生成大屠杀相关内容的行为。德国历史学家伊丽丝·格罗舍克说,利用AI生成的图像和视频看起来像极了历史照片——黑白底色,骨瘦如柴的人,铁丝网后呼号的孩子……但仔细看就会发现异常,这类图像和视频中的人长相相似,身高相仿,而且都非常漂亮。

  “AI让纳粹受害者变得更年轻漂亮,这种美化扭曲了历史,却利用公众同情心获得广泛传播。”格罗舍克说,这类伪造的帖子会削弱纪念馆、档案馆、博物馆和研究机构工作的权威性,损害它们的公信力。

  操纵制造“社会共识”

  比伪造内容更危险的,是AI可以伪造“多数人的意见”。一个国际团队近期在美国《科学》杂志“政策论坛”栏目发表文章说,数字操控正进入新阶段。散布虚假信息的不再只是单个账号,而是伪装成真实用户的AI集群。这类集群能够彼此互动、回应真人、适应情绪变化,并在不断相互附和和强化中制造出一种并不存在的“社会共识”。

  德国康斯坦茨大学研究人员达维德·加西亚解释说,这类AI集群由一组可被个人或组织控制的AI智能体构成。它们拥有相对稳定的身份和记忆,能够模拟人类行为,既可以围绕特定目标协同行动,也能够根据实时事件和用户反馈调整表达方式。这类AI集群与早期的僵尸网络有着显著区别,后者通常行为机械,较容易识别;而前者可以跨平台运行,并通过彼此呼应不断放大影响。

  加西亚认为,真正的风险将不再局限于个别虚假信息,而是“操纵者”可能借助大模型虚拟出“另一种社会”。他说:“AI集群可以通过缓慢而持续的过程,制造某种立场已获广泛支持的假象,进而影响人们的观点甚至改变社会规范。当许多看似彼此独立的声音不断表达相同立场时,多数派的错觉就会形成,即使这种多数原本并不存在。”

  从被动辟谣到主动识别

  面对这种可以伪造“社会共识”的新威胁,研究人员和机构已经开始行动,利用技术手段予以识别,并通过健全监督机制,及时鉴别和揭露虚假信息和内容。

  加西亚认为,应利用模式识别等技术手段,检测内容传播中是否存在异常同步、相互呼应和跨平台联动,以更快发现由AI驱动的群体性操纵。

  除了技术识别,研究人员还主张建立独立监督机制,持续观察AI智能体如何在不同平台上影响公共讨论,及时揭露虚假内容。加西亚说,这类网络越早被揭露出来,就越难侵蚀公众信任,也越难把原本多样的社会意见伪装成单一共识。

  德国人工智能研究中心(DFKI)和莱茵兰-普法尔茨州政治教育中心等机构日前推出尚处于测试阶段的深度防伪检测工具,以提高公众对可疑内容的识别能力。与仅依赖像素异常识别伪造痕迹的传统方法不同,该工具不仅会对图像和音频进行取证分析,还会结合上下文展开交叉核验。后台的AI智能体会并行检索网络信息,并调用经过核实的事实资源库辅助判断,包括德新社事实核查团队提供的数据。

  DFKI在新闻公报中说,用户只需点击两下,就能将社交媒体上的可疑图片转发给检测系统,系统随后会分析相关材料是否由AI生成或经过篡改,并向用户反馈其为虚假内容的可能性以及相应线索。

  莱茵兰-普法尔茨州政治教育中心主任伯恩哈德·库卡茨基说,虚假信息已成为当前信息传播中的突出问题,公民每天都可能接触到被操纵的内容,因此辨别和核验信息的能力尤为重要。

 

编辑 | 王宇

相关新闻

  • 中国岩石力学与工程学会与中国档案学会举行交流座谈会 中国岩石力学与工程学会与中国档案学会举行交流座谈会

          3月17日,中国档案学会监事长李忱一行5人到访中国岩石力学与工程学会,围绕学会监事会工作、内部治理等方面进行业务交流。        会上,中国岩石力学与工程学会介绍了其在会员发展、国际交流、期刊建设、服务国家战略等方面取得的成果,特别是在监事会建设方面探索出了一条“党委统领、监事会监督、理事会执行”的治理新路径,以及监事会制度建设、全过程监督等方面的探索与实践。中国档案学会介... [阅读]

  • 中国仪器仪表学会“科创中国”产业科技服务团为天长仪表线缆产业高质量发展聚势赋能 中国仪器仪表学会“科创中国”产业科技服务团为天长仪表线缆产业高质量发展聚势赋能

           3月2日,中国仪器仪表学会“科创中国”产业科技服务团赴安徽省天长市开展“仪表线缆产业集群”培育服务活动。        在天长市“仪表线缆产业集群”培育服务实施方案研讨会上,“科创中国”产业科技服务团团长、中国仪器仪表学会智推委秘书长于美梅围绕“天长市‘仪表线缆产业集群&... [阅读]

  • 2026年第二期中国科技会堂论坛 聚焦质量强国 2026年第二期中国科技会堂论坛 聚焦质量强国

           3月1日,由中国科协举办的2026年第二期中国科技会堂论坛在京举行。本期论坛以“质量强国 科技赋能”为主题,邀请中国工程院院士、中国科协副主席、中国机械工业集团有限公司党委常委、副总经理、总工程师陈学东,中国工程院院士、哈尔滨工业大学教授谭久彬作为主讲嘉宾,中国有研科技集团科技委副主任、领域总师熊柏青,中国质量检验检测科学研究院副院长蒋家东参加互动交流。来自中央和国家机关、中央企业的200余位领导干部和100余位青培工... [阅读]

  • 中国水力发电工程学会九届六次理事会暨2026年度工作会议在京召开 中国水力发电工程学会九届六次理事会暨2026年度工作会议在京召开

            2月10日,中国水力发电工程学会九届六次理事会暨2026年度工作会议在北京以线上线下相结合的形式召开。学会党委书记、理事长张野主持会议并作总结讲话,在会议第一阶段作题为“深学笃行党的二十届四中全会精神 奋勇谱写水电与新能源事业高质量发展新篇章”的主题党课报告;学会常务副理事长兼秘书长郑声安作题为“固本强基稳发展 拓新强能开新局 以实干实绩奋进‘十五五’高质量发展新征程”... [阅读]