视频电话那头，出差在外的“伴侣”焦急地索要转账；班级群里，“班主任”用熟悉的声音发布紧急缴费通知……如今，在人工智能（AI）的加持下，普通人也能在几分钟内生成足以以假乱真的内容。AI学会了模仿人的笔迹、复刻人的声音、合成人的面容，这类技术一旦被恶意利用，会令人“眼睁睁”地被骗。这不禁让人怀疑，AI时代，眼见还为实吗？
近期，一段“以色列士兵躲在墙后痛哭”的视频在社交媒体平台X上广泛传播。发布者称以军在伊朗火箭弹和无人机袭击下遭受重创，该视频播放量迅速突破160万。德国电视二台调查发现，该视频系典型的AI生成产物。视频中士兵佩戴的徽章时隐时现，上面的文字更是一串毫无意义的乱码。多名网友也指出，视频中制服样式、哭声音效和枪械细节都与真实场景存在明显偏差。
生成式工具进入新闻报道流程后，专业新闻机构的把关机制同样面临考验。2月，德国电视二台紧急召回并解职了该机构一名驻纽约记者，因为其发回的一则关于美国移民与海关执法局执法行动的报道中，混入了一段由视频生成模型Sora生成的虚假视频，画面角落清晰可见Sora水印。事件发生后，德国电视二台宣布为员工开设强制性培训课程，规范AI工具在新闻报道中的使用。“漠视新闻准则造成的损害是巨大的。这关乎报道的公信力。”德国电视二台总编辑贝蒂娜·绍斯滕说。
“AI让纳粹受害者变得更年轻漂亮，这种美化扭曲了历史，却利用公众同情心获得广泛传播。”格罗舍克说，这类伪造的帖子会削弱纪念馆、档案馆、博物馆和研究机构工作的权威性，损害它们的公信力。
比伪造内容更危险的，是AI可以伪造“多数人的意见”。一个国际团队近期在美国《科学》杂志“政策论坛”栏目发表文章说，数字操控正进入新阶段。散布虚假信息的不再只是单个账号，而是伪装成真实用户的AI集群。这类集群能够彼此互动、回应真人、适应情绪变化，并在不断相互附和和强化中制造出一种并不存在的“社会共识”。
德国康斯坦茨大学研究人员达维德·加西亚解释说，这类AI集群由一组可被个人或组织控制的AI智能体构成。它们拥有相对稳定的身份和记忆，能够模拟人类行为，既可以围绕特定目标协同行动，也能够根据实时事件和用户反馈调整表达方式。这类AI集群与早期的僵尸网络有着显著区别，后者通常行为机械，较容易识别；而前者可以跨平台运行，并通过彼此呼应不断放大影响。
加西亚认为，真正的风险将不再局限于个别虚假信息，而是“操纵者”可能借助大模型虚拟出“另一种社会”。
面对这种可以伪造“社会共识”的新威胁，研究人员和机构已经开始行动，利用技术手段予以识别，并通过健全监督机制，及时鉴别和揭露虚假信息和内容。
除了技术识别，研究人员还主张建立独立监督机制，持续观察AI智能体如何在不同平台上影响公共讨论，及时揭露虚假内容。加西亚说，这类网络越早被揭露出来，就越难侵蚀公众信任，也越难把原本多样的社会意见伪装成单一共识。
莱茵兰－普法尔茨州政治教育中心主任伯恩哈德·库卡茨基说，虚假信息已成为当前信息传播中的突出问题，公民每天都可能接触到被操纵的内容，因此辨别和核验信息的能力尤为重要。据新华社