网络普法小课堂 | 拆解AI虚假信息套路
2026年国家网络安全宣传周正在火热开展,今年的主题为“网络安全为人民,网络安全靠人民——智能时代 网安护航”。近日,公安部公布打击整治网络违法犯罪10起典型案例。数据显示,今年以来,公安机关累计侦办网络违法犯罪案件3.6万余起。其中,针对涉事故灾害、涉经济民生领域虚构事实、移花接木、AI生成等网络谣言频发,公安机关网安部门坚持快查快处,侦破相关案件1.1万余起。当下,AI的广泛应用,给人们生活带来便利的同时,也存在虚假信息批量生产和病毒式传播的风险,给社会治理带来挑战。我们应该如何识别和防范?一起来拆解AI虚假信息的套路。
类型一:AI虚构场景
移花接木造假,放大焦虑恐慌
逼真的图片、视频画面往往让人信以为真。普通网民看到“现场实拍”字样,常常默认事件真实发生,而随手转发会进一步放大焦虑恐慌,导致虚假信息扩散。
真实案例:某网民发布视频称,广州南沙大桥的栏杆被撞出一个缺口,一辆公交车悬停在桥面下的桥墩上,随后一辆小货车又从桥上坠落,砸在公交车上。有用户在视频下评论称:“吓得我不敢走南沙大桥了”。据了解,当时南沙大桥通行正常,并未发生该起事故。而视频中“南沙大桥”的题字出现了明显变形,“桥”字和真实题字存在出入,且视频右下方水印显示,该视频由AI生成。
普法小课堂:AI生成图像、视频普遍存在文字扭曲、物体边缘撕裂、光影逻辑矛盾等破绽。针对自然灾害、事故灾难等突发事件画面,公众应坚持权威信源优先原则,以官方通报为准,不要仅凭画面主观判断事件真伪。依据相关法律法规,随意编造、传播虚假的险情、疫情、灾情、警情,扰乱社会公共秩序,将依法承担相应法律责任。
类型二:AI用于诈骗
包装夸大噱头,设下重重陷阱
不法分子利用“AI大数据、算法预测”的噱头,精心包装诈骗套路,利用一些人想要“一夜暴富、稳赚不赔”的心理,通过小额返利、前期兑现的方式建立信任,消解心理防备,层层诱导受害者大额资金投入,实施诈骗。
真实案例:家住安徽省黄山市的王先生(化名)刷到“彩票预测”短视频后,被拉入所谓的“精准推测群”。平台客服声称依托AI算法中奖率高达100%,承诺不中包赔,设置充值解锁权限门槛。王先生前两次充值并成功提现,放松警惕后,被对方以“操作失误”为由要求继续充值转账,最终累计被骗38000元。
普法小课堂:根据《彩票管理条例》等相关规定,彩票实体店是目前国内唯一合法的购彩渠道,任何通过网络售彩的行为均属违法。彩票开奖是随机概率事件,无任何规律可循,不存在可精准预测开奖结果的AI技术。公众需认清此类科技包装骗局的本质,摒弃侥幸心理,遭遇相关诈骗及时留存证据、报警维权。
类型三:AI炒作八卦
批量造谣传播,煽动网络舆情
公众对名人热点、八卦秘闻等存在天然关注度。AI技术可快速批量生成虚假网文,再加上平台热搜推荐、网民跟风讨论,营造全网热议的虚假舆论氛围,误导公众认知、煽动网络舆情。
真实案例:网民徐某强为博取流量、谋取不当利益,利用某平台的“AI智慧生成”功能,输入社会热点关键词,炮制发布《顶流明星被曝境外豪赌输光十亿身价引发舆论海啸》的虚假文章并发布。该谣言迅速扩散,相关话题频繁登上热搜,严重扰乱公共秩序。最终,徐某强因编造传播网络虚假信息,被公安机关依法处以行政拘留8日。
普法小课堂:AI高效生成内容不等于内容真实,文字通顺、细节完善不能作为判定信息真伪的依据。依据《人工智能生成合成内容标识办法》,AI生成合成内容必须添加标识。广大网民面对猎奇爆料、突发传闻等,需优先核查权威信源,不转发未经证实的网传信息,编造、传播网络谣言须承担法律责任。
类型四:AI魔改内容
炮制荒诞剧情,传播不良价值观
平台算法倾向于推荐冲突和猎奇内容,一些网民利用AI批量生产传播低质内容。此类内容常伪装成少儿动画、趣味科普,以荒诞剧情、离谱人设博取流量,容易误导未成年人价值观,破坏网络内容生态。
真实案例:部分自媒体账号滥用AI技术,恶意魔改《西游记》《三国演义》等经典文学作品,凭空编造“林黛玉倒拔垂杨柳”“孙悟空大战变形金刚”等荒诞离谱剧情,批量制作短视频并标注“儿童动画”标签推送传播。此类内容无正向价值、纯属猎奇炒作,依托算法大肆传播,误导青少年认知。
普法小课堂:网信部门聚焦利用AI制作发布虚假信息、传播暴力低俗内容、侵害未成年人权益等突出问题,加大违法违规信息和账号查处力度,对屡教不改、恶意造谣的违规账号,坚决采取限流、封禁、关停等处置措施。平台要切实担当社会责任,坚持主流价值导向,推动算法向上向善。广大网民尤其是家长需提升内容甄别能力,区分趣味改编与恶意篡改,引导未成年人自觉远离剧情荒诞、人设颠覆的AI低质内容。
类型五:AI拟声换脸
仿冒身份诈骗,进行侵权牟利
AI深度伪造技术涵盖声纹克隆、人脸换脸等手段,仅需少量公开照片、短视频、音频素材,即可高度复刻他人面部样貌、神态语气,造假效果逼真。人们往往依靠人脸、声音等识别身份,不易甄别AI伪造痕迹,可能遭遇虚假带货误导、身份仿冒诈骗等,滋生各类侵权与财产损失风险。
真实案例:多名自媒体博主利用AI声纹克隆技术,精准复刻全红婵、孙颖莎、王楚钦等奥运冠军的声线,假借运动员本人名义直播带货、售卖土特产。高度仿真的音频内容迷惑大量网民,不少消费者无法辨别真伪,误以为是运动员本人公益代言,纷纷下单消费。同时,各类AI换脸仿冒名人、亲友开展虚假营销、视频诈骗的现象也不断出现。
普法小课堂:根据《中华人民共和国民法典》,人格权是民事主体享有的生命权、身体权、健康权、姓名权、名称权、肖像权、名誉权、荣誉权、隐私权等权利。民事主体的人格权受法律保护,任何组织或者个人不得侵害。
未经授权利用AI换脸、声纹克隆技术仿冒他人身份,开展带货营销、信息传播等活动,属于明确的侵权行为,需承担相应法律责任。
针对AI造假现象,我们要头脑清醒,审慎辨别各类网络信息,自觉抵制虚假信息,做到不信谣、不造谣、不传谣。遭遇造假侵权、诈骗等违法行为,及时留存证据、依法举报维权,共同守护清朗、安全、有序的网络空间。
策划:詹 勇 王震杰
统筹:荆 克 屈绍辉 丁向峰
执行策划:李洪雷
文案:李 申
设计:孔爱国
法律指导:陈旭 北京市法制宣传教育形象大使、专家顾问
新华网数字政务中心
中国互联网联合辟谣平台运营中心
政府网站编辑部
联合出品
来源:新华网
