近年来，随着人工智能技术迅猛发展，一些不法分子为博取流量、吸引关注，利用AI工具编造虚假信息，严重破坏网络生态，扰乱社会秩序，误导公众认知。为进一步提升全民识谣辨谣能力，6月3日，山西网安部门集中曝光5起近期查处的利用AI技术制造传播网络谣言的典型案例。
【案例一】为博流量虚构“工厂爆炸”场景，企业员工被依法查处
近日，大同网安部门在工作中发现，有网民在某平台发布视频称：“山西大同一车间内发生爆炸，现场只有一名工人受伤，伤者面部烧伤面积100%”，引发网民关注。经查，涉事企业并未发生任何安全事故，相关内容系该企业员工赵某某通过AI工具生成的虚假文案和虚假视频。在互联网平台发布后，引发网民关注，造成不良影响。目前，公安机关已依法对赵某某作出行政处罚。
【案例二】利用AI仿冒名人直播带货，扰乱秩序被依法查处
近日，大同网安部门在工作中发现，辖区居民邢某非法使用中国国民党主席郑丽文形象的AI数字人直播带货，引发网民质疑，严重干扰正常网络秩序。经查，邢某从事直播带货，恰逢郑丽文访问大陆热度很高，遂萌生利用名人热度增加流量的想法。随后在未经授权的情况下，利用AI工具生成AI数字人形象及带货方案，之后在媒体平台直播带货，引发社会关注，造成恶劣影响。目前，公安机关已依法对邢某作出行政处罚。
【案例三】AI生成“高速车祸”谣言，编造“2死6重伤”被依法查处
近日，长治网安部门在工作中发现，网民赵某在某网络平台发布题为“长治人速看！长晋高速大客车侧翻致2死6重伤，道路结冰预警生效，这些行车规则必须记牢！”的贴文，配发多张所谓“事故现场图”，引发网民转发。经查，长晋高速未发生此类交通事故，文中所述内容纯属虚构。赵某承认其为吸引粉丝关注，利用AI工具生成重大事故不实信息并发布。目前，公安机关已依法对赵某作出行政处罚。
【案例四】利用AI伪造“演唱会现场火灾”，为博流量被依法查处
近日，晋城网安部门在工作中发现，某平台网民发布一段视频内容，视频显示为某体育场内疑似发生火灾，并配文称“太原红灯笼体育场突发火情”。该视频迅速引发网民关注与转发，造成不良社会影响。经查，网民张某某在未核实事件真实性、无任何事实依据的情况下，利用AI工具擅自编造“太原红灯笼体育场突发火情”的虚假信息。目前，公安机关已依法对张某某作出行政处罚。
【案例五】AI生成虚假文章，发布“五台县车祸”谣言被依法查处
近日，忻州网安部门在工作中发现，某平台网民发布文章《4月29日突发惨烈车祸：大货车侧翻致3死，现场画面曝光》。文中明确提及“山西忻州五台县”，并附有AI生成的事故图片，引发网民广泛关注。经查，五台县近期未发生此类交通事故。发布者田某某交代，其在某App看到类似标题后，复制链接至AI写作平台生成文章并直接发布。目前，公安机关已依法对田某某作出行政处罚。
公安机关提醒，当前，利用AI生成虚假图文、音视频已成为网络谣言传播的新趋势。此类信息仿真度高、传播速度快、误导性强，极易引发社会恐慌。山西公安机关将持续加大对此类违法行为的打击力度，依法查处造谣、传谣、蹭流量、恶意引流等行为，坚决维护清朗网络空间。
