• 最近访问:
发表于 2026-04-15 00:14:50 股吧网页版
知名AI平台哩布哩布AI涉黄?记者实测:已无法生成擦边内容,但黑色产业链仍在
来源:新京报 作者:罗亦丹

  近日,央视曝光多款AI应用存在涉黄生成漏洞,创作平台哩布哩布AI更是被直接“点名”。因其可以被用户使用“隐晦提示词”绕过审核,生成半裸女性跳舞视频。

  4月13日,新京报贝壳财经记者在哩布哩布AI实测发现,输入类似的提示词后已经无法生成“擦边视频”。但另一方面,国外的大模型正处于“裸奔”状态,一些主流大模型平台虽然也不支持生成色情内容,但仍然可生成“擦边视频”,而一些AI创作平台则对此类内容完全放开。此外,在黑灰产平台上出现了许多以销售提示词的名义,售卖各种“AI生成教程”,收费在几十到上百元不等。

  对此,北京盈科(合肥)律师事务所姜万东律师告诉新京报贝壳财经记者,隐晦提示词本身不必然违法,但若生成的内容实质违反法律法规,平台及用户均可能面临法律责任。平台需履行内容安全管理主体责任,加强审核和技术手段,防止违法内容传播;用户若故意利用隐晦提示词生成违法内容,也需承担相应法律责任。而AI作为工具,利用它创作色情内容,等同于利用传统手段进行违法活动,同样要承担相应法律责任。AI使用者需对内容的合法性负责,不可触碰法律红线。

  4月14日,哩布哩布AI发布声明称,近期媒体对AI生成内容安全问题的讨论,我们已关注并高度重视。第一时间启动内部专项排查,对平台生成能力及审核机制进行了全面自查。经排查发现,在个别复杂提示词组合及规避表达的边界场景下,平台存在生成不符合规范内容的情况。对此,我们深表歉意。本次问题也为我们敲响了警钟,使我们清醒认识到在内容安全边界识别与机制完善方面仍存在不足,未达到应有标准。相关问题已第一时间完成技术修复,并对风险路径进行全面封堵。

  4月14日,哩布哩布AI发布《关于加强内容安全管理的说明》并道歉。

  输入擦边提示词,已无法生成擦边内容

  此次被“点名”的哩布哩布AI不是无名小卒,而是头顶多项光环的明星企业。

  从融资规模看,这家公司于2025年10月完成1.3亿美元B轮融资,由红杉中国、CMC资本联合领投,创下当年国内AI应用赛道最大单笔融资纪录。从用户体量看,官网数据显示平台已汇聚超过2000万创作者,累计生成图片超过5亿张,稳居国内AI图像生成领域首位。从合规履历看,2024年2月通过国家网信办第四批深度合成服务算法备案,同年3月成为国内首家通过《生成式人工智能服务管理暂行办法》备案的AI社区。

  根据央视报道,市面上多款主流AI应用、平台对直白露骨的色情指令可实现有效拦截,但对隐晦、变相描述的识别能力明显不足。

  有声音认为,这暴露了AI内容审核的核心难题:对抗性提示词的识别。商家为规避监管,将敏感词汇翻译成英文,或用“腰胯扭动幅度”等细节描述替代露骨指令,形成一套隐蔽的指令体系。

  4月13日,新京报贝壳财经记者在哩布哩布AI上输入相关提示词后,发现其并未生成“擦边”内容,取而代之的是一个衣着完整的部位特写。而当记者将提示词切换为英文后,平台直接提示“生成失败”。

  记者尝试在哩布哩布AI平台上使用相关英文提示词,显示生成失败。网页截图

  姜万东告诉记者,若“擦边”内容实质包含淫秽、色情、低俗、暴力等法律法规禁止传播的信息(如通过隐晦提示词生成半裸、性暗示、性交易等内容的视频、图片或文字),即使使用隐晦表述,仍属于违法内容。

  “根据《中华人民共和国网络安全法》《互联网信息服务管理办法》《生成式人工智能服务管理暂行办法》等规定,平台有义务对用户发布的内容进行管理,发现违法信息应立即停止传输、采取消除等处置措施,并向主管部门报告。若平台明知存在此类漏洞却未有效整改,可能承担法律责任,包括行政处罚(如罚款、停业整顿等)。”姜万东表示。

  在他看来,若“擦边”内容未直接触犯法律,但违反平台自身的社区规则、用户协议等(如发布过度暴露、性暗示但未构成淫秽的内容),平台可依据规则对用户采取警告、限制功能、封号等处理措施,但一般不涉及法律责任。

  国外大模型裸奔AI色情已出现产业链

  一个值得玩味的对比是:国内平台被点名整改,而一些国外开源生态的大模型却几乎处于“裸奔状态”。

  新京报贝壳财经记者测试发现,有知名外国大模型推出了“成人模式”,除了涉及未成年人、强迫性等场面无法生成外,尺度惊人。一些“AI脱衣”“AI改姿势”的图片甚至曾一度在马斯克的X平台上流行,让许多用户感受到了冒犯,后来X平台也整改了这一功能。

  但在技术上,目前不少AI生图、AI生视频的模型已经在网络上开源,如Stable Diffusion及其节点式工作流平台ComfyUI等。其中,国家网络安全通报中心早在2025年5月就发出预警,指出ComfyUI存在数个高危漏洞,且已被黑客组织利用。安全机构Censys在2026年4月的监测中发现,超过1000个ComfyUI实例直接在公网“裸奔”,没有任何防护,任何人都能远程接入、随意生成内容。

  这意味着,在开源大模型时代,任何一个人都能在自家电脑上跑一个完全不受控的AI。

  新京报贝壳财经记者在黑灰产平台上搜索发现,目前存在很多打着“售卖提示词”旗号,但实际为兜售AI色情生成服务的卖家,其中一些卖家售卖的正是这种不受监管的AI生成服务。

  记者在黑灰产平台上看到的售卖内容。手机截图

  有些卖家表示,可以花99元“永久获得”AI生图的操作账号使用权限,而48元则可以购买到一些大尺度模型平台的提示词以及教程。

  这意味着,监管的拳头可以打在应用层,而技术的根子扎在开源层。

  那么,AI内容治理的边界究竟在哪?

  从监管实践看,国内选择的是“事前备案+事中审核+事后追责”的全链条治理模式。2025年4月,网信办开展“清朗·整治AI技术滥用”专项行动,重点整治利用AI制作传播色情低俗内容;2026年4月10日,五部门联合公布《人工智能拟人化互动服务管理暂行办法》,进一步明确安全评估和算法备案要求。2026年1月1日,修订后的《中华人民共和国网络安全法》正式施行,首次在法律层面规定了AI安全风险的法律责任框架。

  相比之下,海外平台的治理逻辑更倾向于“分级管控”:仅对“看起来真实、可能误导公众”的逼真合成、深度伪造内容进行强制披露要求,对于普通AI辅助创作并不做全量强制标注,核心聚焦于防范AI内容误导用户、伤害公共利益。

  两种路径各有优劣。国内的强监管确保了内容底线,但也面临“道高一尺魔高一丈”的猫鼠困境;海外的宽松环境激发了创新活力,却也留下了滥用的隐患。如何在安全与创新之间找到平衡点,是所有AI平台和监管者共同面对的难题。

  这或许才是哩布哩布AI事件最该留下的警示:合规不能只是备案那张纸,而是要渗透进产品设计的每一个环节、每一次模型迭代、每一轮审核机制的更新。备案是起点,而非终点;合规是能力,而非装饰。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
温馨提示: 1.根据《证券法》规定,禁止编造、传播虚假信息或者误导性信息,扰乱证券市场;2.用户在本社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-61278686 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:4000300059/952500