问小创
告诉我你的需求,我帮你从站内挑最合适的 AI 工具。
中央网信办近日公布“清朗·整治AI应用乱象”专项行动第二阶段成果,重点治理AI换脸、魔改名著、虚假信息生成、侵害未成年人权益等违规场景,累计清理违法违规信息超561万条,查处违规账号4.9万余个,处置违规网站及APP2400余个。字节跳动豆包、百度文心一言、阿里云千问、字节跳动元宝等头部大模型均已完成审核策略升级,严格限制违规内容输出。

不少网友近期发现,此前输入关键词就能生成的AI换脸视频、魔改四大名著的衍生内容,现在在主流生成式AI平台已经无法生成,页面会弹出“涉及违规内容,无法为您提供服务”的提示——这正是本次AI乱象专项整治落地的直观体现。
本次专项整治覆盖了AI生成虚假信息、传播暴力低俗内容、假冒仿冒他人、侵害未成年人权益四大核心违规场景,各地网信部门结合属地产业特点推出了差异化的治理方案。
北京方面重点指导各大平台升级内容审核策略,针对AI生成内容的新型变体优化识别模型,大幅缩短违规内容的处置响应时间;上海在督促企业完成自查自纠的同时,推出AI应用“知识普及包”,面向公众科普深度伪造、AI诈骗等风险的识别方法;浙江对属地重点AI平台实施“一企一策”合规指导,依法查处了一批问题突出的中小AI应用;广东则通过定期召开重点平台工作例会,对多款应用的违规问题开展点对点督促整改,确保监管要求落到实处。
作为普通用户接触AI服务的核心入口,国内头部生成式AI产品已率先完成合规改造。
字节跳动旗下豆包、元宝,百度旗下文心一言,阿里云旗下千问均已升级内容审核规则,从输入关键词拦截、生成过程管控到输出内容复核全链路设置了违规内容拦截机制,针对AI换脸素材生成、经典著作恶意篡改、涉未成年人不良内容生成等高频违规场景实现了全面覆盖,有效从源头切断了违规AI内容的传播路径。
随着生成式AI的应用场景快速向内容创作、社交娱乐、生活服务等领域渗透,技术滥用带来的风险也同步攀升。本次专项整治并非限制AI产业的创新发展,而是通过划清合规红线的方式,避免劣币驱逐良币,为合规企业创造更健康的市场环境。
据了解,接下来网信部门还将建立AI应用常态化监管机制,完善AI生成内容标识、违规内容溯源等配套规则,引导AI产业在合规框架下实现高质量发展。
AI创作导航,创作与探索并重。聚合全球优质AI工具,覆盖短视频、图文、写作、设计等创作场景,以及办公、学习、编程、生活等全品类需求。从创作出发,探索AI的无限可能,为创作者、学生、教师、职场人提供一站式AI工具导航与场景化应用指南。