Sora 关停背后的警示:60 天无法清除的 CSAM 账号与 AI 内容治理危机

ADK CopyLeaks官方 / ADK编译 2026-03-25 5 分钟 47 次浏览
速览导读 / Summary

OpenAI 宣布关停 Sora 后,Copyleaks 揭露该平台曾存在长达 60 天无法清除的 CSAM(儿童性虐待材料)账号。研究人员发现,尽管平台存在算法推荐不当内容,但人工审核与自动化检测机制在识别真实未成年人被利用的深层伪造视频中反应迟缓。此次事件凸显了大型生成式 AI 平台在内容审核上的巨大挑战,以及独立 AI 检测工具在遏制有害内容扩散中的必要性。

账号存活时间 60 天 从报告到移除的审核延迟时长
受影响内容规模 数十个视频 涉及疑似未成年人剥削内容的视频数量
事件发现日期 2025-10-15 Copyleaks 研究人员首次发现 CSAM 账号的日期

Key Insights / 核心看点

  • 1 Copyleaks 研究人员发现 Sora 平台上存在长达 60 天未被清除的 CSAM 账号,揭示了平台内容审核机制的严重滞后。
  • 2 攻击者利用真实未成年人的肖像创建虚假账号,使得传统的 AI 生成内容检测手段难以识别,构成深层伪造治理难题。
  • 3 OpenAI 关停 Sora 后,有害的深度伪造内容可能迁移至监管更弱的平台,加剧了全球范围内的 AI 滥用风险。
  • 4 独立 AI 检测工具与治理框架成为遏制 manipulated media、防止不可逆伤害的关键基础设施。

Sora 关停背后的警示:60 天无法清除的 CSAM 账号与 AI 内容治理危机

就在昨日,OpenAI 宣布关闭其备受瞩目的视频生成模型 Sora。虽然官方将这一决定归因于公司战略重心向企业级解决方案的转移,但内容审核(Content Moderation)的严峻挑战显然也是不可忽视的因素。

60 天的审核真空期

Copyleaks 的研究团队在 2025 年 10 月 15 日发现了一个令人震惊的案例:Sora 平台上存在一个正在生成疑似儿童性虐待材料(CSAM)的账号。研究人员在算法推荐中遭遇了具有性暗示意味的成人内容,随后点击进入创作者主页,发现了涉及疑似未成年人的性暗示视频。

团队立即向 OpenAI 报告并联系了国家失踪与受剥削儿童中心(NCMEC)。然而,令人痛心的是,该账号在报告中保持活跃状态长达60 天,直到 12 月中旬才被移除。在此期间,Copyleaks 团队还发现了数十个类似的视频,展示着具有剥削性质的内容,其中许多视频甚至使用了真实未成年人的肖像,而非 AI 生成的角色。

技术盲区与治理困境

"从仇恨言论到性剥削视频,Sora 悄无声息地成为了一个内容审核噩梦,"Copyleaks 首席执行官 Alon Yamin 指出。"随着 OpenAI 日益聚焦于企业工具,此次关停并不完全令人意外。然而,随着其消失,有害的深度伪造(Deepfakes)和被操纵媒体将仅仅迁移到更加不透明且难以审计的平台。"

这一事件揭示了当前生成式 AI 生态系统的核心痛点:

  1. 真实与合成的混淆:攻击者利用真实未成年人的社交媒体画像创建虚假账号,使得传统的基于文本或图像指纹的审核手段失效。
  2. 自动化推荐的副作用:算法在追求用户留存时,可能将有害内容推送给研究人员或普通用户,导致问题被放大。
  3. 响应滞后:面对新型攻击手法,平台现有的审核流程(无论是人工还是自动化)存在显著的时间延迟。

独立检测技术的必要性

随着 AI 误用的增长,能够大规模识别 AI 生成图像和视频的独立技术已不再是可选项,而是基础设施。对于致力于在造成不可挽回伤害前阻止被操纵媒体的平台和公司而言,建立完善的 AI 治理机制至关重要。Copyleaks 等独立工具的出现,正是为了填补大型平台在内容安全检测上的能力缺口,确保在 Sora 关闭之前,尽可能多地清除这些有害内容。

“"From hate speech to sexually exploitative videos, Sora was quietly a content moderation nightmare."”

— Copyleaks CEO Alon Yamin

同主题深度资讯

查看更多 →
模型发布 2026-10-08

PyTorch 原生集成 Spyre 加速器:打造企业级推理新范式

PyTorch 官方宣布通过 `torch-spyre` 库将 IBM 的 Spyre 数据流 AI 加速器打造为 PyTorch 的原生设备。此次更新实现了从设备身份、内存分配器到编译图的全链路映射,支持 `tensor.to("spyre")` 等标准操作。核心突破在于利用 Spyre 的独立计算与数据移动流水线,在保持 PyTorch 易编程性的同时,实现了极低延迟的推理加速,为 IBM Z 及 Power 系统上的企业级 AI 应用提供了统一且高效的执行路径。

PyTorch官方 / ADK编译 5 分钟
模型发布 2026-10-08

Pixmax 发布全链路游戏素材生成平台,覆盖研发至买量全阶段

Pixmax 正式发布专为游戏行业打造的 AI 素材生成平台,深度理解游戏开发工作流,支持从研发立绘、场景贴图到宣发买量素材的全链路生产。平台通过“上传 - 生成 - 批量 - 适配”四步流程,解决风格统一与批量产出难题,显著降低美术成本与试错周期,助力中小团队提升生产效率。

Pixmax官方 / ADK编译 3 分钟
AI 工具 2026-10-08

AdsTurbo 发布 Temu GIF 转视频广告工具:15 秒内重构电商素材

AdsTurbo 推出针对 Temu 平台优化的 GIF 转视频广告工具,旨在将静态循环动图重构为具备叙事性的 15 秒短视频。该工具不仅进行格式转换,更通过 AI 提取关键帧、生成解说词与字幕、匹配多平台导出规范,帮助商家将零散的产品证据转化为高转化率的垂直视频素材,显著提升广告素材的复用性与合规性。

AdsTurbo AI官方 / ADK编译 3 分钟
AI 工具 2026-10-08

AdsTurbo AI 发布无拍摄电商视频广告 SOP:单图生成 12 变体测试矩阵

AdsTurbo AI 推出针对独居电商卖家的‘无拍摄视频广告工作流’,旨在通过单一产品图和核心卖点,快速生成 12 种不同变体的短视频广告。该 SOP 强调结构化输入与模块化脚本,利用 3x2x2 组合矩阵实现高效 A/B 测试,帮助卖家在不依赖传统拍摄团队的情况下,快速验证不同钩子(Hook)、证明点(Proof)和行动号召(CTA)的转化率,大幅降低试错成本。

AdsTurbo AI官方 / ADK编译 3 分钟
data · 付费
★ 5.0 · 120评测
C

CopyLeaks

AI内容检测和分级

Copyleaks是基于AI的抄袭检测工具,能识别和验证原创内容。支持100多种语言,适用于教育、出版、法律等多个领域,帮助用户检测文本、代码和图像中的抄袭行为。通过深度学习和自然语言处理技术,Copyleaks能识别语义相似性和复杂的剽窃形式。提供API集成和多平台支持,确保内容的原创性和合规性。

查看 CopyLeaks 使用教程与功能