Google 和 YouTube 开发了各种工具,帮助组织更好地确定要审核的儿童性虐待内容的优先级,为儿童提供保护。
Content Safety API 和 CSAI Match 两个 API 是此工具包的核心,将免费提供给符合条件的合作伙伴。我们的合作伙伴利用这些技术处理数十亿文件,每年可以评估数百万图片和视频是否存在虐待行为。
-
更好地确定优先级
这些 API 对要接受人工审核的儿童性虐待内容确定优先级,帮助打击在线儿童剥削。
-
更快地识别
能够更快速地识别内容,也就有更大几率识别受害者并保护他们免受更多虐待。
-
更安全地运营
提高审核队列的效率并减少其中的干扰内容还可以降低人工内容管理员的负担。
了解 我们的 工具
对之前未见过的图片和视频分类
匹配已知的儿童性虐待视频片段
Content Safety API
用于:对之前未见过的图片和视频分类
Content Safety API 分类器利用程序化访问机制和人工智能,帮助我们的合作伙伴对要审核的数十亿图片和视频进行分类和确定优先级。分类器赋予的优先级越高,媒体文件包含虐待资料的可能性越大,这有助于合作伙伴确定人工审核的优先级,并对内容作出自己的决定。Content Safety API 会对收到的内容发出优先级建议。合作伙伴必须自行进行审核,从而确定他们是否应对内容采取措施。
从操作角度看,我们建议组织在人工审核流程之前使用 Content Safety API,以便对内容进行分类、确定优先级并帮助整理相关队列。Content Safety API 可与其他解决方案一同使用,例如 YouTube 的 CSAI Match 视频哈希处理工具或 Microsoft 的 PhotoDNA,这两款工具可满足不同的需求。
工作方式
-
1. 文件检索
文件是由合作伙伴通过多种形式检索的,例如被用户举报、被抓取工具识别出,或是被合作伙伴用来在其平台上管理内容的过滤器识别出。
-
2. API 审核
媒体文件随后通过简单的 API 调用发送给 Content Safety API。这些文件会流经分类器以确定审核优先级,然后各个文件的优先级数值会发回给合作伙伴。
-
3. 人工审核
合作伙伴利用优先级数值,为需要人工审核环节优先注意的文件确定优先级。
-
4. 采取措施
图片和视频文件经过人工审核后,合作伙伴随后可以根据当地法律法规对相应内容采取措施。
|
合作伙伴 |
|
合作伙伴 |
合作伙伴 |
|||
|---|---|---|---|---|---|---|
|
用户举报的图片或视频 抓取工具 预过滤器(色情/其他分类器) |
I |
Content Safety API I 分类器技术 |
I |
人工审核 |
I |
采取相应措施 |
CSAI Match
用于:匹配已知的儿童性虐待视频片段
CSAI Match 是 YouTube 用于打击在线儿童性虐待图像 (CSAI) 视频的专有技术。这项技术率先采用哈希匹配技术来识别已知的违规内容,让我们能识别与大量未违规的视频内容夹杂在一起的此类违规内容。如果发现与违规内容匹配的图像,此技术会将其标记出来,以便合作伙伴根据当地法律法规进行审核、确认并以负责任的方式进行举报。YouTube 向业界合作伙伴和非政府组织提供 CSAI Match。我们提供指纹软件和 API 的访问权限,以便他们对照我们的已知儿童性虐待内容数据库识别匹配项。
在线平台可以使用 CSAI Match 将其内容与某个最大型的已知 CSAI 内容索引进行比较,从而阻止违规内容在其网站上显示和分享。合作伙伴可将 CSAI Match 轻松集成到他们的系统中,从而更好地大规模开展充满挑战性的内容管理工作。
工作方式
-
1. 视频指纹生成
视频上传到合作伙伴的平台。在合作伙伴平台上运行的 CSAI Match Fingerprinter 为该视频创建一个指纹文件,这是该视频内容唯一对应的数字 ID。
-
2. API 审核
合作伙伴通过 CSAI Match API 发送指纹文件,以便与 YouTube 指纹库中的其他文件进行比对。此库包含 YouTube 和 Google 检测到的已知儿童性虐待内容的指纹。
-
3. 人工审核
对此 API 的调用完成后,合作伙伴会收到肯定或否定的匹配结果。根据匹配信息,合作伙伴人工审核视频,以确认视频是否属于 CSAI。
-
4. 采取措施
审核完成后,合作伙伴可以根据当地法律法规对内容采取措施。
|
合作伙伴 |
YOUTUBE |
合作伙伴 |
合作伙伴 |
|||
|---|---|---|---|---|---|---|
|
视频文件 I Fingerprinter I Fingerprinter 文件 |
I |
CSAI Match API I CSAI Match 技术 I 共享 CSAI 指纹库 |
I |
人工审核 |
I |
采取相应措施 |
用户感言
常见问题解答
Content Safety API
我们提供多种选项,可支持原始内容字节和媒体文件衍生的嵌入数据两种格式。如需了解更多详情,欢迎联系我们。
想要防范平台上出现儿童性虐待内容的业界和民间团体第三方可以申请使用 Content Safety API。申请需要经过审批。
我们坚信,解决在线儿童剥削问题的最佳方法是与其他公司和非政府组织携手合作。长期以来,我们一直在与业内其他公司和非政府组织密切合作,以便推动开发以数据为依据的新工具、提升技术能力并增强公众意识。我们认为,广泛地提供这些工具,让我们的合作伙伴能够利用 AI 更有效率地大规模审核内容,是能否打赢这场战役的重要一环。
CSAI Match
CSAI Match 专为视频设计;不过,通过 Google 开发的 Content Safety API,业界合作伙伴和非政府组织合作伙伴可以使用一系列工具,借助机器学习技术来对图片进行分类。了解详情。
匹配结果会注明视频的哪个部分与已知儿童性虐待图像 (CSAI) 匹配,以及根据标准化分类法对所匹配内容的归类。
CSAI Match 会检测与已知 CSAI 内容几乎完全相同的部分。这包括 MD5 哈希匹配技术确定的完全相同的内容以及几乎完全相同的内容。几乎完全相同的内容可能是经过重新编码、模糊处理、截断或缩放的 CSAI 视频,即使视频只包含一小部分 CSAI(可能与非 CSAI 内容混合在一起)也一样。合作伙伴运行指纹软件来生成视频的“指纹”,即类似 MD5 哈希的字节序列,并随后将指纹发送给 Google 的 CSAI Match 服务。CSAI Match 是专门设计的工具,可高效地扫描视频,并与 YouTube 的已知 CSAI 参考资料库进行比对。