liyanyu/videos1.0
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

clarify soft-sentiment metric

Browse Source
This commit is contained in:
Your Name 2026-01-30 22:15:48 +08:00
parent ef08986c7c
commit b7779b4c86
1 changed files with 2 additions and 1 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

3
RequirementsDoc.md
View File

@ -39,6 +39,7 @@
* **初审通过率：** 仅经过 AI 预审后一次性通过的比例（不进入人工返工）。 * **初审通过率：** 仅经过 AI 预审后一次性通过的比例（不进入人工返工）。
* **召回率/误报率：** 在标注测试集中，系统识别到“确实违规”的比例 / 误判为违规的比例。 * **召回率/误报率：** 在标注测试集中，系统识别到“确实违规”的比例 / 误判为违规的比例。
* **Brand Safety：** 涉及价值观、偏见、歧视、舆情争议等非硬性违规风险。 * **Brand Safety：** 涉及价值观、偏见、歧视、舆情争议等非硬性违规风险。
* **一致性：** 软性风控结论与人工复核结论一致的比例（以人工复核为基准）。
* **版本比对 (Diff)：** 针对同一任务的不同版本视频，自动识别修改点和未修改点的能力。 * **版本比对 (Diff)：** 针对同一任务的不同版本视频，自动识别修改点和未修改点的能力。
--- ---
@ -98,7 +99,7 @@
2. **初审通过率 (Quality):** 经过 AI 脚本预审后，首次通过率提升 **≥ 30%**（对比上线前 30 天基线）。 2. **初审通过率 (Quality):** 经过 AI 脚本预审后，首次通过率提升 **≥ 30%**（对比上线前 30 天基线）。
3. **风险拦截率 (Recall):** 3. **风险拦截率 (Recall):**
* **硬性合规 (Hard Rules):** 针对违禁词、竞品 Logo 等客观指标，召回率 **≥ 95%**，误报率 **≤ 5%**。 * **硬性合规 (Hard Rules):** 针对违禁词、竞品 Logo 等客观指标，召回率 **≥ 95%**，误报率 **≤ 5%**。
* **软性风控 (Soft Sentiment):** 针对舆情/价值观等主观指标，**一致性**（与人工复核结论一致）**≥ 80%**。 * **软性风控 (Soft Sentiment):** 针对舆情/价值观等主观指标，**一致性**（以人工复核为基准）**≥ 80%**。
4. **用户满意度 (NPS):** 合作代理商的 NPS 提升 **≥ 10 分**。 4. **用户满意度 (NPS):** 合作代理商的 NPS 提升 **≥ 10 分**。