Files
hunjing/docs/product/metrics-and-anti-metrics.md
T
chenxin 42513d13c6 📝 docs: 建立魂镜完整 1.0 设计文档体系
- 产品层:产品宪章与永久禁域、产品定义、完整 1.0 范围与发布门、道家文化语言体系、指标与反指标
- 研究层:参考项目研究(deepseek-harness、pi、MemOS、模型网关)、灵台原生引擎研究(业界原生引擎架构理念与道家文化出处)
- 架构层:系统、Agent 运行时(周天体系)、插件系统、灵台引擎(C++ 双形态)、媒体与设备、社区协作市场、前端富内容渲染、数据、记忆与知识
- 契约层:协议与稳定标识、API 总体约定、Native API、兼容网关、实时与 Webhook、内部端口、统一 ContentBlock 与流式(含分支对话交互态)、灵台 C ABI 与 gRPC Service、API 表面、HTTP 与事件、运行观测
- 决策:ADR-001 至 ADR-023(模块化单体、每 attempt 持久化、候选记忆、OAuth 2.1、灵台引擎、双形态部署、大周天演化、宪章、三界作用域、私箧与保全态、叩心、周天统一等)
- 交付:WP-01 至 WP-15 实施 TODO 与设计阶段交接文档
- 工程:AGENTS.md 工程规则(含 C++/灵台规范)、CLAUDE.md 引用、.gitignore
2026-09-09 21:07:14 +08:00

3.6 KiB

指标与反指标

本文定义 Hunjing 1.0 衡量成功的指标框架与明确不做优化的反指标。承接旧版(main 分支)同名文档的方法论,按当前"角色 + Agent + 创作社区平台"定位适配。指标服务于产品宪章的使命;与反指标冲突的增长一律视为缺陷。

1. 原则

  • 指标必须可由事件与账务数据复算,不使用无法追溯的口径。
  • 每个核心指标同时定义测量边界、窗口与排除规则;没有口径的百分比不是指标。
  • 反指标与指标同等约束产品与运营决策:任何"提升了指标但触发反指标"的方案不予采纳。
  • 安全、支付与权限边界的正确性指标(越权率、对账差异)优先于一切增长指标。

2. 北极星

健康的长数字关系数:在最近 90 天内仍有真实交互、且用户未发起纠错投诉的活跃角色关系数量。"真实交互"排除叩心自动触达与系统通知。

3. 核心指标

域 指标 说明
关系连续性 90 天角色留存、跨模型/跨端迁移后的关系继续率 验证"角色先于会话"成立
演化质量 大周天候选的批准率、纠正率、用户关闭率 演化有用且不扰民;关闭率高说明候选质量差
记忆可信 记忆纠正率、敏感内容错误自动批准率(目标 0)、召回越权率(目标 0) 见记忆评测
主动性健康 叩心发送后用户回复率、静音/关闭率 回复率低且关闭率高说明打扰
创作生态 角色发布后被 Fork/续作的比例、创作者分成按时结算率 社区健康不是发布总量
交易诚信 退款率、争议率、对账差异(目标 0)、重复支付/退款(目标 0) 见支付安全门
可靠性 核心对话 SLO 达成率、流式中断率、备份恢复演练通过率 目标值见发布门与可靠性门
供给成本 单次对话成本、缓存命中率、引擎(灵台)调用延迟与错误率 成本透明可归因

4. 反指标

明确不优化、并作为方案否决条件的行为:

  1. 不以消息量、在线时长或成瘾性深度为增长目标;不设计无终止的信息流和损失厌恶机制。
  2. 不以叩心、通知或红点换回流:主动触达受频率与静默约束,"发送量提升"本身不是成功。
  3. 不以牺牲审核换社区规模:待审积压、举报响应时长恶化时冻结增长功能。
  4. 不以亲密、记忆或情感付费分级:任何"付费才能被记得更深"的设计都是禁域(见宪章第 6 节)。
  5. 不以下调模型质量节省成本而冒充不变:降级必须显式告知。
  6. 不以收集更多数据改善推荐:推荐特征不用私密消息、敏感记忆与精确位置(既有约束)。
  7. 不以延长删除/退出流程降低流失:退出路径步骤数与耗时只允许减少。
  8. 不以插件安装量、市场 GMV 掩盖安全与纠纷指标:生态规模与诚信并列汇报,不可单独报喜。
  9. 不以演示环境、假数据或单人脚本制造指标(与交付纪律一致)。

5. 使用规则

  • 指标与反指标的定义变更视同产品决策,更新本文并同步数据口径登记。
  • 运营报表必须并列展示相关反指标;只展示有利指标的报表视为不合格。
  • 1.0 发布前按发布门完成指标基线测量;发布后按季度复核北极星与反指标健康度。