PRODUCTION STATUS / RUNNING DATA PIPELINE / v1.0 CN · ZAOZHUANG 周一至周六 09:00 - 18:00

04 FIELD NOTES

产线上写下来的,
不是转述来的。

关于标注规范、质检口径、偏好数据、数据合规与交付管理的实践记录。保持每周更新。

共 6 篇
01 从「标注量」到「标注质量」:数据标注行业的三次跃迁 当模型能力由规模驱动转向数据与对齐驱动,标注的验收标准已经从框数变成一致性、可追溯性与难例覆盖率。 02 RLHF 偏好数据为什么难做:一套可落地的人工判断流程 偏好标注的难点不在「谁回答更好」,而在把主观判断拆成可培训、可复核、可统计的确定性动作。 03 三级质检 + 争议仲裁:我们把 99% 准确率拆成了哪些动作 准确率不是验收时抽检出来的,而是由流程结构决定的。本文公开一套可复用的标注质检链路。 04 训练数据的合规底线:采集授权、脱敏与交付留痕 数据集一旦进入训练,撤回成本极高。合规需要在采集前就设计进流程,而不是交付时补一份说明。 05 自建团队 vs 众包:项目波动从哪里来,怎么压下去 同一份规范,不同组织形态交付出来的方差差别很大。 06 一份能用的标注规范,至少要写清这六件事 规范不是类别清单,是让两个互不相识的人做出同一个决定的协议。

NEXT STEP

想聊某篇文章里的问题?

把你的场景和验收口径发过来,我们按实际情况讨论,不做通用方案套用。

描述你的标注需求