01
听需求
把含糊的话写成指令
先分清什么算符合、什么算不符合,再写成步骤、正例和反例。
02 / Practice
01
听需求
先分清什么算符合、什么算不符合,再写成步骤、正例和反例。
02
归类
按同一套规则给样本归类,看不清或还不能判断的单独标出。
03
带人
先让大家看同一组例子,把标准讲齐,再把任务分下去。
04
质检
按已经写好的规则检查结果,把要改的地方说清楚。
03 / Process
一件标注或质检任务,我按这五步往下做。
01
先确认任务边界:什么算符合,什么算不符合,什么情况现在还不能判断。
02
步骤、正例、反例放在一起。不把一句抽象要求直接交给下一个人。
03
样本按规则归类。培训时大家看同一组例子,再领取各自的任务。
04
对照规则看结果,把不一致、看不清和无法判断的样本单独标出来。
05
反馈写成对方能修改的话。规则需要改时,记下改了哪一条、为什么改。
04 / Tools
上面四项能力来自已经做过的工作。下面八个工具,各自对应 AI 训练师日常里的一项技能。
把含糊要求拆成步骤,写出正例和反例,并对比两份回答差在哪一句。
指令改写 · 回答对比
把规则、样本和回答放在一起读,标出矛盾、遗漏和答非所问。
长规则核对
对照图片、截图和文字是否在说同一件事,写下看不清或无法判断的地方。
图文样本
把讨论收成培训提纲、质检清单,并写清按哪一条规则判断。
培训材料
给需要查证的说法找来源,把材料里已有的内容和还不能确定的分开。
事实核对
把一条规则、一个正例和一个反例排成一页,新人先看这一页再动手。
示例页
把零散规定收成可以检索的条目,并记下改了什么、为什么改。
规则库
把重复说明收成同一格式,对齐表格字段,汇总质检意见。
批量整理
05 / Work
方块人是一个用小方块拼小人的小游戏。选颜色、选图案,拼好以后可以保存。