测量
为收集到的翻译事件和生成翻译时产生的事件选择检查项,并设置各项检查适用的事件范围。
测量是一项预先定义的检查,会在选定的翻译活动事件到达时运行。例如,Crowdin 或代码仓库中的翻译变更可以触发编辑对比,Lingo.dev 完成本地化后则可以触发术语检查。事件提供依据,测量定义要回答的问题。
同一资源既适用于从其他系统收集的翻译,也适用于本地化引擎生成的翻译。审核 Lingo.dev 输出就是一种在本地化完成后运行的测量;具体用法见审核 Lingo.dev 翻译。
在 Radar → 测量中,你可以选择内置检查,也可以创建归组织所有的自定义测量定义。页面默认显示内置选项卡,你的测量选项卡则收录组织编写的测量。两个选项卡都会列出每项测量适用的事件类型、值类型、语言、已测量的事件数,以及是否启用。使用当前 API 读取或更改定义和条件,或启动历史评估,都需要组织成员身份;报告使用权限控制的是报告,而不是测量。
开启内置检查 #
打开一项内置测量,通过语言、源语言、本地化引擎和采样设置,选择要检查的事件。打开启用开关,再选择保存更改。页面会标明该测量适用的事件类型。Lingo.dev 负责设定允许的事件类型和检查的实现方式;你的组织决定是否运行,以及选择哪些事件。
对于术语表遵循度和规则遵循度,你也可以在本地化引擎的 AI 评估器选项卡中,通过自动审核为各引擎分别进行相同设置。
根据你需要回答的问题选择测量:
| 问题 | 测量 |
|---|---|
| 按照既定的类别和严重程度评分标准,能发现哪些错误? | MQM |
| 目标文本与记录的草稿相比是否有改动? | 编辑率 |
| 文本改动了多少? | 编辑距离 |
| 翻译是否使用了相关术语? | 术语表遵循度 |
| 是否遵循了适用的指令? | 规则遵循度 |
| 发生了哪些类型的编辑? | 编辑模式,其结果的访问限制见内置测量参考。 |
内置测量参考介绍了每种算法的输入、量表及结果解读方式。编辑率结果为真,只表示文本发生了变化,并不代表整体质量合格。
添加针对特定内容的要求 #
如果要回答的问题与具体内容有关,例如是否保留了产品声明附带的条件,可以创建自定义测量。为其设置提示词、名称、值类型、触发条件和语言。创建表单保存定义时,会同时启用所选的事件条件。
先从能够查看检查依据的活动入手。首个事件到达后,打开结果,将推理说明与源文本、目标文本进行对照。在将检查用于更大规模的事件集合前,既要测试可接受的改写,也要测试已知错误。成功保存有效定义,说明检查已配置完成;经过校准,才能确认它是否能足够可靠地回答预期问题,满足任务需要。
事件选择范围 #
自定义测量针对每种适用的事件类型分别设置条件;可在运行于下点击选择事件添加。内置测量会在运行于下列出允许的事件类型,这些类型无法更改,且共用一组设置。如果已连接的集成和 Lingo.dev 本身都未发送该测量适用的事件类型,常规选项卡会在运行于下说明这一情况,列出能够发送这些事件的集成,并提供前往设置 → 集成的链接。事件类型包括源文本和目标文本的创建、更新与删除;建议的创建、更新、删除、批准与拒绝;以及本地化的开始与完成。
每个条件或内置设置都会进一步限定相应类型的事件范围:
| 筛选项 | 筛选依据 |
|---|---|
| 语言 | 事件的目标语言区域。任意语言会选中所有目标语言区域。 |
| 源语言 | 事件的源语言区域。任意源语言会选中所有源语言区域。 |
| 引擎 | 生成翻译的本地化引擎。任意引擎也包括后续添加的引擎。 |
| 采样 | 选择每个事件,或按 50% 至 1% 的比例,从通过其他筛选项的事件中采样。 |
语言区域的选择遵循层级关系,而非精确的文本匹配。包含 fr 的列表会选中 fr 和 fr-CA,而 fr-CA 也会选中仅标记为 fr 的事件;fr-CA 不会选中 fr-FR。通过 API 设置时,列表为空或未提供列表表示不作限制,* 则匹配任意语言区域。
按引擎和源语言筛选,需要事件携带相应字段。Lingo.dev 本地化事件会标明引擎以及源语言区域和目标语言区域;Crowdin、GitHub 和 Zendesk 事件携带语言区域,但不包含引擎,因此限定引擎的条件不会选中这些事件。采样结果由事件和测量共同确定,而不是每次重新抽样:对于同一采样设置,同一事件再次接受评估时,是否被选中的结果保持不变。
属于选定类型但未通过某个筛选项的事件,仍会得到结果:N/A。其推理说明以“条件未满足”开头,并指出对应的筛选项。该结果不计费,但会在回填选项卡中计入已测量数量。计算某项标准的质量指标时,应将其排除在分母之外,但统计总体时仍需将其计入。
事件筛选与检查依据是两回事。开始事件可能符合配置的类型,却没有已完成的目标文本。术语表检查可能选中了对应的语言区域,却找不到适用术语。如果结果缺失或为 N/A,请同时检查条件和事件数据。
调整后续检查,保留先前定义的含义 #
在自定义测量定义的常规选项卡上,你可以编辑名称、提示词、值类型、允许不适用选项及事件条件,然后选择保存更改。更改标准前,请保留先前的定义和需要用于对比的结果:即使翻译没有任何变化,问题不同,也可能得出不同的趋势。
启用开关会同时开启或关闭一项测量的所有条件,更改在保存后生效。通过 API 设置时,每个自定义条件还有各自的启用标志。关闭测量后,将不再选取后续事件,但已进入队列的任务仍可能完成。删除自定义定义会一并移除该定义及其条件;现有结果会保留,并显示为未知测量,但不再有可链接的定义。内置测量不能像自定义定义那样编辑或删除。
对于已收集的活动,请使用测量回填选项卡上的历史评估。你可以只测量尚无结果的事件,也可以替换所选时间区间内的结果。
测量以异步方式运行。其结果为检查提供参考,不会修改翻译,也不会阻止发布。请通过 Studio 单独配置翻译阶段和验收。