Evalúa las traducciones de Lingo.dev
Ejecuta mediciones sobre las traducciones generadas por tus motores de localización, elige los motores, los idiomas y el muestreo, y consulta cada respuesta junto a su solicitud.
Una traducción generada por Lingo.dev se puede examinar con las mismas mediciones que analizan la actividad recopilada. Cada localización completada se convierte en un evento localization.completed en Radar, y cada medición que se ejecuta sobre ese tipo de evento responde a su pregunta sobre el resultado. Estas respuestas ayudan a explicar la traducción generada sin necesidad de volver a generarla.
No hay un recurso de evaluación independiente para las solicitudes de Lingo.dev. Una evaluación es una medición en Radar → Mediciones: los motores de localización, el par de idiomas y el muestreo que determinan qué solicitudes se seleccionan se configuran en su condición localization.completed, y las respuestas aparecen junto al evento examinado.
Activa la evaluación automática de un motor #
Abre la pestaña Evaluadores del motor de localización. Evaluación automática incluye un interruptor para Cumplimiento del glosario, que comprueba los términos fijados en los glosarios del motor, y otro para Cumplimiento de las reglas, que comprueba las reglas de sus conjuntos de reglas. Al activar un interruptor, se añade el motor a esa medición integrada y se activa la medición; al desactivarlo, se retira el motor. Los ajustes de idioma y muestreo de la medición se mantienen sin cambios.
Cuando una medición integrada se ejecuta en todos los motores, todos sus interruptores están activados. Al desactivar uno de los motores, se guarda la lista de los demás motores existentes, por lo que los que se creen después no se evaluarán hasta que se añadan. Comprueba el selector Motores de la medición integrada en Radar para confirmar el alcance guardado.
MQM y las mediciones personalizadas no aparecen en esta pestaña. Activa MQM en Radar y selecciona los motores de una medición personalizada mediante su condición. Si tu plan factura las evaluaciones por uso, Evaluación automática muestra Facturación por ejecución junto con la tarifa.
Define un criterio para las traducciones generadas #
Crea una medición personalizada y elige localization.completed como desencadenante. Asígnale un nombre y una instrucción, y elige Aprobado o suspenso o De 0 a 100. Define qué significa cada respuesta. Un valor booleano sirve para un requisito como conservar una salvedad; un porcentaje necesita una escala explícita que indique los grados de cumplimiento parcial.
Si Permitir «No aplicable» está activado, define cuándo debe abstenerse el evaluador y cómo debe explicar esa respuesta. Un requisito que no sea pertinente y una traducción a la que sí se aplique, pero para la que falten pruebas, requieren un seguimiento distinto, aunque ninguno de los dos casos produzca un dictamen concluyente.
Por ejemplo, una promesa de entrega en un plazo de cinco días laborables en el texto de origen contiene un plazo, la condición de que los días sean laborables y un compromiso. Al comprobar esa promesa, se debe explicar cuál de esas relaciones ha cambiado. Que coincida solo el número no demuestra que se haya conservado la afirmación.
El evaluador recibe los datos del evento. En un trabajo de documentos, estos incluyen los textos de origen y destino agrupados por archivo, el par de idiomas y el ID del motor. No incluyen un campo de contexto de la solicitud. El evaluador es un modelo de evaluación gestionado por la plataforma y no tiene por qué ser el mismo que generó el texto.
Elige qué traducciones se evalúan #
En la pestaña General de la medición, la fila localization.completed situada bajo Se ejecuta en permite seleccionar las solicitudes:
| Selector | Selecciona |
|---|---|
| Idiomas | Idiomas de destino. Cualquier idioma los selecciona todos. |
| Idiomas de origen | Idiomas de origen. Cualquier idioma de origen los selecciona todos. |
| Motores | Motores de localización cuyas traducciones se evalúan. Cualquier motor incluye los que se añadan más adelante. |
| Muestra | Todos los eventos, o el 50, 25, 20, 10, 5 o 1 % de los eventos seleccionados por los demás criterios. |
Selecciona Guardar cambios para aplicarlos. La selección de idiomas sigue la jerarquía de idiomas, como se describe en selección de eventos: fr también selecciona fr-CA, mientras que fr-CA no selecciona fr-FR. Una solicitud registrada sin un motor de localización no cumple una condición limitada a determinados motores.
El muestreo selecciona una fracción de las solicitudes que cumplen los criterios, pero no garantiza un número exacto en un lote pequeño. Una solicitud que quede fuera de la muestra o de la selección de idiomas o motores recibe igualmente una respuesta N/A cuyo razonamiento comienza por «No se cumple la condición»; no se factura. En los informes, distingue entre la población que cumple los criterios y las solicitudes seleccionadas. Una solicitud omitida deliberadamente por el muestreo no es una evaluación fallida, pero su ausencia sigue siendo relevante al explicar qué parte de la población recibió una respuesta concluyente.
Comprueba qué directrices consulta cada comprobación #
El cumplimiento del glosario y el cumplimiento de las reglas consultan los términos del glosario y las reglas vigentes del motor en el momento de ejecutarse. MQM añade la voz de marca, las reglas y los términos coincidentes vigentes del motor cuando el evento especifica un motor. Ninguna de estas mediciones reconstruye una instantánea de las directrices registradas con la solicitud. Por tanto, si un término cambia después de generar la traducción, también cambia lo que examina una evaluación histórica posterior.
La ausencia de hallazgos no permite determinar qué directrices se utilizaron durante la generación. Consulta el lote de origen y los intentos del modelo en Solicitudes, y compara el contexto enviado y la configuración del motor con Recuperación de contexto.
Consulta una respuesta asíncrona #
La medición se pone en cola cuando finaliza la localización. La puesta en cola y la evaluación son independientes de la traducción, por lo que esta puede completarse correctamente sin que haya una respuesta.
Radar → Registros → Mediciones muestra las respuestas. Filtra por Medición y Valor y abre una respuesta para consultar su valor, razonamiento, sugerencia y solicitud al evaluador. Relaciona el evento subyacente con el trabajo y el idioma que estás investigando. Resultados distingue entre respuestas concluyentes, N/A y ausencia de ejecución.
Una respuesta de una medición personalizada que indique un suspenso o una puntuación baja en la traducción de un motor también puede servir como evidencia para las sugerencias del motor de localización. La respuesta en sí no modifica la traducción.
Una evaluación asíncrona no bloquea el flujo de traducción ni aprueba el resultado para su publicación. La posedición opcional y las decisiones humanas se configuran por separado en Flujo de trabajo, Política de revisión e Inbox.
Deja de evaluar o elimina la medición #
Desactiva el interruptor del motor, retira el motor de la condición o desactiva la medición para detener las evaluaciones futuras. Los trabajos que ya estén en cola aún pueden completarse.
Al eliminar una medición personalizada, se eliminan su definición y sus condiciones. Las respuestas registradas se conservan y se muestran como Medición desconocida. Antes de eliminarla, guarda su definición junto con cualquier investigación que dependa de ella.
Si falta una respuesta, revisa la solicitud original, su evento, los motores, los idiomas y la muestra de la medición, así como el razonamiento de la respuesta N/A, antes de intentar otra traducción. Para evaluar traducciones generadas antes de activar una medición, utiliza la evaluación histórica. La reproducción crea un trabajo nuevo y puede seleccionar un modelo o unas directrices diferentes; por sí sola, no puede recuperar exactamente el intento original.