Avalie as traduções do Lingo.dev

Execute medições nas traduções geradas pelos seus engines de localização, escolha engines, idiomas e amostragem e leia cada resposta junto da solicitação correspondente.

Uma tradução gerada pelo Lingo.dev pode ser analisada com as mesmas medições usadas para examinar a atividade coletada. Cada localização concluída se torna um evento localization.completed no Radar, e cada medição executada nesse tipo de evento responde à sua pergunta sobre o resultado. Essas respostas ajudam a entender a tradução gerada sem precisar de uma nova tentativa de geração.

Não existe um recurso de avaliador separado para solicitações do Lingo.dev. Uma avaliação é uma medição em Radar → Medições: os engines de localização, o par de idiomas e a amostragem usados para selecionar as solicitações são configurações da condição localization.completed da medição, e as respostas aparecem junto do evento analisado.

Ative a avaliação automática de um engine #

Abra a aba Avaliadores do engine de localização. Em Avaliação automática, há um botão de ativação para Conformidade com o glossário, que verifica os termos fixados pelos glossários do engine, e outro para Conformidade com regras, que verifica as regras dos seus conjuntos de regras. Ativar um desses botões adiciona o engine à medição integrada correspondente e ativa a medição; desativá-lo remove o engine. As configurações de idioma e amostragem da medição permanecem inalteradas.

Quando uma medição integrada é executada em todos os engines, o botão de cada engine fica ativado. Ao desativar um engine, a lista dos demais engines atuais é salva. Assim, um engine criado depois só será avaliado quando for adicionado. Confira o seletor Engines da medição integrada no Radar para confirmar o escopo salvo.

O MQM e as medições personalizadas não aparecem nesta aba. Ative o MQM no Radar e selecione os engines de uma medição personalizada na condição dela. Se o seu plano cobra por avaliação, Avaliação automática exibe Cobrado por execução com a tarifa.

Escreva um critério para traduções geradas #

Crie uma medição personalizada e escolha localization.completed como gatilho. Defina um nome e um prompt e escolha Aprovado ou reprovado ou 0 a 100. Especifique o que cada resposta significa. Um valor booleano é adequado para um requisito como preservar uma ressalva; uma porcentagem exige uma escala explícita para o cumprimento parcial.

Quando Permitir não aplicável estiver ativado, defina quando o avaliador deve se abster e como deve explicar essa resposta. Um requisito irrelevante e uma tradução à qual o requisito se aplica, mas que não apresenta as evidências necessárias, exigem encaminhamentos diferentes, mesmo que nenhum dos dois casos resulte em um julgamento conclusivo.

Por exemplo, uma promessa de entrega em até cinco dias úteis no texto de origem estabelece um prazo, a ressalva de que são dias úteis e um compromisso. A verificação dessa promessa deve explicar quais dessas relações mudaram. A correspondência do número, por si só, não permite concluir que a afirmação foi preservada.

O avaliador recebe os dados do evento. No caso de um trabalho de documento, esses dados incluem os textos de origem e de destino agrupados por arquivo, o par de idiomas e o ID do engine. Não incluem um campo de contexto no nível da solicitação. O avaliador é um modelo de avaliação gerenciado pela plataforma e não precisa ser o mesmo modelo que gerou o texto.

Escolha quais traduções serão avaliadas #

Na aba Geral da medição, a linha localization.completed em Executar em seleciona as solicitações:

SeletorSeleciona
IdiomasIdiomas de destino. Qualquer idioma seleciona todos.
Idiomas de origemIdiomas de origem. Qualquer idioma de origem seleciona todos.
EnginesEngines de localização cujas traduções são avaliadas. Qualquer engine inclui engines adicionados depois.
AmostraTodos os eventos, ou 50, 25, 20, 10, 5 ou 1% dos eventos selecionados pelos demais critérios.

Selecione Salvar alterações para aplicá-las. A seleção de idiomas segue a hierarquia de idiomas, conforme descrito em seleção de eventos: fr também seleciona fr-CA, enquanto fr-CA não seleciona fr-FR. Uma solicitação registrada sem um engine de localização não atende a uma condição restrita a engines.

A amostragem seleciona uma fração das solicitações que atendem aos critérios, sem garantir uma quantidade exata em um lote pequeno. Uma solicitação fora da seleção de amostra, idioma ou engine ainda recebe uma resposta N/A cuja justificativa começa com “Condição não atendida”; ela não é cobrada. Nos relatórios, diferencie a população elegível das solicitações selecionadas. Uma solicitação omitida intencionalmente pela amostragem não representa uma falha de avaliação, mas sua ausência ainda importa ao explicar que parcela da população recebeu uma resposta conclusiva.

Saiba quais orientações uma verificação consulta #

As medições de conformidade com o glossário e de conformidade com regras consultam os termos do glossário e as regras vigentes do engine no momento da execução. Quando o evento identifica um engine, o MQM acrescenta a voz da marca, as regras e os termos correspondentes vigentes desse engine. Nenhuma dessas medições reconstitui o estado das orientações registradas com a solicitação. Por isso, alterar um termo após a geração muda o que uma avaliação histórica posterior examina.

A ausência de um apontamento não comprova quais orientações foram usadas durante a geração. Examine o lote de origem e as tentativas do modelo em Solicitações e compare o contexto enviado e a configuração do engine com Recuperação de contexto.

Leia uma resposta assíncrona #

A medição entra na fila após a conclusão da localização. A entrada na fila e a avaliação ocorrem separadamente da tradução, então pode haver um resultado bem-sucedido sem uma resposta.

Radar → Registros → Medições lista as respostas. Filtre por Medição e Valor e abra uma resposta para ver seu valor, justificativa, sugestão e solicitação ao avaliador. Relacione o evento que originou a resposta ao trabalho e ao idioma que você está investigando. Resultados diferencia respostas conclusivas, N/A e ausência de execução.

Uma reprovação ou pontuação baixa em uma medição personalizada da tradução de um engine também pode servir de evidência para sugestões de engine de localização. A resposta em si não altera a tradução.

Uma avaliação assíncrona não bloqueia o fluxo de tradução nem aprova o resultado para publicação. A pós-edição opcional e as decisões humanas são configuradas separadamente em Fluxo de processamento, Política de revisão e Inbox.

Interrompa as avaliações ou remova a medição #

Desative o botão do engine, remova o engine da condição ou desative a medição para interromper avaliações futuras. Os trabalhos que já estão na fila ainda podem ser concluídos.

Excluir uma medição personalizada remove sua definição e suas condições. As respostas registradas permanecem e são exibidas como Medição desconhecida. Antes de excluir a medição, guarde sua definição junto de qualquer investigação que dependa dela.

Se uma resposta estiver ausente, examine a solicitação original, seu evento, os engines, os idiomas e a amostra da medição, além da justificativa de N/A, antes de tentar outra tradução. Para avaliar traduções geradas antes da ativação de uma medição, use a avaliação histórica. A reprodução cria um novo trabalho e pode selecionar outro modelo ou outras orientações; por si só, ela não recupera a tentativa original exata.