Meça as traduções no seu fluxo de processamento
Adicione medições repetíveis a um workflow de tradução existente, sem perder a identificação das revisões, das respostas e do trabalho por concluir.
Num workflow de tradução existente, já se sabe de onde vem o conteúdo e onde deve ficar o texto aceite. Adicione a medição num ponto em que seja possível preservar as versões de origem e de destino e associe depois cada resposta a esse registo. Assim, a equipa pode analisar a qualidade sem mudar o sistema que produz ou mantém as traduções.
Este guia acompanha uma medição recorrente, desde a recolha até à recuperação e à apresentação de relatórios. Comece por definir um critério, como a preservação das condições nas afirmações sobre produtos. Conceber uma medição da qualidade da tradução explica como redigir e calibrar esse critério.
Ligue a verificação a uma entrada de dados real #
Escolha a via de execução antes de criar a automatização à sua volta:
| Trabalho existente | Via de medição |
|---|---|
| Sugestões e traduções do Crowdin | Ligue o Crowdin, ative uma medição de eventos e consulte a atividade recolhida e os resultados no Radar. |
| Ficheiros de tradução locais | Execute lingo score com um avaliador e uma configuração de modelo; guarde o ficheiro local de resultados. |
| Pedidos de tradução do Lingo.dev | Execute uma medição das respetivas localizações concluídas e consulte as respostas no Radar. |
A origem dos eventos recolhidos pelo Radar determina os dados recebidos. O Radar não disponibiliza um ponto de acesso genérico para carregar quaisquer traduções ou pontuações. Se criou o seu próprio fluxo de processamento e não dispõe de uma via de entrada suportada, preserve o registo de revisões descrito abaixo e estabeleça o mecanismo de transporte antes de automatizar o envio. Um critério personalizado, por si só, não cria esse mecanismo.
Recolher traduções explica estes limites. O método de medição continua a ser útil, seja qual for o sistema que mantém o texto aceite; a avaliação local e o histórico de eventos produzem apenas registos diferentes que é necessário conciliar.
Mantenha juntas as versões de origem e de destino #
Escolha uma identificação do conteúdo que se mantenha após as edições e registe as revisões específicas de origem e de destino que foram avaliadas. Um ID de mensagem, por si só, não permite distinguir uma resposta sobre o texto de ontem de uma resposta sobre a correção de hoje.
Um registo gerido pelo cliente pode, por exemplo, conter:
{
"contentId": "checkout.delivery",
"sourceRevision": "source-17",
"targetRevision": "fr-12",
"targetLocale": "fr",
"criterionVersion": "delivery-promise-3",
"sourceText": "Your order will arrive within five business days.",
"targetTextLocation": "accepted catalog at revision fr-12"
}Este é um exemplo de acompanhamento, não um esquema de pedido do Lingo.dev. Guarde o próprio texto de destino ou uma referência imutável a que o avaliador tenha acesso. Uma ligação para a versão «mais recente» pode mudar durante a avaliação. Guarde no registo a hora da ocorrência, quem produziu o texto, quando conhecido, e a localização do texto aceite.
Adicione elementos de prova em função da questão. Verificar a preservação do significado exige os textos de origem e de destino emparelhados; analisar a atividade de edição exige o rascunho efetivo; verificar a terminologia pode exigir uma definição e um contexto de utilização. Uma verificação ortográfica pode precisar apenas do texto de destino. A falta de elementos de prova para uma mensagem elegível continua a ser uma lacuna na avaliação, não um motivo para considerar que a mensagem cumpre o critério ou é irrelevante.
Conclua um ciclo da recolha à resposta #
No caso do Crowdin, siga as instruções de ligação e configure a medição de eventos, o respetivo gatilho e os idiomas de destino. No caso das traduções do Lingo.dev, verifique os motores da medição, os idiomas de origem e de destino e a amostra. Guarde essas definições antes de gerar a atividade ou o pedido de teste.
Localize o evento ou pedido resultante e compare o respetivo texto com o registo preservado. Em seguida, verifique a resposta à luz do critério. A receção de um evento, a seleção para avaliação e a conclusão de uma resposta são etapas distintas. Uma nova definição de seleção não avalia retroativamente os eventos antigos; utilize a avaliação histórica quando esse for o objetivo.
Mantenha um registo de conciliação simples no workflow: revisão selecionada, identificação do evento ou pedido recebido, identificação da medição, resposta concluída e eventuais lacunas por resolver. Eventos e Resultados explicam os campos efetivamente disponíveis. Já a avaliação local exige que os ficheiros de origem, a configuração e o ficheiro de saída sejam preservados em conjunto.
Trate as repetições e as correções de forma diferente #
Uma nova tentativa volta a entregar a mesma revisão. Uma correção cria uma nova revisão de destino, mesmo que o ID do conteúdo se mantenha. Registe essa distinção antes de aplicar o mecanismo de desduplicação da própria origem.
Por exemplo, a correção de um prazo deve dar origem a uma nova revisão de destino e a uma nova comparação com o texto de origem aplicável. Guarde o texto e a resposta anteriores se precisar de mostrar o que melhorou. Se o compromisso expresso no texto de origem também tiver mudado, preserve a nova revisão desse texto; comparar o novo texto de destino com o texto de origem antigo pode dar a impressão de que existe um erro.
As entregas dos fornecedores não têm todas a mesma garantia ilimitada de idempotência. As ações de revisão repetidas no Crowdin podem ter identificações de evento distintas, enquanto outras atividades usam os seus próprios dados de ocorrência. Concilie os comprovativos de receção e os resultados disponíveis antes de repetir trabalho cujo resultado seja incerto.
Retome a partir da última etapa confirmada #
| O que consegue confirmar | O que investigar a seguir |
|---|---|
| A revisão existe na origem, mas não se encontra nenhum evento | Verifique a ligação, o tipo de atividade suportado, o intervalo de tempo e os elementos de prova da recolha. |
| O evento existe, mas não se encontra nenhuma resposta | Verifique as condições de medição ativas, os idiomas, os dados necessários e o processamento assíncrono. |
| O avaliador terminou com uma resposta inconclusiva | Leia a explicação e forneça os elementos de prova em falta ou resolva a ambiguidade. |
| O critério não se aplica efetivamente | Guarde essa decisão e exclua o item do denominador de qualidade deste critério. |
| A execução falhou | Identifique a falha antes de voltar a executar o trabalho afetado pela via suportada. |
A ausência, por si só, não permite distinguir entre espera, falha, dados de entrada perdidos ou trabalho não solicitado. Mantenha essa incerteza até haver elementos de prova que a esclareçam. Repetir a geração não é uma forma fiável de resolver a falta de uma avaliação assíncrona.
Se recorrer à avaliação histórica para recuperar o trabalho, mantenha a opção Apenas eventos ainda não medidos ativada para preencher lacunas sem alterar as respostas existentes. Voltar a medir o período substitui as respostas anteriores dessa medição em todo o intervalo selecionado, por isso preserve-as primeiro. Confirme os eventos esperados e as respostas devolvidas, em vez de tratar a resposta de início como confirmação de conclusão.
Apresente as respostas e o trabalho sem resposta #
Considere, por exemplo, um lote de 50 revisões elegíveis. As avaliações foram concluídas para 45 e produziram respostas conclusivas para 40. Destas, 36 preservaram o requisito e 4 não o cumpriram.
A cobertura de conclusão é de 45/50, ou 90%. A cobertura de respostas conclusivas é de 40/50, ou 80%. A taxa de aprovação entre as respostas conclusivas é de 36/40, ou 90%. As cinco respostas concluídas mas inconclusivas e as cinco revisões sem avaliações concluídas mantêm-se separadas.
Apresente as mesmas contagens por idioma ou classe de conteúdo quando o trabalho em falta estiver distribuído de forma desigual. Mantenha visíveis os casos de aplicabilidade desconhecida até serem resolvidos. Uma taxa de aprovação elevada nos registos com resposta nada diz sobre os registos em falta.
Mantenha o critério junto do resultado #
Preserve o enunciado do critério, os requisitos de prova, as definições das respostas e a configuração do avaliador juntamente com as revisões do conteúdo. Teste as definições alteradas com exemplos conhecidos antes de combinar as respetivas respostas numa tendência. Uma alteração ao critério pode mudar as pontuações sem que as traduções mudem.
Quando uma conclusão for confirmada, corrija o texto no sistema que o gere e avalie a nova revisão. Validar as conclusões sobre a qualidade ajuda a estabelecer esse diagnóstico. A medição fornece elementos de prova para a decisão; a gravação das alterações no sistema de origem e a publicação continuam a ser ações explícitas no workflow existente.