품질 지적 사항 검증
문제가 있다고 표시된 번역에 실제 문제가 있는지 확인하고, 의견 차이를 설명하며, 수용된 진단을 적절한 수정 조치로 연결합니다.
지적 사항은 검토자가 같은 문구를 살펴보고 왜 문제로 표시되었는지 이해할 수 있어야 유용합니다. 검증은 평가자의 주장을 원문, 번역문, 요구 사항과 대조하고, 근거가 어떤 판단을 뒷받침하는지 확인하는 과정입니다. 그 결과에 따라 번역을 수정하거나, 원문을 더 명확하게 다듬거나, 측정 방식을 개선할 수 있습니다.
이 가이드는 검사에서 이미 보고된 지적 사항을 검증할 때 활용하세요. 측정 설계에서는 기준 자체를, 피드백 트리아지에서는 진단이 수용된 이후의 수정 조치를 다룹니다.
비교 대상 재구성 #
결과를 열어 확인할 수 있는 답변, 판단 근거, 요청 또는 이벤트 식별 정보를 보관하세요. 실제 평가된 번역문과 그에 대응하는 원문 버전도 함께 확보하세요. 조사에 필요한 근거 중 사용이 허가된 것만 활용하세요. 결과를 열람할 수 있다고 해서 전체 버전 기록이나 내보내기 기능까지 제공되는 것은 아닙니다.
해당 기준을 적용할 수 있는지 확인하세요. 탐색 메뉴 레이블에는 유지해야 할 배송 약속이 없습니다. 대응하는 원문이 없는 배송 안내 문장도 약속 유지 여부를 평가할 대상은 되지만, 확보된 근거만으로는 아직 결론을 내릴 수 없습니다. 근거가 누락된 경우, 기준의 적용 여부가 불명확한 경우, 평가를 완료했으나 판정 불가로 결론 난 경우를 구분하세요.
원문 변경 전에 작성된 번역문이라면, 당시 원문을 기준으로 잘못된 번역이 아니라 변경 사항을 반영하지 못한 번역일 수 있습니다. 평가에 사용된 버전을 확인할 수 없다면, 이전 답변을 최신 텍스트에 비추어 판단하지 말고 지적 사항을 미해결 상태로 남겨 두세요.
의미가 달라졌다는 주장 검증 #
예시 원문이 주문하신 상품은 영업일 기준 5일 이내에 도착합니다라고 가정해 보세요. 영업일 기준 5일 이내에 도착할 수 있습니다라는 의미의 번역문은 약속의 강도를 낮춥니다. 근무일 기준 5일 이내에 도착합니다라는 의미의 번역문은 로캘과 업무 정책에 따라 같은 약속을 유지할 수도 있습니다.
기한, 단서 조건, 확실성의 정도를 함께 살펴보세요. 숫자가 일치하는 것만으로는 충분하지 않지만, 표현이 다르다는 사실만으로 오류가 되는 것도 아닙니다. 검토자에게 원문과 번역문의 해당 구절을 짚고, 의도된 의미를 설명하며, 번역문이 어디에서 그 의미를 유지하거나 바꾸는지 제시하도록 요청하세요.
팀의 판정 기록에는 결과를 다음과 같이 명확하게 구분해 남기세요.
| 결과 | 근거 및 다음 조치 |
|---|---|
| 번역 결함 확인 | 달라진 의미나 위반한 요구 사항을 파악한 뒤 수정안을 제안하세요. |
| 오탐 | 해당 기준에 비추어 번역문을 허용할 수 있는 이유를 설명하고, 평가자 개선에 활용할 수 있도록 사례를 보관하세요. |
| 원문 문제 | 모호하거나 모순되는 부분을 파악하고 원문 담당자에게 해결을 요청하세요. |
| 미해결 | 통과나 결함으로 분류하지 말고, 누락된 근거나 의견이 갈리는 부분을 명시하세요. |
이는 검증 과정을 기록하기 위한 분류명이지, 제품에서 제공한다고 보장하는 상태값은 아닙니다. 평가자의 설명이 아무리 확신에 차 있더라도 검토가 필요한 주장이라는 점은 달라지지 않습니다.
의견 차이의 성격에 맞게 해결 #
제품 지식과 언어 지식은 질문의 서로 다른 부분에 답합니다. “영업일”에서 현지 공휴일이 제외되는지를 두고 검토자들의 의견이 갈린다면, 정책 담당자와 제품 정책을 명확히 하세요. 정책에는 동의하지만 번역문 표현에 대한 의견이 다르다면, 해당 표현을 판단하는 데 필요한 언어적 근거를 확보하세요.
판단 근거와 결정 책임자를 기록하세요. 서로 모순되는 범주형 판정값을 평균 낸다고 결함이 검증되지는 않습니다. 두 검토자가 모두 해당 언어를 잘 이해하더라도, 미해결 사례를 통해 요구 사항이 불명확하다는 사실이 드러날 수 있습니다.
해결된 사례를 활용해 기준을 개선한 다음, 지침 작성에 사용하지 않은 별도의 사례 집합으로 변경 사항을 시험하세요. 이후 결과를 실제로 평가에 사용된 질문에 비추어 해석할 수 있도록 이전 기준 버전도 보관하세요.
지적 사항 묶음 검증 #
관련 언어, 콘텐츠 유형, 겉으로 드러나는 심각도를 두루 고려해 사례를 선정하세요. 결함일 가능성이 높은 사례, 오탐일 가능성이 높은 사례, 모호한 사례를 포함하고 선정 방법을 기록하세요. 의도적으로 선정한 사례는 전체 콘텐츠에서의 발생 비율을 추정하지 않고도 실패 양상을 드러낼 수 있습니다.
문제가 있다고 표시된 번역의 표본을 통해 선정된 지적 사항이 얼마나 자주 타당한지 확인할 수 있습니다. 하지만 평가자가 표시하지 못한 오류 전체를 파악할 수는 없습니다. 놓친 오류를 살펴보려면 문제가 있다고 표시되지 않은 번역이나 독립적으로 판정한 사례에서 별도로 정의한 표본을 검사하세요. 분석할 때는 이 모집단들을 구분하세요.
예를 들어 지적 사항 20건으로 구성된 표본에서 12건은 결함으로 확인되고, 5건은 오탐이며, 3건은 미해결로 남았다고 가정해 보겠습니다. 판정이 완료된 지적 사항 17건 중 결함으로 확인된 비율은 12/17이고, 전체 표본 중 판정이 완료된 비율은 17/20입니다. 두 비율과 미해결 건수를 모두 보고하세요. 이 수치는 선정된 지적 사항 표본을 설명할 뿐, 전체 번역의 결함률이나 평가자의 재현율을 나타내지는 않습니다.
더 넓은 범위의 품질 통과율도 필요하다면 측정 설계에 정의된 평가 대상 모집단, 판정이 확정된 항목으로 구성된 분모, 평가 범위를 사용하세요. 이 계산은 지적 사항이 실제 결함으로 확인되는 빈도와는 다른 질문에 답합니다.
진단을 수정 조치로 연결 #
확인된 번역문 결함은 승인된 텍스트를 관리하는 곳에서 수정하세요. 원문의 모호한 부분은 원문 담당자에게 전달하세요. 허용 가능한 문장에 반복해서 문제를 제기하는 평가자는 개선하세요. 전달이나 표시 문제는 텍스트를 불러오는 시스템에서 조사하세요.
개별 수정과 공통 지침은 영향을 미치는 범위가 다릅니다. 지적 사항을 용어집 항목, 규칙, 어조 변경으로 반영하기 전에 해당 지침의 적용 범위와 기존 요구 사항과의 충돌 여부를 살펴보세요. 그런 다음 피드백 트리아지를 통해 권한 범위 내에서 수정 조치를 제안하고 수정된 버전을 다시 검사하세요.