측정

수집되거나 생성된 번역 이벤트에 적용할 검사를 선택하고, 각 검사의 실행 대상 이벤트를 설정하세요.

측정은 선택한 번역 활동이 발생하면 실행되는 사전 정의된 검사입니다. 예를 들어 Crowdin이나 저장소에서 번역이 변경되면 수정 전후 비교를 실행하고, Lingo.dev 로컬라이제이션이 완료되면 용어 검사를 실행할 수 있습니다. 이벤트가 근거를 제공한다면, 측정은 확인할 질문을 제시합니다.

동일한 리소스로 다른 시스템에서 수집한 번역과 로컬라이제이션 엔진이 생성한 번역을 모두 다룹니다. Lingo.dev 출력 평가는 로컬라이제이션이 완료되면 실행되는 측정입니다. 자세한 사용 방법은 Lingo.dev 번역 평가에서 설명합니다.

레이더 → 측정에서 기본 제공 검사를 선택하거나 조직 소유의 사용자 지정 정의를 만드세요. 페이지를 열면 기본 제공 탭이 표시되며, 내 측정에는 조직에서 작성한 측정이 모여 있습니다. 각 목록에서 측정의 실행 대상 이벤트 유형, 값 유형, 언어, 측정한 이벤트 수, 활성화 여부를 확인할 수 있습니다. 현재 API를 통해 정의와 조건을 조회하거나 변경하고 과거 데이터 평가를 시작하려면 조직 구성원이어야 합니다. 보고서 이용 권한은 보고서에 적용되며, 측정에는 적용되지 않습니다.

기본 제공 검사 켜기 #

기본 제공 측정을 열고 언어, 원본 언어, 로컬라이제이션 엔진, 표본을 설정해 검사할 이벤트를 선택하세요. 활성화를 켜고 변경 사항 저장을 선택하세요. 페이지에서 해당 측정의 실행 대상 이벤트 유형을 확인할 수 있습니다. 허용되는 이벤트 유형과 검사 구현 방식은 Lingo.dev에서 정하고, 실행 여부와 선택할 이벤트는 조직에서 제어합니다.

용어집 준수도와 규칙 준수도는 로컬라이제이션 엔진의 평가자 탭에 있는 자동 평가에서도 엔진별로 동일하게 설정할 수 있습니다.

확인하려는 질문에 맞춰 선택하세요.

질문측정
정의된 범주와 심각도별 평가 기준으로 어떤 오류를 발견하나요?MQM
번역문이 기록된 초안과 달라졌나요?수정률
텍스트가 얼마나 바뀌었나요?편집 거리
번역에 관련 용어가 적용되었나요?용어집 준수도
적용 대상 지침을 따랐나요?규칙 준수도
어떤 유형의 수정이 이루어졌나요?수정 패턴. 결과 접근에는 기본 제공 레퍼런스에 설명된 제한이 적용됩니다.

기본 제공 레퍼런스에서 각 알고리즘의 입력, 척도, 해석 방법을 확인할 수 있습니다. 수정률의 응답이 참이면 텍스트가 변경되었다는 뜻이지, 전반적인 품질 검사를 통과했다는 의미는 아닙니다.

콘텐츠별 요구 사항 추가 #

제품 관련 주장에 붙은 조건이 유지되는지 확인하는 경우처럼 질문이 콘텐츠에 따라 달라진다면 사용자 지정 측정을 만드세요. 프롬프트, 이름, 값 유형, 트리거, 언어를 지정하세요. 생성 양식에서 정의를 저장하면 선택한 이벤트 조건이 활성화됩니다.

근거를 직접 확인할 수 있는 활동부터 시작하세요. 첫 이벤트가 들어오면 응답을 열고 판단 근거를 원문 및 번역문과 비교하세요. 더 큰 데이터 집합에 적용하기 전에 알려진 오류뿐 아니라 허용 가능한 바꿔 쓰기 표현도 시험하세요. 유효한 정의를 저장했다는 것은 검사 설정이 완료되었다는 뜻입니다. 검사가 의도한 질문에 작업에 필요한 수준으로 신뢰할 만한 답을 내놓는지는 보정을 통해 확인해야 합니다.

이벤트 선택 범위 #

사용자 지정 측정에는 실행 대상 이벤트 유형마다 별도의 조건이 있습니다. 실행 대상 아래의 이벤트 선택으로 조건을 추가하세요. 기본 제공 측정의 실행 대상에는 허용된 이벤트 유형이 표시되며, 이 유형은 변경할 수 없습니다. 모든 유형에는 하나의 공통 설정이 적용됩니다. 연결된 연동 서비스에서도 Lingo.dev 자체에서도 실행 대상 이벤트 유형을 보내지 않는 경우, 일반 탭의 실행 대상에 해당 상태가 표시됩니다. 해당 이벤트를 보낼 수 있는 연동 서비스 이름과 설정 → 연동 링크도 함께 표시됩니다. 이벤트 종류에는 원문과 번역문의 생성, 업데이트, 삭제, 제안의 생성, 업데이트, 삭제, 승인, 거절, 로컬라이제이션의 시작과 완료가 포함됩니다.

각 조건이나 기본 제공 설정은 해당 유형에서 선택할 이벤트의 범위를 좁힙니다.

선택 기준범위를 좁히는 기준
언어이벤트의 대상 로캘입니다. 모든 언어를 선택하면 모든 대상 로캘이 포함됩니다.
원본 언어이벤트의 원본 로캘입니다. 모든 원본 언어를 선택하면 모든 원본 로캘이 포함됩니다.
엔진번역을 생성한 로컬라이제이션 엔진입니다. 모든 엔진에는 나중에 추가되는 엔진도 포함됩니다.
표본다른 선택 기준을 통과한 이벤트 중 모든 이벤트를 선택하거나, 50%부터 1%까지의 비율을 지정합니다.

로캘은 텍스트의 정확한 일치 여부가 아니라 로캘 계층 구조에 따라 선택됩니다. fr 항목이 포함된 목록은 fr 및 fr-CA 항목을 선택합니다. fr-CA 선택 시에는 지역 구분 없이 fr 항목으로만 표시된 이벤트도 선택됩니다. fr-CA 선택 시에는 fr-FR 항목이 선택되지 않습니다. API에서는 목록이 비어 있거나 없으면 제한을 두지 않으며, * 값은 모든 로캘과 일치합니다.

엔진과 원본 언어로 이벤트를 선택하려면 이벤트에 해당 필드가 있어야 합니다. Lingo.dev 로컬라이제이션 이벤트에는 엔진과 원본 및 대상 로캘이 모두 명시됩니다. Crowdin, GitHub, Zendesk 이벤트에는 로캘은 있지만 엔진 정보는 없으므로, 엔진으로 범위를 제한한 조건은 이러한 이벤트를 선택하지 않습니다. 표본 포함 여부는 매번 새로 추출하는 것이 아니라 이벤트와 측정별로 결정됩니다. 따라서 같은 이벤트를 다시 평가해도 해당 측정의 표본에 포함되는지 여부는 달라지지 않습니다.

선택한 유형의 이벤트가 선택 기준을 충족하지 못해도 응답은 생성됩니다. 응답은 해당 없음으로 표시되며, 판단 근거는 “조건 미충족”으로 시작하고 충족하지 못한 선택 기준을 명시합니다. 이 응답에는 요금이 부과되지 않으며, 소급 적용 탭에서는 측정된 것으로 집계됩니다. 전체 모집단에는 반영하되, 평가 기준의 품질 계산에 사용하는 분모에서는 제외하세요.

선택 여부와 근거는 별개입니다. 시작 이벤트는 설정된 유형과 일치해도 완료된 번역문이 없을 수 있습니다. 용어집 검사는 해당 로캘을 선택하고도 적용할 용어를 찾지 못할 수 있습니다. 응답이 없거나 해당 없음으로 표시되면 조건과 페이로드를 모두 확인하세요.

향후 검사 변경과 이전 결과의 의미 보존 #

사용자 지정 정의의 일반 탭에서 이름, 프롬프트, 값 유형, 해당 없음 허용, 이벤트 조건을 수정한 다음 변경 사항 저장을 선택하세요. 평가 기준을 바꾸기 전에 비교에 필요한 결과와 함께 이전 정의를 보관하세요. 번역이 전혀 바뀌지 않아도 질문이 달라지면 추세가 달라질 수 있습니다.

활성화는 측정의 모든 조건을 한꺼번에 켜거나 끄며, 변경 사항은 저장하면 적용됩니다. API에서는 각 사용자 지정 조건에 개별 활성화 플래그도 있습니다. 측정을 끄면 이후 이벤트는 선택되지 않지만, 이미 큐에 들어간 작업은 완료될 수 있습니다. 사용자 지정 정의를 삭제하면 해당 정의와 조건이 제거됩니다. 기존 응답은 유지되며, 연결할 정의가 없는 알 수 없는 측정으로 표시됩니다. 기본 제공 측정은 사용자 지정 정의처럼 수정하거나 삭제할 수 없습니다.

이미 수집된 활동에는 측정의 소급 적용 탭에서 과거 데이터 평가를 사용하세요. 아직 응답이 없는 이벤트만 측정하거나 선택한 기간의 응답을 대체할 수 있습니다.

측정은 비동기적으로 실행됩니다. 응답은 점검에 참고할 정보를 제공할 뿐, 번역을 수정하거나 게시를 차단하지 않습니다. 번역 단계와 수락 여부는 Studio에서 별도로 설정하세요.