Отчёты

Обновлено: на прошлой неделе · 4 мин чтения

Отчёты показывают, как работают ваши движки локализации: объём переводов, охват локалей, глубина глоссария, частота изменений в кодовой базе и метрики качества AI-эвалюатора. Все отчёты привязаны к вашей организации и обновляются автоматически — по мере того как запросы проходят через движок.

Использование токенов и стоимость

Подробные данные по токенам и стоимости — на странице Использование в настройках.

Доступные отчёты#

ОтчётЧто измеряет
Объём словСколько слов переводится в день
Топ локалейКакие локали потребляют больше всего ресурсов
Наполненность глоссарияСколько терминов глоссария есть для каждой локали
Частота измененийИзменения в файлах локализации в GitHub по локалям
Средние оценкиСредние ежедневные оценки переводов от AI-эвалюаторов
Покрытие терминологииНасколько последовательно термины глоссария используются в переводах
Соблюдение правилНасколько стабильно пользовательские правила соблюдаются в переводах

Объём слов#

Показывает общее количество слов, обработанных движком локализации, с агрегацией по дням. Используйте этот отчёт, чтобы отслеживать динамику объёма переводов и планировать нагрузку.

Фильтры: движок, период (месяц), исходная локаль, целевая локаль

На графике показан один столбец на каждый день выбранного месяца. Если в какой-то день переводов не было, отображается ноль.

Топ локалей#

Ранжирует локали по потреблению ресурсов, чтобы вы могли понять, какие языки дают наибольший объём переводов и затрат. Рейтинг можно смотреть по исходной или целевой локали, а в качестве метрики использовать входные токены, выходные токены или количество слов.

Фильтры: движок, период (месяц), тип локали (исходная или целевая), метрика (входные токены, выходные токены или количество слов)

Этот отчёт отвечает на вопросы вроде: "Какая целевая локаль потребляет больше всего токенов?" или "Какой исходный язык даёт больше всего слов?"

Наполненность глоссария#

Показывает, сколько элементов глоссария есть для каждой локали во всех ваших движках. В отличие от других отчётов, это не временной ряд, а текущий срез, который отражает текущее состояние конфигурации глоссария.

Фильтры: движок, тип локали (исходная или целевая)

Используйте этот отчёт, чтобы находить пробелы: если ваш движок переводит на 12 локалей, но записи в глоссарии есть только для 3, остальные локали полностью полагаются на решение модели в вопросах терминологии.

Частота изменений#

Показывает, как часто меняются файлы локализации в подключённых репозиториях GitHub — с разбивкой по локалям и дням. Данные берутся напрямую из репозиториев, поэтому для работы отчёта нужна активная интеграция с GitHub.

Фильтры: период (месяц), репозиторий, локаль

Отчёт по частоте изменений помогает ответить на вопросы: "Насколько активно обновляется каждая локаль?" и "Какие репозитории дают больше всего изменений в локализации?"

Поддержка часовых поясов

Группировка по датам учитывает часовой пояс, настроенный для вашей организации. Коммит в 23:30 UTC отображается с правильной локальной датой, а не переносится на следующий день.

Средние оценки#

Показывает на графике средние ежедневные оценки переводов от ваших AI-эвалюаторов в процентах. Используйте этот отчёт, чтобы отслеживать динамику качества и замечать регрессии после изменений движка, модели или глоссария.

Фильтры: движок, период (месяц), представление (агрегированное или с разбивкой)

Если выбран один движок, каждая линия соответствует одному эвалюатору, подключённому к этому движку. При просмотре по всем движкам выберите Aggregated, чтобы увидеть одну линию со средним значением по всем эвалюаторам во всех движках, или Breakdown, чтобы сравнить эвалюаторов между собой.

Требуются AI-эвалюаторы

Данные в этом отчёте появятся только после того, как будет настроен хотя бы один AI-эвалюатор и он начнёт оценивать переводы.

Покрытие терминологии#

Показывает, насколько последовательно термины глоссария корректно применяются в переводах каждый день. Линия отражает ежедневный процент покрытия (правильно применённые термины ÷ общее число релевантных терминов), а столбцы — абсолютное количество применённых терминов. При наведении отображается соотношение применённых и общих значений, а также число проверок, лежащих в основе каждой точки данных.

Фильтры: движок, период (месяц)

Если количество применённых терминов растёт, а охват при этом падает — значит, термины из глоссария всё чаще пропускаются или переводятся неверно. Это ранний сигнал: глоссарий или правила движка пора пересмотреть.

Соблюдение правил#

Показывает, насколько стабильно движок соблюдает пользовательские правила в переводах каждый день. Процент считается только по тем проверкам, где правила были реально применимы, — в подсказках отображается followed / relevant, так что вы видите и показатель, и размер выборки.

Фильтры: движок, период (месяц)

Используйте этот отчёт, чтобы убедиться: новые правила действительно меняют поведение движка. И чтобы вовремя заметить регрессии — когда после замены модели или правки промпта движок начинает игнорировать правила.

Фильтры и периоды#

Все отчёты, завязанные на времени, работают с месячными периодами. По умолчанию выбран текущий месяц. Фильтры сохраняются в URL, поэтому отфильтрованными представлениями можно делиться и сохранять их в закладки.

Общие фильтры в разных отчётах:

ФильтрДоступно вОписание
ДвижокWord Gen, Top Locales, Glossary Depth, Average Scores, Terminology Coverage, Rule AdherenceПоказать данные по конкретному движку или по всем сразу
ПериодWord Gen, Top Locales, Change Rate, Average Scores, Terminology Coverage, Rule AdherenceВыбрать месяц (YYYY-MM)
Исходная локальWord GenФильтр по исходному языку
Целевая локальWord GenФильтр по целевому языку
РепозиторийЧастота измененийФильтр по GitHub-репозиторию
ПредставлениеСредние оценкиОдна агрегированная линия или разбивка по эвалюаторам

Качество и объём#

Отчёты делятся на два взаимодополняющих блока: объём и стоимость (Word Generations, Top Locales, Glossary Depth, Change Rate) и качество (Average Scores, Terminology Coverage, Rule Adherence). Для отчётов о качестве нужен хотя бы один настроенный AI-эвалюатор.

Что дальше#