Отчёты помогают понять, как работают ваши движки локализации: какой у вас объём переводов, как расходуются токены, насколько широк охват локалей, насколько наполнен глоссарий, как часто меняется кодовая база и каковы метрики качества от AI-оценщика. Все отчёты строятся в рамках вашей организации и автоматически обновляются по мере того, как запросы проходят через движок.
Доступные отчёты#
| Отчёт | Что измеряет |
|---|---|
| Объём слов | Сколько слов переводится в день |
| Расход токенов | Сколько входных и выходных токенов используется в день |
| Топ локалей | Какие локали потребляют больше всего ресурсов |
| Наполненность глоссария | Сколько терминов глоссария есть для каждой локали |
| Частота изменений | Изменения в файлах локализации в GitHub по локалям |
| Средние оценки | Средние ежедневные оценки переводов от AI-оценщиков |
| Покрытие терминологии | Насколько последовательно термины глоссария используются в переводах |
| Соблюдение инструкций | Насколько последовательно в переводах соблюдаются пользовательские инструкции |
Объём слов#
Показывает общее количество слов, обработанных движком локализации, с агрегацией по дням. Используйте этот отчёт, чтобы отслеживать динамику объёма переводов и планировать нагрузку.
Фильтры: движок, период (месяц), исходная локаль, целевая локаль
На графике показан один столбец на каждый день выбранного месяца. Если в какой-то день переводов не было, отображается ноль.
Расход токенов#
Отслеживает использование токенов LLM с разбивкой на входные и выходные, с агрегацией по дням. Расход токенов напрямую влияет на стоимость — этот отчёт помогает находить резкие всплески затрат и сравнивать эффективность между движками и парами локалей.
Фильтры: движок, период (месяц), исходная локаль, целевая локаль
Входные и выходные токены
Во входные токены входят системный промпт, глоссарий, тональность бренда, инструкции и исходный текст. Выходные токены — это результат перевода. Высокое соотношение входных токенов к выходным может указывать на то, что контекст движка (глоссарий, инструкции) слишком велик по сравнению с объёмом переводимого контента.
Топ локалей#
Ранжирует локали по потреблению ресурсов, чтобы вы могли понять, какие языки дают наибольший объём переводов и затрат. Рейтинг можно смотреть по исходной или целевой локали, а в качестве метрики использовать входные токены, выходные токены или количество слов.
Фильтры: движок, период (месяц), тип локали (исходная или целевая), метрика (входные токены, выходные токены или количество слов)
Этот отчёт отвечает на вопросы вроде: "Какая целевая локаль потребляет больше всего токенов?" или "Какой исходный язык даёт больше всего слов?"
Наполненность глоссария#
Показывает, сколько элементов глоссария есть для каждой локали во всех ваших движках. В отличие от других отчётов, это не временной ряд, а текущий срез, который отражает текущее состояние конфигурации глоссария.
Фильтры: движок, тип локали (исходная или целевая)
Используйте этот отчёт, чтобы находить пробелы: если ваш движок переводит на 12 локалей, но записи в глоссарии есть только для 3, остальные локали полностью полагаются на решение модели в вопросах терминологии.
Частота изменений#
Отслеживает частоту изменений в файлах локализации в подключённых GitHub-репозиториях с разбивкой по локалям и дням. Для этого отчёта нужна активная интеграция с GitHub — если она ещё не настроена, вам будет предложено подключить GitHub.
Фильтры: период (месяц), репозиторий, локаль
Отчёт по частоте изменений помогает ответить на вопросы: "Насколько активно обновляется каждая локаль?" и "Какие репозитории дают больше всего изменений в локализации?"
Поддержка часовых поясов
Группировка по датам учитывает часовой пояс, настроенный для вашей организации. Коммит в 23:30 UTC отображается с правильной локальной датой, а не переносится на следующий день.
Средние оценки#
Показывает на графике средние ежедневные оценки переводов от ваших AI-оценщиков в процентах. Используйте этот отчёт, чтобы отслеживать динамику качества и замечать регрессии после изменений движка, модели или глоссария.
Фильтры: движок, период (месяц), представление (агрегированное или с разбивкой)
Если выбран один движок, каждая линия соответствует одному оценщику, подключённому к этому движку. При просмотре по всем движкам выберите Aggregated, чтобы увидеть одну линию со средним значением по всем оценщикам во всех движках, или Breakdown, чтобы сравнить оценщиков между собой.
Требуются AI-оценщики
Данные в этом отчёте появятся только после того, как будет настроен хотя бы один AI-оценщик и он начнёт оценивать переводы.
Покрытие терминологии#
Показывает, насколько последовательно термины глоссария корректно применяются в переводах каждый день. Линия отражает ежедневный процент покрытия (правильно применённые термины ÷ общее число релевантных терминов), а столбцы — абсолютное количество применённых терминов. При наведении отображается соотношение применённых и общих значений, а также число проверок, лежащих в основе каждой точки данных.
Фильтры: движок, период (месяц)
Если число применённых терминов растёт, а покрытие падает, это сигнализирует, что по мере увеличения объёма термины глоссария всё чаще пропускаются или переводятся неверно. Это полезный ранний сигнал о том, что глоссарию или инструкциям движка нужно внимание.
Соблюдение инструкций#
Показывает, насколько последовательно пользовательские инструкции движка соблюдаются в переводах каждый день. Процент рассчитывается только по тем проверкам, где инструкции действительно были релевантны — всплывающие подсказки показывают followed / relevant, чтобы вы видели и показатель, и размер выборки.
Фильтры: движок, период (месяц)
Используйте этот отчёт, чтобы убедиться, что недавно добавленные инструкции действительно меняют поведение, и вовремя замечать регрессии, когда движок начинает игнорировать правила после смены модели или изменения промпта.
Фильтры и периоды#
Все отчёты, завязанные на времени, работают с месячными периодами. По умолчанию выбран текущий месяц. Фильтры сохраняются в URL, поэтому отфильтрованными представлениями можно делиться и сохранять их в закладки.
Общие фильтры в разных отчётах:
| Фильтр | Доступно в | Описание |
|---|---|---|
| Движок | Объём слов, Расход токенов, Топ локалей, Наполненность глоссария, Средние оценки, Покрытие терминологии, Соблюдение инструкций | Показать данные по конкретному движку или по всем сразу |
| Период | Объём слов, Расход токенов, Топ локалей, Частота изменений, Средние оценки, Покрытие терминологии, Соблюдение инструкций | Выбрать месяц (YYYY-MM) |
| Исходная локаль | Объём слов, Расход токенов | Фильтр по исходному языку |
| Целевая локаль | Объём слов, Расход токенов | Фильтр по целевому языку |
| Репозиторий | Частота изменений | Фильтр по GitHub-репозиторию |
| Представление | Средние оценки | Одна агрегированная линия или разбивка по оценщикам |
Качество и объём#
Отчёты делятся на два взаимодополняющих блока: объём и стоимость (Объём слов, Расход токенов, Топ локалей, Наполненность глоссария, Частота изменений) и качество (Средние оценки, Покрытие терминологии, Соблюдение инструкций). Для отчётов о качестве нужен как минимум один настроенный AI-оценщик.
