Аналитика оптимизации

После запуска оптимизации система начинает сбор данных и автоматически оценивать конфигурации. Чтобы перейти к аналитике, откройте страницу вашего проекта и выберите нужную оптимизацию из списка — вы попадете на её дашборд.

Обзор эксперимента

Главный экран оптимизации дает быстрый ответ на вопрос: что происходит прямо сейчас и какой результат уже достигнут.

Заголовок дашборда

Ключевая информация отображается в верхней части страницы:

Элемент	Описание
Status	Текущее состояние оптимизации (`Running`, `Paused`, `Completed`).
Target Metric	Название метрики, которую оптимизирует система (например, `Ad Revenue per User`).
Best result	Лучшее значение целевой метрики, достигнутое на данный момент среди всех конфигураций. Рядом для сравнения приводится baseline-значение — результат вашей текущей production-версии.
Participants	Количество уникальных пользователей, участвующих в оптимизации. Чем больше участников, тем выше статистическая значимость результатов.

Прогресс оптимизации

Полоса прогресса показывает, на каком этапе находится оптимизация. Основные отметки:

Min — минимальный объем данных для первых предварительных выводов. До этой точки результаты могут существенно меняться.
Good — рекомендуемый объем данных для надежных выводов. После достижения этой отметки результаты стабилизируются.
Done — оптимизация завершена и собран полный объем данных. Результаты максимально надежны.

Топ-3 оптимальных конфигурации

Hyperstone автоматически определяет три лучшие комбинации параметров на основе накопленных данных и отображает их в виде карточек.

Каждая карточка содержит:

Значение целевой метрики — результат данной конфигурации (например, $0.014).
Список значений параметров — конкретные значения каждого параметра в этой конфигурации.
Metrics Impact — таблицу с результатами по всем отслеживаемым метрикам:

Колонка	Описание
Metric	Название метрики.
Progress	Визуальный индикатор изменения относительно baseline (зеленый — рост, красный — падение).
Result	Текущее значение метрики для этой конфигурации.
Baseline	Значение метрики в вашей текущей production-версии (контрольная группа).

Кнопка Apply Parameters — применить значения этой конфигурации к проекту в качестве новых значений параметров по умолчанию.
Бейдж Recommended — система помечает конфигурацию, которую считает лучшей на основе заданной целевой метрики.

Кнопка See Detailed Analysis переводит вас в режим расширенного анализа.

Детальный анализ

Детальный анализ предназначен для глубокого изучения результатов оптимизации. Здесь вы найдете инструменты, чтобы понять, какие параметры на самом деле влияют на метрику и как они взаимодействуют друг с другом.

Таблица конфигураций

Таблица со всеми протестированными конфигурациями и их результатами по каждой метрике. Позволяет напрямую сравнить любые два варианта и отсортировать конфигурации по нужному показателю.

Общее влияние параметров

Сводный рейтинг параметров по степени их влияния на целевую метрику. Показывает, какие параметры оказывают наибольшее воздействие, а какие практически не влияют на результат. Это помогает расставить приоритеты при планировании последующих оптимизаций.

Анализ влияния (Impact Analysis)

Графики, показывающие распределение значений метрики для каждой конфигурации. Каждый график отображает:

Median — центральное значение результата.
Deviation — разброс значений вокруг медианы (доверительный интервал / confidence interval).

Чем уже доверительный интервал и выше медиана, тем надежнее и значимее результат данной конфигурации.

Анализ корреляции

Матрица корреляции между параметрами и метриками. Позволяет понять, есть ли сильная связь между конкретным параметром и изменением метрики. Высокая корреляция означает, что параметр существенно влияет на результат.

Взаимодействие параметров

Анализ взаимодействий между параметрами: как комбинация нескольких параметров влияет на метрику. Иногда два параметра по отдельности не дают эффекта, но вместе значительно меняют результат — этот раздел помогает обнаружить такие зависимости.

Компромисс метрик (Парето-фронт)

График Парето-фронта показывает конфигурации, которые одновременно оптимальны для нескольких метрик. Это особенно полезно, когда нужно найти баланс между двумя конкурирующими показателями — например, между ARPU и Ad Impressions per User (больше рекламы дает больше дохода, но ухудшает пользовательский опыт).

Конфигурации на линии Парето-фронта являются лучшими доступными компромиссами: улучшить одну метрику без ухудшения другой уже невозможно.

Функции оптимизации

В меню оптимизации доступны три дополнительные функции:

Дублировать (Duplicate)

Создает точную копию оптимизации со всеми настройками: параметрами, метриками и конфигурациями.

Печать исследования (Print Study)

Генерирует PDF-отчет с результатами оптимизации: графиками, таблицами и ключевыми выводами. Удобно для обмена результатами с командой или руководством.

Экспорт в CSV

Экспортирует все данные оптимизации в CSV-файл. Используйте эту функцию, если хотите провести собственный анализ в Excel, Google Sheets или любом другом инструменте анализа данных.

Что дальше?

После завершения оптимизации возможны два сценария:

Применить лучшую конфигурацию — нажмите Apply Parameters на карточке рекомендованной конфигурации. Новые значения параметров станут стандартными для всех пользователей.
Запустить следующую оптимизацию — используйте функцию Duplicate и протестируйте новые гипотезы на основе результатов текущего исследования.