Метрика ранжирования Phase-1¶
Для сравнения конфигураций в аблационном исследовании (модуль comparison_metrics.py)
используется взвешенная метрика:
\[
\text{score} = 0.65 \cdot \text{ROC-AUC} + 0.35 \cdot \text{sweep\_bal\_acc}
\]
Обоснование весов¶
| Компонент | Вес | Свойства |
|---|---|---|
| ROC-AUC | 0.65 | Инвариантен к порогу; устойчив при дисбалансе 1:9 |
| sweep_bal_acc | 0.35 | Лучшая калиброванная balanced accuracy по 49 порогам |
Sweep: \(\tau \in \{0.01, 0.03, \ldots, 0.99\}\) — 49 значений на val.
Связь с гибридным пайплайном¶
Та же формула (4.6) используется в Фазе 4 для отбора пар \((G^*_k, \text{gbm}_k)\),
с заменой sweep_bal_acc на bal_acc на val.