Проверяет добавленную ценность против гипотезы «ничего не изменилось». Нужны frozen historical state, target definition и outcome ledger.
Calibration and baselines
Почему PSSR пока не публикует вероятность кризиса
KB фиксирует честный статус: resolved forecast evidence недостаточно. До прохождения baseline comparison PSSR может быть исследовательским сигналом и decision-support, но не калиброванной предсказательной моделью.
Текущий статус
Calibrated probability claims заблокированы
Модель может показывать composite indicator, data-quality note, regime label и review candidate. Она не должна выдавать процентную вероятность кризиса, причинность или автоматическое решение.
Validation evidence4/10из KB benchmark gaps
Baseline protocols
Пять сравнений, без которых нельзя усиливать claims
Отделяет реальный сигнал от сглаживания последних наблюдений. Нужны 30/90/365-day windows и documented missingness.
Проверяет, не объясняется ли результат обычным ростом количества новостей или событий.
Проверяет, не принимает ли модель качество данных за изменение режима. Такой результат разрешает только data-quality note.
Показывает добавленную ценность над независимым human review без model output.
Release gate
Что нужно для следующего уровня доверия
| Доказательство | Минимум для публикации | Пока статус |
|---|---|---|
| Target definition | Заранее зафиксированная целевая переменная и horizon | Требует регистрации |
| Outcome ledger | Неизменяемый журнал forecast/outcome/resolution | Недостаточно resolved rows |
| Baseline comparison | PSSR лучше last-value, moving-average и expert-only на зрелых окнах | Не доказано публично |
| Error analysis | false alarm, missed-event, lead-time и confidence calibration | Следующий research batch |
| Independent review | Внешняя проверка протокола и воспроизводимых samples | Нужен reviewer package |