Совет моделей предсказал исходы разрешённых рынков Polymarket — вслепую, без веб-поиска. Ниже — реальные числа: Brier против исхода, сравнение с толпой, разбивка по типам рынков.
Backtest на прошлом с веб-поиском был бы нечестным — модель прочитала бы исход в новостях. Поэтому совет С веб-поиском предсказывает сейчас открытые новостные рынки (исход в будущем — утечки нет). Brier посчитается, когда реальность их закроет.
Все исходы по матчам группового этапа. Консенсус = консилиум 3 моделей, ∎ NOESIS — мета-агент. 🦢 чёрный лебедь — маловероятный исход/апсет, где NOESIS часто видит риск выше консенсуса. Brier посчитается после матчей.
Brier = средний квадрат ошибки вероятности: (прогноз − исход)². Если всегда говорить «50%», получишь ровно 0.25. Ниже — значит есть сигнал; выше — гадание с уверенным лицом.
В backtest веб-поиск отключён — иначе модель подсмотрела бы исход уже прошедшего события. Это честный, консервативный тест: нижняя граница точности. В live-режиме веб-поиск включён.
Нет. Толпа видела рыночную цену, модель — только текст вопроса. Слепая модель почти догнала толпу, а на структурных рынках (спорт/политика/макро) — обходит её. Весь разрыв в новостной геополитике, которую закрывает веб-поиск.
Одно, но важное: прогноз нельзя переписать задним числом — он зашит в хеш-цепочку и заякорен в Base до исхода. Это не магия «абсолютной честности»: настоящая защита от cherry-pick — якорить ВСЕ исходы, включая проигрыши. Мы это и делаем — журнал публичный целиком.
| загрузка… |