Brier score
Najpierw określ zdarzenie i moment prognozy
Wynik 1 musi oznaczać to samo w każdej obserwacji: konkretny warunek, horyzont i źródło danych. Prognozę zapisujesz przed poznaniem rezultatu. Nie mieszaj godzinnego wzrostu ceny z osiągnięciem celu przed stopem, ponieważ to inne zdarzenia. Ustal sposób obsługi brakujących danych i remisów. Nakładające się horyzonty mogą tworzyć zależne obserwacje, więc liczba prognoz nie musi odpowiadać liczbie niezależnych informacji.
Porównanie z właściwym punktem odniesienia
Niższy wynik jest lepszy dla tej samej próby i konwencji. Prognoza 0,5 daje zawsze 0,25, lecz przy rzadkim zdarzeniu lepszą bazą bywa częstość oszacowana na wcześniejszych danych. Nie dobieraj jej do zbioru testowego po poznaniu wyników. Zapisz także konwencję biblioteki: suma po wszystkich klasach lub wariant wieloklasowy mogą mieć inną skalę. Sprawdź etykietę klasy dodatniej zamiast zakładać, że kolumna prawdopodobieństwa oznacza wzrost.
Dobry score nie jest zyskowną strategią
Brier score ocenia prognozy probabilistyczne, a nie kwotowy wynik transakcji. Obejmuje więcej niż samą kalibrację; warto osobno badać wykres kalibracji i stabilność poza próbą. Nawet prawdziwe 60% szans przy wypłacie +1R lub −2R daje expectancy 0,6 × 1R − 0,4 × 2R = −0,2R, przed kosztami. Decyzja handlowa wymaga jeszcze wypłat, wykonania, sizingu i ograniczeń ryzyka.
Dalsza nauka i źródła
10.1 Trading w warunkach niepewności — jak oceniać decyzje, których wyniku nie da się znać; 11.9 AI i LLM w tradingu — zastosowania, ograniczenia i ryzyka; 15.9 Dziennik transakcji Forex — R-multiple, expectancy, SQN i MAE/MFE.
Źródła pierwotne (sprawdzone 2026-10-11): scikit-learn — brier_score_loss; scikit-learn — probability forecast evaluation.
Przykład praktyczny
Przed każdą z czterech obserwacji prognozujesz prawdopodobieństwo, że EUR/USD zamknie następną godzinę powyżej bieżącego Bid. Prognozy to 0,8; 0,6; 0,3; 0,1, a wyniki zdarzenia to 1; 0; 1; 0. Brier score w binarnej konwencji 0–1 wynosi (0,04 + 0,36 + 0,49 + 0,01) / 4 = 0,225. Stałe 0,5 dla tych samych zdarzeń daje 0,25. Przykład pokazuje rachunek; cztery obserwacje nie wystarczają do wniosku o jakości prognoz w przyszłości.
Najczęstsze pytania
Czy score 0,225 jest dobry?
Czy wynik mierzy wyłącznie kalibrację?
Czy Brier score jest procentem zyskownych transakcji?
Powiązane terminy
Gdzie w kursie
- Dodatek: egzamin gotowości do rachunku rzeczywistego
- 16.1 Mapa kompetencji i karta braków
- 10.3 Pułapki poznawcze
Wspominane w artykułach kursu (2)
- Dodatki do kursu Forex — ściągi, kalkulatory, szablony i narzędzia tradera
- Plan rozwoju po kursie — Protokół Dnia Pierwszego: 30/90/180 dni oraz 12/24/60 miesięcy