Experiments H3

[adamgracikowski]

• Wprowadziłem drobne poprawki do CommonMetrics, bo przecież w jsonl nie trzeba zapisywać tablic jako String.
• Proponuję podział ja => H3 i H4 z dokumentu, a Ty => H1 i H2 (powinno być w miarę po równo).
• Mamy runner.py, który uruchamia dla każdego pliku konfiguracyjnego znajdującego się we wskazanym folderze rozgrywkę określoną liczbę razy, więc każdy eksperyment polega na wygenerowaniu potrzebnych plików konfiguracyjnych (configs_generator.py) i wygenerowaniu wykresów dla powstałych plików wynikowych (plots_generator.py).
• Możemy przyjąć taką strukturę projektu analysis/ jeżeli będzie Ci odpowiadać:

.
└── analysis/
    ├── experiments/
    │   ├── h1
    │   ├── h2
    │   ├── h3
    │   └── h4/
    │       ├── configs_generator.py
    │       ├── plots_generator.py
    │       ├── configs/
    │       │   └── *.toml
    │       ├── plots/
    │       │   └── *.png
    │       └── results/
    │           └── *.jsonl
    └── runner.py

ja już zacząłem h3 i trzeba będzie popatrzeć na tego minimaxa i mcts, bo puściłem tylko tak przykładowo serię po 10 gierek na jeden poziom głębokości przeszukiwania i spodziewałbym się, że współczynnik zwycięstw mcts będzie sukcesywnie malał w miarę wzrostu głębokości przeszukiwania minimaxa, a dostałem lekką anomalię.

Zgodnie z tym wykresem niezależnie od tego czy MCTS gra białymi czy czarnymi dla depth=1 mocno dominuje (ok. 90%), ale potem dla depth = 2, ... 7 winrate powinien maleć, a nagle dla depth = 7 znowu dominuje minimaxa xD
To dosyć dziwny wynik...

[p10tr13]

Faktycznie dziwna sprawa xd. Po dokończeniu rave i hp więcej potestuje i zobaczę ocb, bo tak naprawdę jakiś jeden mały błąd może tak kod rozwalać.