Open Rating

Вроде как новый Бут должен побороться с Дельфи за 4-ое место.

А новый - это какой? Я на WBEC нашёл только 4.131, а тут уже про пятый говорят... Откуда его брать-то?

У меня есть 4.13.2 Lodz, правда без исходников.

Я как раз тоже начал тестировать Booot 4.13.1 в блице.

Итак, возобновляю турнир - в новом формате. Теперь с дивизионами.
В первом турнире нового розыгрыша играют следующие супер-монстры (барабанная дробь!!!):

GreKo 0.50
GreKo 1.10
MicroMax 3.2
TSCP 1.81
HoiChess 0.6.1
Mizar 0.30

Контроль времени 1+1, книга HS в 7 полуходов. Два круга.

В предварительном турнире, для уточнения состава дивизионов, победу праздновал Glaurung 2-eps/5, опередивший Тогу 1.3X4.

Code:

02.08.2007 22:33:12 :

    Program                          Elo    +   -   Games   Score   Av.Op.  Draws

  1 Glaurung 2-eps/5               : 2930  280 237    10    80.0 %   2689   20.0 %
  2 Toga 1.3 X4                    : 2889  227 203    10    75.0 %   2698   30.0 %
  3 Delfi 5.0                      : 2757  167 154    20    75.0 %   2566   20.0 %
  4 Scorpio 1.91                   : 2735  130 128    20    57.5 %   2682   35.0 %
  5 Fruit 2.1                      : 2700  161 165    10    45.0 %   2735   50.0 %
  6 Crafty 20.14                   : 2688  140 135    20    65.0 %   2580   30.0 %

  7 SlowChessBlitz 2.96            : 2613  139 138    20    52.5 %   2595   25.0 %
  8 Arasan 9.5                     : 2551  145 154    20    27.5 %   2719   25.0 %
  9 Kiwi 0.6d                      : 2532  138 148    20    25.0 %   2723   30.0 %
 10 Booot 4.13.1                   : 2516  169 159    20    62.5 %   2428    5.0 %
 11 Pepito 1.59                    : 2457  160 158    20    52.5 %   2440    5.0 %
 12 Phalanx XXII                   : 2330  157 150    20    62.5 %   2241   15.0 %

 13 xpdnt 061120                   : 2300  152 148    20    57.5 %   2247   15.0 %
 14 GNU Chess 4 TM                 : 2212  139 141    20    42.5 %   2265   25.0 %
 15 EXchess 5.01 beta              : 2191  193 229    20    15.0 %   2493   10.0 %
 16 GreKo 5.4                      : 2107  153 146    20    65.0 %   2000   20.0 %
 17 GreKo 2.817                    : 2047  146 143    20    55.0 %   2012   20.0 %
 18 Scidlet 3.6                    : 1989  143 146    20    45.0 %   2024   20.0 %

 19 TSCP 1.81                      : 1702  163 158    20    57.5 %   1650    5.0 %
 20 Greko 1.10                     : 1658  154 154    20    50.0 %   1658   10.0 %
 21 Hoichess 0.6.1                 : 1644  148 150    20    47.5 %   1661   15.0 %
 22 Mizar 0.30                     : 1423  232 240    10    45.0 %   1458   10.0 %
 23 Greko 0.50                     : 1293  250 303    10    25.0 %   1484   10.0 %
 24 MicroMax 3.2                   :  952    0   0    10     0.0 %   1552    0.0 %

Code:

10.09.2007 6:19:40 :

    Program                          Elo    +   -   Games   Score   Av.Op.  Draws

  1 Toga 1.3 X4                    : 2801  105 101    32    67.2 %   2676   34.4 %
  2 Glaurung 2-eps/5               : 2790  119 115    32    65.6 %   2678   18.8 %
  3 Delfi 5.0                      : 2717   97  95    42    61.9 %   2633   23.8 %
  4 Fruit 2.1                      : 2700   91  90    40    53.8 %   2674   32.5 %
  5 Scorpio 1.91                   : 2679   86  86    42    51.2 %   2671   35.7 %
  6 Crafty 20.14                   : 2652   81  81    50    52.0 %   2639   32.0 %

  7 Booot 4.13.1                   : 2585   96  94    50    62.0 %   2500   12.0 %
  8 SlowChessBlitz 2.96            : 2572   90  89    50    53.0 %   2551   18.0 %
  9 Pepito 1.59                    : 2530   81  81    62    46.8 %   2553   16.1 %
 10 Arasan 9.5                     : 2482   83  84    52    43.3 %   2529   25.0 %
 11 Phalanx XXII                   : 2476   89  88    52    61.5 %   2394   19.2 %
 12 Kiwi 0.6d                      : 2460   95  98    42    32.1 %   2589   26.2 %

 13 resp 0.19                      : 2407  116 114    32    54.7 %   2375   15.6 %
 14 xpdnt 061120                   : 2366  106 103    42    63.1 %   2273   11.9 %
 15 GreKo 5.4                      : 2262   88  87    52    57.7 %   2208   19.2 %
 16 Beowulf 2.3                    : 2256  198 202    10    45.0 %   2291   30.0 %
 17 GNUChess 5.02                  : 2219  314 257    10    70.0 %   2072    0.0 %
 18 EXchess 5.01 beta              : 2207   92  95    52    35.6 %   2310   13.5 %

 19 GNUChess 4 TM                  : 2182   85  86    52    40.4 %   2250   23.1 %
 20 Scidlet 3.6                    : 2158   87  87    52    46.2 %   2185   19.2 %
 21 Sjeng 11.2                     : 2148  120 119    32    54.7 %   2115    9.4 %
 22 GreKo 2.817                    : 2141   86  87    52    43.3 %   2188   21.2 %
 23 Witz Alpha 21                  : 2043  134 125    32    70.3 %   1893    9.4 %
 24 Gerbil 0.2                     : 1849  299 290    10    85.0 %   1548   10.0 %

 25 Greko 1.10                     : 1841   92  93    52    45.2 %   1874    9.6 %
 26 TSCP 1.81                      : 1759  101  99    42    58.3 %   1700   16.7 %
 27 HoiChess 0.6.1                 : 1756   90  90    52    47.1 %   1776   13.5 %
 28 Mizar 0.30                     : 1584  117 119    32    43.8 %   1628   12.5 %
 29 Greko 0.50                     : 1495  115 120    32    29.7 %   1644   21.9 %
 30 MicroMax 3.2                   : 1115    0   0    32     0.0 %   1715    0.0 %

Возобновил турнир - общий круговик, по 6 партий.
Контроль 1+1, книга стандартная (7 ходов).

Code:

Rank Name             Elo    +    - games score oppo. draws 
   1 Glaurung 2.2    2842   78   69   120   88%  2426   11% 
   2 Fruit 2.1       2700   64   61   120   76%  2433   17% 
   3 Bison 9.8       2675   63   60   120   73%  2435   14% 
   4 Delfi 5.4       2661   62   59   120   72%  2435   19% 
   5 Cyrano 0.6b17   2639   62   59   120   69%  2436   14% 
   6 Crafty 23.0     2634   60   58   120   69%  2437   18% 
   7 Booot 4.15.0    2631   60   59   120   68%  2437   18% 
   8 Scorpio 2.1     2615   60   58   120   66%  2438   18% 
   9 Sloppy 0.2.0    2591   60   59   120   64%  2439   18% 
  10 Brutus 7.02b    2570   59   58   120   63%  2440   18% 
  11 Kiwi 0.6d       2452   59   59   120   49%  2446   13% 
  12 DanaSah 4.24    2445   57   58   120   48%  2446   17% 
  13 Arasan 11.4     2414   59   61   120   44%  2448   15% 
  14 OliThink 5.1.9  2395   60   62   120   42%  2449    9% 
  15 GreKo 6.5       2389   58   60   120   41%  2449   18% 
  16 Phalanx XXII    2333   61   64   120   36%  2452   12% 
  17 GNUChess 4TM    2217   65   70   120   25%  2457   12% 
  18 Scidlet 3.6     2192   67   72   120   22%  2459   12% 
  19 Beowulf 2.4     2182   68   74   120   22%  2459    9% 
  20 Smash 1.0.3     2030   80   93   120   12%  2467    4% 
  21 TSCP 1.81       1761  122  178   120    2%  2480    1% 

А каким вы бы хотели видеть процент ничьих?

Здесь тонкость заключается в том, что он ожидаемый процент ничьих сильно зависит от рейтингов соперников. Я здесь где-то постил статистику по моему турниру, попробую найти.

Суть в том что:
1. Близкие по силе движки делают больше ничьих, чем движки с большой разницей в рейтингах.
2. Сильные движки делают больше ничьих, чем слабые.

В результате величина "процент ничьих" практически не информативна - она (почти) ничего нам не сообщает собственно о движке, а в основном отражает стратегию тестирования + шум. Я отказался от показа этой величины в рейтинг-листе своего турнира (KCEC). Взамен я вычисляю соотношение реального числа ничьих к ожидаемому, что показывает характер (ничейность/антиничейность) непосредственно движка.

Добавил ещё нескольких "малышей".
На удивление неплохо выступила новая версия программы MicroMax.

Code:

Rank Name             Elo    +    - games score oppo. draws 
   1 Glaurung 2.2    2841   79   70   138   89%  2378    9% 
   2 Fruit 2.1       2700   64   61   138   79%  2384   14% 
   3 Bison 9.8       2669   63   59   138   76%  2385   12% 
   4 Delfi 5.4       2661   62   59   138   76%  2385   17% 
   5 Crafty 23.0     2635   60   57   138   73%  2387   16% 
   6 Cyrano 0.6b17   2634   61   59   138   72%  2387   12% 
   7 Booot 4.15.0    2627   60   58   138   72%  2387   16% 
   8 Scorpio 2.1     2610   59   57   138   70%  2388   15% 
   9 Sloppy 0.2.0    2594   60   58   138   68%  2388   15% 
  10 Brutus 7.02b    2562   58   57   138   67%  2390   16% 
  11 Kiwi 0.6d       2447   57   57   138   54%  2395   13% 
  12 DanaSah 4.24    2439   55   56   138   53%  2395   16% 
  13 Arasan 11.4     2410   57   58   138   50%  2396   14% 
  14 OliThink 5.1.9  2379   57   58   138   47%  2398   12% 
  15 GreKo 6.5       2364   56   57   138   45%  2398   20% 
  16 Phalanx XXII    2326   58   59   138   41%  2400   12% 
  17 GNUChess 4TM    2206   60   63   138   30%  2405   12% 
  18 Scidlet 3.6     2199   61   64   138   28%  2406   12% 
  19 Beowulf 2.4     2191   61   64   138   29%  2406    9% 
  20 Lime 66         2175   62   66   138   27%  2407    8% 
  21 Witz Alpha 21   2109   64   69   138   21%  2409    9% 
  22 Smash 1.0.3     2006   72   79   138   15%  2414    5% 
  23 MicroMax 4.8    1974   75   84   138   13%  2415    7% 
  24 TSCP 1.81       1770   99  127   138    4%  2424    1% 

Code:

Rank Name                 Elo    +    - games score oppo. draws 
   1 Glaurung 2.2        2877   73   65   174   90%  2388    8% 
   2 Strelka 2.0         2831   68   62   174   87%  2389   10% 
   3 Bison 9.8           2703   58   55   174   77%  2394   11% 
   4 Fruit 2.1           2700   58   55   174   77%  2394   13% 
   5 Delfi 5.4           2699   58   55   174   77%  2394   14% 
   6 Cyrano 0.6b17       2674   56   54   174   74%  2395   13% 
   7 Crafty 23.0         2661   55   53   174   74%  2395   16% 
   8 Booot 4.15.0        2647   55   53   174   72%  2396   14% 
   9 Scorpio 2.1         2644   55   53   174   71%  2396   14% 
  10 Sloppy 0.2.0        2636   55   54   174   71%  2396   15% 
  11 Brutus 7.02b        2598   53   52   174   68%  2397   16% 
  12 Pepito 1.59         2545   52   52   174   63%  2399   15% 
  13 Kiwi 0.6d           2472   52   52   174   56%  2402   13% 
  14 DanaSah 4.24        2449   51   51   174   53%  2403   16% 
  15 Arasan 11.4         2437   53   53   174   51%  2403   11% 
  16 Resp 0.19           2402   51   52   174   48%  2404   14% 
  17 GreKo 6.5           2397   50   51   174   48%  2404   22% 
  18 OliThink 5.1.9      2384   52   52   174   47%  2405   14% 
  19 Phalanx XXII        2342   53   54   174   43%  2406   11% 
  20 ExChess 5.01beta    2309   52   53   174   40%  2407   15% 
  21 Scidlet 3.6         2224   55   57   174   31%  2410   11% 
  22 GNUChess 4TM        2223   54   57   174   32%  2410   13% 
  23 Feuerstein 0.4.6.1  2221   54   56   174   31%  2410   15% 
  24 Beowulf 2.4         2220   55   57   174   31%  2411   10% 
  25 Lime 66             2167   57   60   174   27%  2412    7% 
  26 Witz Alpha 21       2102   60   64   174   21%  2415    8% 
  27 Smash 1.0.3         2022   65   70   174   17%  2417    7% 
  28 MicroMax 4.8        2009   65   71   174   15%  2418    9% 
  29 TSCP 1.81           1772   90  110   174    5%  2426    2% 
  30 Mizar 3.0           1760   91  112   174    5%  2426    2% 

Добавил ещё 6 движков.

Code:

Rank Name                   Elo    +    - games score oppo. draws 
   1 Toga II 1.4.1SE       2876   67   60   210   90%  2371   10% 
   2 Strelka 2.0           2843   64   58   210   88%  2372   10% 
   3 Glaurung 2.2          2841   65   59   210   88%  2372    8% 
   4 Delfi 5.4             2706   54   52   210   78%  2376   13% 
   5 Fruit 2.1             2700   54   51   210   77%  2376   13% 
   6 Bison 9.8             2692   53   51   210   77%  2377   11% 
   7 Crafty 23.0           2679   52   50   210   76%  2377   16% 
   8 Cyrano 0.6b17         2668   52   50   210   75%  2377   13% 
   9 Booot 4.15.0          2642   51   50   210   72%  2378   14% 
  10 Scorpio 2.1           2641   51   50   210   72%  2378   13% 
  11 Sloppy 0.2.0          2619   52   50   210   70%  2379   13% 
  12 Brutus 7.02b          2592   49   48   210   69%  2380   17% 
  13 Pepito 1.59           2527   49   48   210   62%  2381   13% 
  14 SlowChess Blitz 2.96  2503   48   47   210   60%  2382   18% 
  15 Kiwi 0.6d             2486   49   48   210   58%  2383   12% 
  16 DanaSah 4.24          2471   47   47   210   57%  2383   15% 
  17 xpdnt 090704          2446   49   49   210   54%  2384   10% 
  18 Arasan 11.4           2441   49   49   210   54%  2384   11% 
  19 GreKo 6.5             2407   47   47   210   50%  2385   20% 
  20 Resp 0.19             2387   48   48   210   48%  2385   14% 
  21 OliThink 5.1.9        2361   48   49   210   47%  2386   13% 
  22 Phalanx XXII          2348   49   49   210   45%  2387   12% 
  23 ExChess 5.01beta      2314   48   49   210   42%  2387   14% 
  24 Scidlet 3.6           2240   50   52   210   35%  2390   10% 
  25 GNUChess 4TM          2236   50   51   210   36%  2390   13% 
  26 Beowulf 2.4           2217   51   52   210   33%  2390   10% 
  27 Feuerstein 0.4.6.1    2215   50   51   210   33%  2390   15% 
  28 Lime 66               2161   53   55   210   29%  2392    8% 
  29 GreKo 2.817           2151   53   55   210   28%  2392    9% 
  30 Witz Alpha 21         2095   54   57   210   23%  2394    9% 
  31 Gerbil 0.2            2040   57   60   210   20%  2395    8% 
  32 Smash 1.0.3           2007   59   63   210   18%  2396    8% 
  33 MicroMax 4.8          1970   61   66   210   15%  2397    9% 
  34 GreKo 1.10            1876   67   74   210   11%  2400    5% 
  35 TSCP 1.81             1770   78   91   210    6%  2403    3% 
  36 Mizar 3.0             1712   85  103   210    5%  2405    2% 

WinPooh, как насчёт протестировать Amy, GNU Chess 5?

Может, и потестирую. Там ещё StockFish на очереди...

StockFish просто монстр какой-то! После 100 партий рейтинг за 3000.