YABRL: Ruffian 2.1.0 only at a par with Ruffian 2.0.0

[Robert Allgeuer]

Geschrieben von:/Posted by: Robert Allgeuer at 01 April 2004 00:04:49:

I finally decided to give Ruffian 2.1.0 (instead of 2.0.2) a run in YABRL, because it represents the latest in Ruffian development.
After 760 games Ruffian 2.1.0 came out only at a par with Ruffian 2.0.0; hence under the conditions of YABRL there is no measurable increase in playing strength between these two versions. This result is in line with some other results I am aware of, e.g. http://www.geocities.com/chessfun_1999/rating.html, where the difference is also only 11 points (at longer time controls) between the two.
As Ruffian 2.0.2 is a bug fix version of Ruffian 2.0.0 it appears likely that 2.0.2 would probably have done a little bit better than 2.1.0, and would have achieved more than only 2 points "improvement". Maybe I should also run Ruffian 2.0.2 under the same conditions...
Time control is 300+2, for details on conditions, platform and tools please refer to link below.
Next engine is Tao 5.6.
Robert



    Program                     Elo    +   -   Games   Score   Av.Op.  Draws
 01 Ruffian v2.1.0            : 2679   18  29   758    71.5 %   2519   24.8 %
 02 Ruffian v2.0.0            : 2677   17  27   840    71.6 %   2516   25.8 %
 03 Ruffian v1.0.1            : 2652   17  24   916    69.5 %   2509   26.6 %
 04 DeepSjeng v1.6ntb         : 2630   20  26   739    65.7 %   2517   24.5 %
 05 SmarThink v0.17a          : 2592   20  22   819    60.4 %   2519   25.5 %
 06 Thinker v4.5b             : 2591   21  20   776    60.3 %   2519   32.7 %
 07 Crafty v17.14DC           : 2591   18  18   998    60.6 %   2516   32.7 %
 08 Ktulu v4.2                : 2588   20  22   815    60.4 %   2515   24.0 %
 09 Crafty v19.06DCntb        : 2582   20  20   861    58.9 %   2519   30.5 %
 10 Aristarch v4.21           : 2582   19  20  1017    59.3 %   2516   24.5 %
 11 Aristarch v4.37           : 2575   21  18   799    58.2 %   2518   36.8 %
 12 Delfi v4.3                : 2567   20  20   940    57.3 %   2515   25.1 %
 13 Crafty-MPC v18.15DC       : 2566   20  19   924    57.4 %   2515   27.3 %
 14 Delfi v4.2                : 2563   25  25   580    58.1 %   2506   27.2 %
 15 El Chinito v3.25          : 2562   22  21   780    56.7 %   2515   27.8 %
 16 SmarThink v0.16b++        : 2560   21  21   836    58.0 %   2505   24.3 %
 17 Crafty v18.15DC           : 2558   22  22   741    59.0 %   2495   29.0 %
 18 Little Goliath 2000 v3.9  : 2556   20  18  1020    55.7 %   2517   26.5 %
 19 SoS 3                     : 2556   20  19  1019    55.6 %   2517   22.7 %
 20 Pepito v1.59 profile      : 2555   20  18  1020    55.4 %   2517   25.4 %
 21 Yace Paderborn            : 2553   20  18  1000    55.6 %   2514   26.2 %
 22 Aristarch v4.4            : 2549   36  34   319    54.1 %   2520   20.4 %
 23 SoS 4                     : 2545   23  20   799    54.1 %   2516   24.3 %
 24 Yace v0.99.56             : 2543   33  29   380    54.3 %   2513   26.6 %
 25 Green Light Chess v3.00   : 2540   20  18  1020    53.4 %   2517   25.2 %
 26 Little Goliath 2000 v3.5  : 2538   31  25   440    53.6 %   2513   30.9 %
 27 Anmon v5.30               : 2521   25  19   780    50.8 %   2516   26.9 %
 28 Amyan v1.59               : 2514   18  23   911    49.8 %   2516   25.8 %
 29 Pharaon v2.62             : 2509   17  21  1019    48.8 %   2517   23.9 %
 30 Crafty v19.01DC           : 2501   24  19   815    50.4 %   2498   25.5 %
 31 LambChop v10.99           : 2497   18  21  1018    47.1 %   2518   22.8 %
 32 Ktulu v3.9                : 2493   19  24   779    48.6 %   2502   26.1 %
 33 Gromit v3.8.2             : 2492   18  21   997    46.4 %   2517   23.2 %
 34 SlowChess v2.89b          : 2488   19  22   898    45.7 %   2518   23.7 %
 35 KnightDreamer v3.2        : 2485   19  21   920    45.5 %   2516   24.9 %
 36 Anmon v5.22               : 2485   19  22   899    46.4 %   2510   26.7 %
 37 Comet B44-2               : 2481   18  21   940    44.8 %   2517   27.1 %
 38 Tao v5.4                  : 2479   19  20  1019    44.5 %   2518   20.8 %
 39 Amy v0.8.3                : 2479   20  20  1009    44.5 %   2517   19.0 %
 40 SoS v11-99                : 2478   33  34   359    46.0 %   2506   17.3 %
 41 Dragon v4.4.3             : 2471   20  21   886    43.7 %   2515   25.5 %
 42 Comet B62-3               : 2461   20  20   920    42.0 %   2517   26.0 %
 43 Francesca M.0.0.9         : 2444   20  18  1019    39.5 %   2519   25.3 %
 44 PostModernist v1.007      : 2442   21  19   940    39.3 %   2518   24.9 %
 45 Comet B60                 : 2436   22  21   780    41.2 %   2498   25.6 %
 46 Leila v0.53h              : 2428   23  18   938    37.3 %   2518   21.4 %
 47 Tcb v0045                 : 2423   22  18   939    36.6 %   2518   24.7 %
 48 Resp v0.19                : 2407   23  18   920    34.6 %   2518   24.0 %
 49 Nejmet v3.07              : 2390   25  18   876    33.2 %   2512   22.3 %
 50 SlowChess v2.78           : 2380   27  19   790    33.5 %   2499   19.6 %
 51 Exchess v4.03             : 2331   30  16   919    25.2 %   2519   22.0 %
 52 Beowulf v2.2              : 2308   33  15  1000    22.7 %   2521   17.8 %

Games        :  22223 (finished)
White Wins   :   9017 (40.6 %)
Black Wins   :   7614 (34.3 %)
Draws        :   5592 (25.2 %)
Unfinished   :      0
White Perf.  : 53.2 %
Black Perf.  : 46.8 %

(1) Ruffian v2.1.0            : 758 (+448,=188,-122), 71.5 %
SoS 3                         :  20 (+  9,=  6,-  5), 60.0 %
SmarThink v0.17a              :  20 (+  7,=  6,-  7), 50.0 %
Crafty v17.14DC               :  19 (+  6,=  9,-  4), 55.3 %
Ruffian v1.0.1                :  20 (+  5,=  7,-  8), 42.5 %
Aristarch v4.37               :  20 (+  7,=  7,-  6), 52.5 %
Crafty-MPC v18.15DC           :  20 (+ 16,=  4,-  0), 90.0 %
Gromit v3.8.2                 :  20 (+ 14,=  5,-  1), 82.5 %
Ruffian v2.0.0                :  20 (+  3,= 13,-  4), 47.5 %
Thinker v4.5b                 :  20 (+  8,=  6,-  6), 55.0 %
DeepSjeng v1.6ntb             :  20 (+ 10,=  3,-  7), 57.5 %
Ktulu v4.2                    :  20 (+ 11,=  6,-  3), 70.0 %
Crafty v19.06DCntb            :  20 (+ 10,=  4,-  6), 60.0 %
Aristarch v4.21               :  20 (+  9,=  6,-  5), 60.0 %
Delfi v4.3                    :  20 (+  7,= 11,-  2), 62.5 %
El Chinito v3.25              :  20 (+ 14,=  5,-  1), 82.5 %
Little Goliath 2000 v3.9      :  20 (+ 12,=  6,-  2), 75.0 %
Pepito v1.59 profile          :  20 (+ 15,=  3,-  2), 82.5 %
Yace Paderborn                :  20 (+ 10,=  4,-  6), 60.0 %
SoS 4                         :  20 (+ 14,=  5,-  1), 82.5 %
Green Light Chess v3.00       :  20 (+ 11,=  4,-  5), 65.0 %
Anmon v5.30                   :  20 (+ 11,=  5,-  4), 67.5 %
Amyan v1.59                   :  19 (+ 12,=  5,-  2), 76.3 %
Pharaon v2.62                 :  20 (+  9,=  5,-  6), 57.5 %
LambChop v10.99               :  20 (+ 15,=  4,-  1), 85.0 %
SlowChess v2.89b              :  20 (+ 14,=  3,-  3), 77.5 %
KnightDreamer v3.2            :  20 (+ 14,=  3,-  3), 77.5 %
Amy v0.8.3                    :  20 (+ 16,=  3,-  1), 87.5 %
Tao v5.4                      :  20 (+ 15,=  3,-  2), 82.5 %
Comet B44-2                   :  20 (+ 10,=  4,-  6), 60.0 %
Dragon v4.4.3                 :  20 (+ 11,=  5,-  4), 67.5 %
Comet B62-3                   :  20 (+ 10,=  7,-  3), 67.5 %
Francesca M.0.0.9             :  20 (+ 14,=  4,-  2), 80.0 %
PostModernist v1.007          :  20 (+ 18,=  1,-  1), 92.5 %
Leila v0.53h                  :  20 (+ 15,=  3,-  2), 82.5 %
Tcb v0045                     :  20 (+ 18,=  2,-  0), 95.0 %
Resp v0.19                    :  20 (+ 13,=  6,-  1), 80.0 %
Exchess v4.03                 :  20 (+ 16,=  4,-  0), 90.0 %
Beowulf v2.2                  :  20 (+ 19,=  1,-  0), 97.5 %





YABRL (Yet Another Blitz Rating List)