Matchs et Tournois entre Engines

Le Fou numérique

 

UCI Engines Ligue (UEL)

Le Système du Suisse

 

 

24.02.2005 Paul De Man: "Afin de contribuer à la petite 'polémique' (jeunes contre anciens) autour du progrès ou non des versions de Crafty, j'ai organisé un tournoi avec 12 versions Natives et 1 WinBoard dudit moteur. Je crains fort d'avoir ajouter un grain de sable plutôt qu'une pierre à l'édifice tant les résultats sont peu parlants. En effet, si deux moteurs terminent détachés (Crafty 19.03 16pts/24 et Crafty 16.18(!) 15,5pts) les autres sont finalement forts proches et sans aucune hiérarchie dans les versions. J'ai donc essayé d'affiner les résultats en prenant le total des 4 versions les plus modernes, les 4 plus anciennes et 4 du 'milieu'. Conclusion (41% de nulles, 66 coups de moyenne - Shredder fait 78 dans mes statistiques -):
Versions 19 : 50 points sur 96
Versions 18 et 17.14 : 52,5/96
Versions 14,15,16 : 44/96
Il y a donc sans doute un petit progrès, mais les (certaines !) versions 17 et 18 font un peu mieux. Il est clair en tout cas que les versions de Crafty ne suivent pas une évolution linéaire et c'est normal si l'on pense au nombre de programmeurs (avec tout le respect) qui publie 'sa' version de Crafty.
Conclusion: Crafty joue mieux que moi (surtout la version x-1yb) mais ne le dites à personne.
"

 

5'+5', PIV 3.0Ghz, Hash 64Mo, Win XP SP1, Shredder 9 GUI, Tablebases 4-pièces

1 Crafty 19.03
&;
½½½100½½011111111116.0 / 24  
2 Crafty 16.18 ½½
&;
11½1½1½½011115.5 / 24  
3 Crafty 17.14
&;
½110½1½0½0½1½113.5 / 24 161.00
4 Crafty 18.04 ½000
&;
½½00½½½½11½111111113.5 / 24 143.00
5 Crafty 18.15 ½0½½
&;
½10111½0½100½0½113.0 / 24  
6 Crafty 18.12 11½00111½0
&;
½½½10010½½12.5 / 24 154.50
7 Crafty 19.19 ½½½0½0½½10½½
&;
½111½012.5 / 24 143.75
8 Crafty 19.15 10½1½½00½0
&;
½½½0½½1111.0 / 24  
9 Crafty 19.19 wb ½100½111½½
&;
½010.5 / 24 127.25
10 Crafty 14.12 00½½½0½0½1
&;
11½110.5 / 24 119.25
11 Crafty 17.07 00½0001101½0½½00
&;
019.5 / 24  
12 Crafty 15.20 0010½000½10000
&;
019.0 / 24 105.75
13 Crafty 16.03 000000½0½½½1½1½01010
&;
9.0 / 24 103.00

21.02.2005 Paul De Man: "Un tournoi avec les meilleurs (17) WinBoard disponibles (ou à peu près) contre les quatre meilleurs UCI, ajoutons le Native Crafty 19.18 pour faire bonne mesure (22 moteurs en tout, simple ronde). Domination dans ce tournoi de Pro Deo 1.1 avec 16,5/21 devant trois UCI, List (15,5), Ruffian (14,5) et Aristarch (14), le quatrième mousquetaire Fruit termine huitième avec 12 points. Entre eux, Dan Chess CCT7 (13), révélation du tournoi pour moi, Patriot (13), à 'commander' gratuitement chez Arena, et Jonny 2.75 (12). Crafty est assez décevant avec 50 % des points. Chacun joue avec sa propre bibliothèque (certaines sont minuscules il est vrai) sauf List, Fruit, Jonny, Dan Chess (pas de biblio officielle), et Ruffian qui jouaient avec une importante (1700000 positions) bibliothèque personnelle."

 

30'+5', PIV 3.0Ghz, Hash 64Mo, Win XP SP1, Shredder 9 GUI, Tablebases 4-pièces

1 Pro Deo 1.1
&;
0110101½11½11111½111116.5 / 21  
2 List 5.12 1
&;
½½½1011111000111111115.5 / 21  
3 Ruffian 1.0.5 0½
&;
10111½½01111011011114.5 / 21  
4 Aristarch 4.50 0½0
&;
11½½0½1½0½1111111114.0 / 21  
5 DanChess CCT7 1½10
&;
1½01½001½11½011½113.0 / 21 132.50
6 Patriot 0.1.7-2 00000
&;
½10½01111111111113.0 / 21 111.00
7 Jonny 2.75 110½½½
&;
½½10½0½10½1110112.0 / 21 124.25
8 Fruit 2.0 000½10½
&;
011½111½01101112.0 / 21 109.75
9 Delfi 4.5 ½0½101½1
&;
½010½011½110½11.5 / 21  
10 SmarThink v0.17a 00½½½½00½
&;
1½1011½½101111.0 / 21  
11 Crafty 19.18 0010111010
&;
½0½0½0½111½10.5 / 21 104.00
12 Green Light Chess 3.00.3.4 ½00½10½½0½½
&;
1001½½½11110.5 / 21 97.75
13 Thinker 4.7a 010100101010
&;
½101½½½1010.0 / 21  
14 Quark 2.35 010½½0½0½1½1½
&;
½½010½0½9.0 / 21 94.75
15 Movei 0.8.295 0100000010110½
&;
01½11109.0 / 21 85.00
16 The Baron 1.5.0 0010001½00½01½1
&;
½½½0119.0 / 21 82.00
17 PostModernist v1010a 0000½0½10½1½010½
&;
001118.5 / 21  
18 Der Bringer 1.9 ½0001000½½½½½0½½1
&;
00118.0 / 21 74.00
19 Leila 0.53h 00100000000½½10½11
&;
½118.0 / 21 66.75
20 Trace 1.33b 000000010100½½0101½
&;
½17.0 / 21  
21 Bruja 1.8 0000½01010000100000½
&;
15.0 / 21  
22 Kaissa2 1.0 00000000½0½01½1000000
&;
3.5 / 21  

19.02.2005 Il ne s'agit que de 10 parties, mais les débuts de Crafty 19.19 Native ChessBase sont assez décevants.

 

15', PIV 3.0Ghz, 1Go, Win XP SP1, Fritz 8 GUI
Hash 128Mo, Biblio Rebel.ctg, Tablebases 5-pièces
Crafty 19.19
Comet B68 0.0 - 2.0
Goliath Light 1.5 1.0 - 1.0
Anaconda 1.6.2 0.5 - 1.5
Pro Deo 1.1 1.0 - 1.0
Fruit 2.0 0.0 - 2.0

17.02.2005 Gabriel Leperlier: "Pharaon 3.2 gagne 2 parties sur 6 et s'incline de peu."

 

61', PIII 850Mhz, 256Mo, Windows XP SP2, Hiarcs 9 GUI
Hash 48 Mo, propre bibliothèque, pas de Tablebases
1 Hiarcs 9 101½013.5 / 6
2 Pharaon 3.2 010½102.5 / 6

13.02.2005 Suite à une demande Patrick Beucler, voici un "tournoi d'entrée" avec Shredder Classic 1.2. La surprise vient du rating réalisé 2677 soit 50 points de mieux que Shredder 9 UCI ! Même si cela reste dans la limite de l'intervalle d'incertitude, il est quand même étonnant que ce module qui devrait être inférieur en force de jeu par rapport à son grand frère réussisse au moins à le dépasser aussi nettement dans cet exercice particulier qu'est le tournoi d'entrée dans la UEL.

Shredder Classic ne concède qu'à Ruffian 1.0.5 le privilège de le mener aux points.

 

5', PIV 3.0Ghz, 1Go, Win XP SP1, Arena 1.1 GUI
Hash 64Mo, Biblio Mainbook v4.5, Tablebases 5-pièces
Shredder Classic 1.2
Abrok 5.0 1.0 - 1.0
Adam 2.8a 2.0 - 0.0
Aice 0.88 1.5 - 0.5
Amyan 1.594 2.0 - 0.0
AnMon 5.50 1.5 - 0.5
Arion 1.1 1.5 - 0.5
Aristarch 4.50 2.0 - 0.0
Booot 4.4.1 1.0 - 1.0
Chispa 4.0.3 2.0 - 0.0
Dragon 4.6 1.0 - 1.0
DrunkenMaster 1.2 2.0 - 0.0
Frenzee 159 2.0 - 0.0
Fruit 2.0 2.0 - 0.0
Gaia 2.1 2.0 - 0.0
Glaurung 0.2.1 2.0 - 0.0
Gothmog 1.0 beta 10 1.5 - 0.5
Hagrid 0.7.56 2.0 - 0.0
Hermann 1.2 2.0 - 0.0
Ktulu 4.2 1.5 - 0.5
List 5.12 1.0 - 1.0
Little Goliath Revival 1.0 - 1.0
Madeleine 0.2 2.0 - 0.0
Matheus 2.3 2.0 - 0.0
Muse 0.899b 2.0 - 0.0
Naum 1.6 2.0 - 0.0
Nejmet 3.07 1.5 - 0.5
Patzer 3.61 1.5 - 0.5
Pepito v1.59 1.0 - 1.0
Pharaon 3.2 1.0 - 1.0
Queen 2.45 2.0 - 0.0
Ruffian 1.0.5 0.5 - 1.5
Sjeng 12.13 2.0 - 0.0
SlowChess 2.94 2.0 - 0.0
SlowChess Blitz 0.4 1.0 - 1.0
Snitch 1.0.8 1.5 - 0.5
SOS 4 for Arena 1.5 - 0.5
Spike 0.8a 2.0 - 0.0
Tao 5.6 1.0 - 1.0
Ufim 5.03 1.5 - 0.5
WJChess v1.64 2.0 - 0.0
Yace Paderborn 1.0 - 1.0

12.02.2005 Sur ce site, la tentation est grande dès qu'il s'agit d'un module UCI de le soumettre au tournoi d'entrée dans la UEL. Shredder 9 UCI a donc été soumis à cette "épreuve" sous Arena 1.1 en utilisant le Mainbook v4.5 de Harry Schnapp. Shredder 9 UCI obtiendrait un Ruel de 2627. Cela le placerait de peu en tête de la Ligue.

A noter la performance de Booot 4.4.1 qui marque un 2-0 contre Shredder 9 UCI. Les autres modules de la UEL qui réussissent à obtenir un score positif, sans que cela ne préjuge de rien:

  • Naum 1.6

  • Nejmet 3.07

  • Ruffian 1.0.5

  • Spike 0.8a 

 

5', PIV 3.0Ghz, 1Go, Win XP SP1, Arena 1.1 GUI
Hash 64Mo, Biblio Mainbook v4.5, Tablebases 5-pièces
Shredder 9 UCI
Abrok 5.0 2.0 - 0.0
Adam 2.8a 2.0 - 0.0
Aice 0.88 2.0 - 0.0
Amyan 1.594 2.0 - 0.0
AnMon 5.50 1.0 - 1.0
Arion 1.1 1.0 - 1.0
Aristarch 4.50 2.0 - 0.0
Booot 4.4.1 0.0 - 2.0
Chispa 4.0.3 1.0 - 1.0
Dragon 4.6 1.5 - 0.5
DrunkenMaster 1.2 2.0 - 0.0
Frenzee 159 2.0 - 0.0
Fruit 2.0 1.5 - 0.5
Gaia 2.1 2.0 - 0.0
Glaurung 0.2.1 1.5 - 0.5
Gothmog 1.0 beta 10 1.5 - 0.5
Hagrid 0.7.56 2.0 - 0.0
Hermann 1.2 1.5 - 0.5
Ktulu 4.2 1.0 - 1.0
List 5.12 2.0 - 0.0
Little Goliath Revival 1.0 - 1.0
Madeleine 0.2 1.5 - 0.5
Matheus 2.3 2.0 - 0.0
Muse 0.899b 2.0 - 0.0
Naum 1.6 0.5 - 1.5
Nejmet 3.07 0.5 - 1.5
Patzer 3.61 1.5 - 0.5
Pepito v1.59 1.0 - 1.0
Pharaon 3.2 1.0 - 1.0
Queen 2.45 2.0 - 0.0
Ruffian 1.0.5 0.5 - 1.5
Sjeng 12.13 2.0 - 0.0
SlowChess 2.94 2.0 - 0.0
SlowChess Blitz 0.4 1.0 - 1.0
Snitch 1.0.8 1.5 - 0.5
SOS 4 for Arena 2.0 - 0.0
Spike 0.8a 0.5 - 1.5
Tao 5.6 1.5 - 0.5
Ufim 5.03 1.5 - 0.5
WJChess v1.64 2.0 - 0.0
Yace Paderborn 2.0 - 0.0

11.02.2005 Paul De Man: "Dans le tournoi A (purs commerciaux) victoire impressionnante de Shredder 8 avec 28/42 devant Fritz 8 et Hiarcs 9; TheKing (sel=6) et Junior 9 déçoivent. Dans le tournoi B, commerciaux plus les 4 meilleurs UCI, le 'quasi' gratuit Fritz 5.32 et le Native Crafty 19.17. Victoire tout aussi impressionnante de Junior 9 (!) 20/28 devant Gandalf 6 (beau résultat d'ensemble) et Shredder 8 (d'abord 6,5/14 ensuite 11/14!). Ici, TheKing fait un peu mieux (sel=12, recommandé sur les fora) mais reste tout de même un peu en retrait. Je m'attendais un meilleur résultat de Pro Deo 1.1 avec 7,5/28.
Conclusion : ne pas se fier à un seul tournoi pour évaluer la force d'un programme. Je crois qu'il faut au moins une centaine de parties (plutôt 200) contre divers adversaire pour commencer à évaluer la force d'un programme.
"

 

5'+5", PIV 3.0Ghz, Win XP SP1, Fritz 8 GUI, Biblio personnelle, Hash 64Mo,  Tablebases 4-pièces
1 Shredder 8
&;
11½1½½1½½½000101½½1111½½1½½1½½½½1½½1½11½1128.0 / 42
2 Fritz 8 00½0½½
&;
½0111½½10111½11½0½½0½½1100011½10½½0122.5 / 42
3 Hiarcs 9 0½½½11½1000½
&;
1010½½10½1½½½½½½½½½½11½½01½01½22.0 / 42
4 Gandalf 6.0 1010½½½010000101½½
&;
½10½1½½1110½011½0½½½101½21.5 / 42
5 Chess Tiger 15.0 0000½½½00½1½01½0½½½01½0½
&;
½½½½11½110101½1½1121.0 / 42
6 Gambit Tiger 2.0 0½½0½½½1½½00½½½½½½½0001½½½½½00
&;
½½½11½10½1½½19.0 / 42
7 Junior 9 ½½0½½011100½½½00½½100½1½½00101½½½00½
&;
10½½1018.0 / 42
8 TheKing 3.33 ½00½0001½½1010½10½½½010½0½0½0001½0½½01½½01
&;
16.0 / 42

 

5'+5", PIV 3.0Ghz, Win XP SP1, Fritz 8 GUI, Biblio personnelle, Hash 64Mo,  Tablebases 4-pièces
1 Junior 9
&;
½110½10111½½101011½½1011111120.0 / 28  
2 Gandalf 6.0 ½0
&;
½001½½111101101117.5 / 28 227.50
3 Shredder 8 01½1
&;
01½0½½11½1½½½111½11117.5 / 28 225.75
4 Fritz 8 ½010
&;
00½111½1111101½½16.5 / 28  
5 Gambit Tiger 2.0 1010½111
&;
½½½1½½00½10010111116.0 / 28 219.25
6 Chess Tiger 15.0 00½½
&;
½0½1111116.0 / 28 204.50
7 Hiarcs 9 ½½½½½0½0½1
&;
½1½½½1½½01110115.5 / 28  
8 Aristarch 4.50 01½½00½½
&;
11011010½½½114.5 / 28 192.00
9 TheKing 3.33 010011½000
&;
0010½11114.5 / 28 190.50
10 Ruffian 1.0.5 00½0½0½0½0½½1011
&;
0111010113.0 / 28  
11 List 5.12 ½½00½½0011½00110
&;
½½10½½12.0 / 28 163.00
12 Fritz 5.32 0100½00001½½010100
&;
½1111112.0 / 28 148.75
13 Fruit 2.0 0010000010½½½010½½½0
&;
½09.0 / 28  
14 Crafty 19.17 0001½0100000½0000100
&;
108.5 / 28  
15 Pro Deo 1.1 000000½½00001010½½00½101
&;
7.5 / 28  

09.02.2005 Chaque module joue avec sa propre bibliothèque, Crafty 19.18 Native utilise le Power.ctg, Shredder 9UCI Shredder8.ctg.

En 5 minutes les résultats de Shredder 9 UCI sont moins bonnes qu'en 10' pour 40 coups.

 

PIV 3.0Ghz, 1Go Ram, Win XP SP1
Fritz 8 GUI, Tablebases 5-pièces
Shredder 9 UCI 5', Hash 48Mo 10'/40, Hash 128Mo
Crafty 19.18 1.5 - 0.5 1.5 - 0.5
Deep Fritz 8 0.5 - 1.5 1.0 - 1.0
Fritz 8 1.5 - 0.5 1.5 - 0.5
Hiarcs 9 1.0 - 1.0 1.0 - 1.0
Junior 9 0.5 - 1.5 1.0 - 1.0
Shredder 7.04 1.5 - 0.5 1.0 - 1.0
Shredder 8 0.5 - 1.5 1.5 - 0.5

09.02.2005 Gabriel Leperlier: "Fruit 2.0 et Shredder Classic 1.2 jouent avec le Shredder8a.bkt.
Pas de miracle, Shredder Classic 1.2 remporte ce match mais Fruit 2.0 se comporte très honorablement.
"

 

30', Athlon 3400+, 1Go, Windows XP SP2, Shredder Classic 1.2 GUI
Hash 128 Mo, Tablebases 5-pièces
1 Shredder Classic 1.2 ½½1100110½½17.0 / 12
2 Fruit 2.0 ½½0011001½½05.0 / 12

08.02.2005 Gabriel Leperlier: "Fruit 2.0 joue avec Junior8.ctg et Aristarch 4.50 avec sa propre bibliothèque d'ouvertures.
Après un début difficile, Aristarch 4.50 arrache un match nul 5 - 5 grâce à un 3- 1 dans les 4 dernières parties.
"

 

60', PIV 2.26Ghz, 256Mo, Windows XP SP2, Arena 1.092 GUI
Hash 48 Mo, Tablebases 4-pièces
1 Fruit 2.0 ½1½10100½½5.0 / 10
2 Aristarch 4.50 ½0½01011½½5.0 / 10

07.02.2005 Gabriel Leperlier: "Fruit 2.0 joue avec le Mainbook v4.5 d'Harry et Pro Deo 1.1 joue avec sa propre bibliothèque d'ouvertures.
Superbe victoire de Fruit 2.0 sur l'ex Rebel, Pro Deo 1.1. Fruit 2.0 confirme son énorme potentiel en parties longues.
"

 

60', PIV 2.26Ghz, 256Mo, Windows XP SP2, Arena 1.092 GUI
Hash 48 Mo, Tablebases 4-pièces
1 Fruit 2.0 ½11½111½1½1011011110½0½100101019.0 / 30
2 Pro Deo 1.1 ½00½000½0½0100100001½1½011010111.0 / 30

04.02.2005 Le nouveau Pro Deo 1.1 opposé à quelques calibres. Ruffian 2.1.0 et Hiarcs 9 sont les deux opposants à lui infliger un 0-2.

La famille Fritz réussit à garder un léger avantage grâce à Fritz 7. Chez les Junior, c'est également le 7 qui engrange le point supplémentaire. Les Shredder font match nul grâce aux "Paderborn". Fruit 2.0 et List 5.12 n'ont pas de soutien familial et conclue la paix chacun pour soi.

A noter les deux pertes au temps, ce qui est très rare à ce rythme de jeu 10'/40+10'40+10'

 

10'/40, PIV 3.0Ghz, 1Go, Windows XP SP1, Fritz 8 GUI
Hash 128Mo, General.ctg, Tablebases 5-pièces
Pro Deo 1.1
Ruffian 2.1.0 0.0 - 2.0
Fritz 5.32 1.0 - 1.0
Fritz 6 1.0 - 1.0
Fritz 7 0.5 - 1.5
Fritz 8 1.0 - 1.0
Junior 7 0.5 - 1.5
Junior 8 1.0 - 1.0
Junior 9 1.0 - 1.0
Hiarcs 8 1.0 - 1.0
Hiarcs 9 0.0 - 2.0
Shredder 5.32 0.5 - 1.5
Shredder 6.02 1.5 - 0.5
Shredder 7.04 0.5 - 1.5
Shredder 8 1.5 - 0.5
Fruit 2.0 1.0 - 1.0
List 5.12 1.0 - 1.0

04.02.2005 Gabriel Leperlier: "Voici la deuxième mi-temps du match Fruit 2.0 vs List 512. Pour cette deuxième mi-temps en 8 parties de 60 minutes KO, Fruit 2.0 joue avec le Mainbook v4.5 d'Harry et List 512 joue avec ma bibliothèque pour Arena.
Et bien comme lors de la première mi-temps, Fruit 2.0 remporte le match mais avec une plus petite avance.
"

 

60', PIV 2.26Ghz, 256Mo, Windows XP SP2, Arena 1.092 GUI
Hash 48 Mo, Tablebases 4-pièces
1 Fruit 2.0 001½1½1½4.5 / 8
2 List 5.12 110½0½0½3.5 / 8

03.02.2005 Gabriel Leperlier: "Voici la première mi-temps du match Fruit 2.0 vs List 5.12. Pour cette première mi-temps en 8 parties de 60 minutes KO, List 5.12 joue avec le Mainbook v4.5 d'Harry et Fruit 2.0 joue avec ma bibliothèque pour Arena.
Belle victoire de Fruit 2.0 dans cette mi-temps à cadence longue.
"

 

60', PIV 2.26Ghz, 256Mo, Windows XP SP2, Arena 1.092 GUI
Hash 48 Mo, Tablebases 4-pièces
1 Fruit 2.0 ½11011015.5 / 8
2 List 5.12 ½00100102.5 / 8

03.02.2005 La suite des essais de Claude Dubois:

La surprise est au rendez-vous de ce test d’Arena. Fruit 2.0 avec la bibliothèque de Gabriel Leperlier défait Gandalf 6.0 qui joue avec sa propre bibliothèque avec le score sans appel 6,5 – 3,5 . Bref, l’exception qui confirme la règle. La bibliothèque de Gabriel est très rusée car elle déstabilise complètement Gandalf qui se retrouve désarçonné et dans ce cas c’est Fruit qui monopolise le match pour lui. La bibliothèque de Gabriel doit être plutôt tactique que positionnelle.

 

5’/40 coups, P-M 1,6Ghz, 512Mo, Windows 2000, Arena 1.1 GUI
Hash 64 Mo, Endgame Turbo
1 Fruit 2.0 ½1101½½1106.5 / 10
2 Gandalf 6.0 ½0010½½0013.5 / 10

 

 

 

Site search Web search

powered by FreeFind