Matchs et Tournois entre Engines

Le Fou numérique

UCI Engines Ligue (UEL)

Le Système du Suisse

24.02.2005 Paul De Man: "Afin de contribuer à la petite 'polémique' (jeunes contre anciens) autour du progrès ou non des versions de Crafty, j'ai organisé un tournoi avec 12 versions Natives et 1 WinBoard dudit moteur. Je crains fort d'avoir ajouter un grain de sable plutôt qu'une pierre à l'édifice tant les résultats sont peu parlants. En effet, si deux moteurs terminent détachés (Crafty 19.03 16pts/24 et Crafty 16.18(!) 15,5pts) les autres sont finalement forts proches et sans aucune hiérarchie dans les versions. J'ai donc essayé d'affiner les résultats en prenant le total des 4 versions les plus modernes, les 4 plus anciennes et 4 du 'milieu'. Conclusion (41% de nulles, 66 coups de moyenne - Shredder fait 78 dans mes statistiques -):
Versions 19 : 50 points sur 96
Versions 18 et 17.14 : 52,5/96
Versions 14,15,16 : 44/96
Il y a donc sans doute un petit progrès, mais les (certaines !) versions 17 et 18 font un peu mieux. Il est clair en tout cas que les versions de Crafty ne suivent pas une évolution linéaire et c'est normal si l'on pense au nombre de programmeurs (avec tout le respect) qui publie 'sa' version de Crafty.
Conclusion: Crafty joue mieux que moi (surtout la version x-1yb) mais ne le dites à personne."

21.02.2005 Paul De Man: "Un tournoi avec les meilleurs (17) WinBoard disponibles (ou à peu près) contre les quatre meilleurs UCI, ajoutons le Native Crafty 19.18 pour faire bonne mesure (22 moteurs en tout, simple ronde). Domination dans ce tournoi de Pro Deo 1.1 avec 16,5/21 devant trois UCI, List (15,5), Ruffian (14,5) et Aristarch (14), le quatrième mousquetaire Fruit termine huitième avec 12 points. Entre eux, Dan Chess CCT7 (13), révélation du tournoi pour moi, Patriot (13), à 'commander' gratuitement chez Arena, et Jonny 2.75 (12). Crafty est assez décevant avec 50 % des points. Chacun joue avec sa propre bibliothèque (certaines sont minuscules il est vrai) sauf List, Fruit, Jonny, Dan Chess (pas de biblio officielle), et Ruffian qui jouaient avec une importante (1700000 positions) bibliothèque personnelle."

19.02.2005 Il ne s'agit que de 10 parties, mais les débuts de Crafty 19.19 Native ChessBase sont assez décevants.

17.02.2005 Gabriel Leperlier: "Pharaon 3.2 gagne 2 parties sur 6 et s'incline de peu."

13.02.2005 Suite à une demande Patrick Beucler, voici un "tournoi d'entrée" avec Shredder Classic 1.2. La surprise vient du rating réalisé 2677 soit 50 points de mieux que Shredder 9 UCI ! Même si cela reste dans la limite de l'intervalle d'incertitude, il est quand même étonnant que ce module qui devrait être inférieur en force de jeu par rapport à son grand frère réussisse au moins à le dépasser aussi nettement dans cet exercice particulier qu'est le tournoi d'entrée dans la UEL.

Shredder Classic ne concède qu'à Ruffian 1.0.5 le privilège de le mener aux points.

12.02.2005 Sur ce site, la tentation est grande dès qu'il s'agit d'un module UCI de le soumettre au tournoi d'entrée dans la UEL. Shredder 9 UCI a donc été soumis à cette "épreuve" sous Arena 1.1 en utilisant le Mainbook v4.5 de Harry Schnapp. Shredder 9 UCI obtiendrait un Ruel de 2627. Cela le placerait de peu en tête de la Ligue.

A noter la performance de Booot 4.4.1 qui marque un 2-0 contre Shredder 9 UCI. Les autres modules de la UEL qui réussissent à obtenir un score positif, sans que cela ne préjuge de rien:

• Naum 1.6

• Nejmet 3.07

• Ruffian 1.0.5

• Spike 0.8a 

11.02.2005 Paul De Man: "Dans le tournoi A (purs commerciaux) victoire impressionnante de Shredder 8 avec 28/42 devant Fritz 8 et Hiarcs 9; TheKing (sel=6) et Junior 9 déçoivent. Dans le tournoi B, commerciaux plus les 4 meilleurs UCI, le 'quasi' gratuit Fritz 5.32 et le Native Crafty 19.17. Victoire tout aussi impressionnante de Junior 9 (!) 20/28 devant Gandalf 6 (beau résultat d'ensemble) et Shredder 8 (d'abord 6,5/14 ensuite 11/14!). Ici, TheKing fait un peu mieux (sel=12, recommandé sur les fora) mais reste tout de même un peu en retrait. Je m'attendais un meilleur résultat de Pro Deo 1.1 avec 7,5/28.
Conclusion : ne pas se fier à un seul tournoi pour évaluer la force d'un programme. Je crois qu'il faut au moins une centaine de parties (plutôt 200) contre divers adversaire pour commencer à évaluer la force d'un programme. "

09.02.2005 Chaque module joue avec sa propre bibliothèque, Crafty 19.18 Native utilise le Power.ctg, Shredder 9UCI Shredder8.ctg.

En 5 minutes les résultats de Shredder 9 UCI sont moins bonnes qu'en 10' pour 40 coups.

09.02.2005 Gabriel Leperlier: "Fruit 2.0 et Shredder Classic 1.2 jouent avec le Shredder8a.bkt.
Pas de miracle, Shredder Classic 1.2 remporte ce match mais Fruit 2.0 se comporte très honorablement."

08.02.2005 Gabriel Leperlier: "Fruit 2.0 joue avec Junior8.ctg et Aristarch 4.50 avec sa propre bibliothèque d'ouvertures.
Après un début difficile, Aristarch 4.50 arrache un match nul 5 - 5 grâce à un 3- 1 dans les 4 dernières parties."

07.02.2005 Gabriel Leperlier: "Fruit 2.0 joue avec le Mainbook v4.5 d'Harry et Pro Deo 1.1 joue avec sa propre bibliothèque d'ouvertures.
Superbe victoire de Fruit 2.0 sur l'ex Rebel, Pro Deo 1.1. Fruit 2.0 confirme son énorme potentiel en parties longues."

04.02.2005 Le nouveau Pro Deo 1.1 opposé à quelques calibres. Ruffian 2.1.0 et Hiarcs 9 sont les deux opposants à lui infliger un 0-2.

La famille Fritz réussit à garder un léger avantage grâce à Fritz 7. Chez les Junior, c'est également le 7 qui engrange le point supplémentaire. Les Shredder font match nul grâce aux "Paderborn". Fruit 2.0 et List 5.12 n'ont pas de soutien familial et conclue la paix chacun pour soi.

A noter les deux pertes au temps, ce qui est très rare à ce rythme de jeu 10'/40+10'40+10'

04.02.2005 Gabriel Leperlier: "Voici la deuxième mi-temps du match Fruit 2.0 vs List 512. Pour cette deuxième mi-temps en 8 parties de 60 minutes KO, Fruit 2.0 joue avec le Mainbook v4.5 d'Harry et List 512 joue avec ma bibliothèque pour Arena.
Et bien comme lors de la première mi-temps, Fruit 2.0 remporte le match mais avec une plus petite avance."

03.02.2005 Gabriel Leperlier: "Voici la première mi-temps du match Fruit 2.0 vs List 5.12. Pour cette première mi-temps en 8 parties de 60 minutes KO, List 5.12 joue avec le Mainbook v4.5 d'Harry et Fruit 2.0 joue avec ma bibliothèque pour Arena.
Belle victoire de Fruit 2.0 dans cette mi-temps à cadence longue."

03.02.2005 La suite des essais de Claude Dubois:

La surprise est au rendez-vous de ce test d’Arena. Fruit 2.0 avec la bibliothèque de Gabriel Leperlier défait Gandalf 6.0 qui joue avec sa propre bibliothèque avec le score sans appel 6,5 – 3,5 . Bref, l’exception qui confirme la règle. La bibliothèque de Gabriel est très rusée car elle déstabilise complètement Gandalf qui se retrouve désarçonné et dans ce cas c’est Fruit qui monopolise le match pour lui. La bibliothèque de Gabriel doit être plutôt tactique que positionnelle.