Computer Chess Rating Lists ( CCRL ) er en familie af ratings (ratinglister) af de stærkeste computerskakprogrammer . Som teknik bruges Elo Bayesian-vurderingen [1] , som tager højde for farven, procentdelen af scorede point, inklusive remis, og forskelle i vurderingen af skakprogrammer, når man spiller med hinanden.
I dag er det en af de mest autoritative og velkendte metoder i verden til at evaluere både kommercielle (proprietære) og gratis skakprogrammer.
CCRL ratinglisterne er blevet vedligeholdt siden 2006 af en gruppe skak-entusiaster med følgende indledende line-up: Graham Banks, Ray Banks, Sarah Bird, Kirill Kryukov og Charles Smith. Det, der bragte disse mennesker sammen, var ideen om, at deres hobby med at teste skakprogrammer ville være mere nyttig og efterspurgt, hvis de gik sammen og offentliggjorde resultater på en regelmæssig basis. Fremover blev gruppen fyldt op af frivillige. Hidtil består rygraden i gruppen af tolv personer, og mængden af udført arbejde er vokset væsentligt fra idéen om en hobby.
Enhver kan tilbyde sig selv som tester, dog accepteres kun personer, der er velkendte i skaksoftwaremiljøet eller har kendte garanter i denne kreds.
I løbet af sin eksistens har gruppen udviklet et helt sæt formelle regler og tolerancer, som den nu tester ud fra. Denne tilgang er mere gennemsigtig og giver større tillid til de opnåede resultater.
I øjeblikket vedligeholdes tre uafhængige hovedklassificeringslister, der adskiller sig i tidsstyring og i nogle andre parametre:
På alle hovedrangeringslister er alle skakprogrammer repræsenteret af deres bedste versioner på evalueringstidspunktet. Estimering for hovedvurderinger er udført på Athlon 64 X2 4600+ (2,4 GHz) arkitektur.
Ved test bruges universelle åbningsbøger med en evalueringsdybde på 12 træk i stedet for deres egne åbningsbøger knyttet til programmerne. Under test er muligheden for at bruge modstanderens tid til at beregne deres egne træk deaktiveret. Disse regler gør det muligt mere objektivt at vurdere kvaliteten af arbejdet i selve programalgoritmen under lige betingelser.
For at øge objektiviteten spilles der et stort antal spil for hvert skakprogram.
Ud over hovedklassificeringerne opretholdes mange andre, for eksempel for enkeltprocessorsystemer, for 64-bit og 32-bit systemer, kun for gratis programmer osv. Således kan ikke kun specialister, men også en almindelig bruger sammenligne skakprogrammer ved at se på resultaterne for dens konfiguration.
Fra 1. december 2018, på CCRL 40/40 ratinglisten, er Stockfish 9 64-bit 4CPU skakprogrammet på førstepladsen , Komodo 11.3.1 64-bit er på andenpladsen, Houdini 6 64-bit [2] er i tredje , og CCRL 40/4 og CCRL 404FRC (pr. 24. juli 2018) skiftede Komodo og Houdini plads.