Рейтинг-листы шахматных движков

[Michael Strelkov]

Предлагаю в этой теме делиться ссылками на популярные рейтинг-листы движков.

Наиболее известный это, конечно, CCRL:
http://www.computerchess.org.uk/ccrl/4040/

http://www.husvankempen.de/nunn/40_4...rangliste.html
http://inwoba.de/
http://chessowl2.blogspot.com.by/
http://ssdf.bosjo.net/list.htm
На имморталле в закрытом разделе были и другие. Кто какие вспомнит, кидайте сюда!

[БУМЕРАНГ]

Цитата: Сообщение от Still

за 4 дня многое изменилось

Д.б.

Б.б. Так обнови инфу!!!

[БУМЕРАНГ]

CCRL 40/40
Downloads and Statistics
August 26, 2017

http://www.computerchess.org.uk/ccrl/4040/

[БУМЕРАНГ]

CCRL 40/4
Downloads and Statistics
August 26, 2017

http://www.computerchess.org.uk/ccrl/404/

[БУМЕРАНГ]

CCRL 40/4
Downloads and Statistics
September 1, 2017

1 Stockfish 8 64-bit 4CPU 3484 Elo

http://www.computerchess.org.uk/ccrl/404/

[БУМЕРАНГ]

CCRL 40/40
Downloads and Statistics
September 2, 2017

http://www.computerchess.org.uk/ccrl/4040/

[БУМЕРАНГ]

CCRL 40/4
Downloads and Statistics
September 9, 2017

http://www.computerchess.org.uk/ccrl/404/

[БУМЕРАНГ]

CCRL 40/40
Downloads and Statistics
September 9, 2017

http://www.computerchess.org.uk/ccrl/4040/

[svoitsl]

как гром среди ясного неба.....
И некто не пишет.....
1 SugaR XPrO 1.2 64-bit 4CPU 3413 +35 −34 75.5% −172.7 45.5% 292
72.9%
2 Komodo 11.2 64-bit 4CPU 3401 +23 −23 71.4% −139.3 50.7% 610
91.4%
3 Houdini 5.01 64-bit 4CPU 3382 +17 −17 64.9% −94.8 60.5% 1050
100.0%

а стокфиш вообще вылетел...

[sergey1963]

да бред там какой-то...

[Aster]

Sugar'ом заменили сток, типа версия новее, а движок "тот же".
Сделали ему кучу рекламы ни за что.

[otodranik]

Цитата: Сообщение от Aster

Sugar'ом заменили сток, типа версия новее, а движок "тот же".
Сделали ему кучу рекламы ни за что.

Без заноса чемоданов не обошлось...

[Maratka]

Цитата: Сообщение от otodranik

Без заноса чемоданов не обошлось...

Сомневаюсь...
Просто тестировать бета-версии действительно глупо, а релизы, которые выходят раз в год слишком быстро устаревают на фоне Komodo, и начинают ему проигрывать.

[otodranik]

Цитата: Сообщение от Maratka

Сомневаюсь...
Просто тестировать бета-версии действительно глупо, а релизы, которые выходят раз в год слишком быстро устаревают на фоне Komodo, и начинают ему проигрывать.

Так они беты и релизы только на словах. Бери любую сентябрьскую - и называй 8.1 8.2
Релиз - это 1. прирост ЕЛО и главное 2. фиксация багов, а сейчас Стокфиш суперстабилен.

[Maratka]

Технически - да.
Юридически -нет.

Опять же, если она релиз - что мешает ее выпустить как релиз?
Гударт вот выпустил, и явно за пару недель до очередного TCEC, причем умышленно -чуть разнеше: если найдут баги - к запуску турнира он их успеет пофкисить. И это совершенно правильная политика коммерческого разработчика.


_________
Этот вопрос я поднимал еще на иимортале: SF, будуче по-факту последние полтора года самым мощным движком, по тестами таковым не является, ибо в заметную часть тестов вносят релизы, а не беты, а релиз SF играет на уровне релиза того же Комодо, выпущенного через 3-6 месяцев. Т.е. бОльшую часть года на вершине листов будет Комодо, но не потому что он сильнее, а потому что он - релиз, а беты SF не тестируют.

_________
p.s.
Ровно этим же страдает и Гудини: релиз раз в лучшем случае в год, при том, что явно есть внутренние (промежуточные) сборки садит его рейтинг на уровне Комодо.

[otodranik]

Цитата: Сообщение от Maratka

Технически - да.
Юридически -нет.

Опять же, если она релиз - что мешает ее выпустить как релиз?

_________
Этот вопрос я поднимал еще на иимортале: SF, будуче по-факту последние полтора года самым мощным движком по тестами таковым не является, ибо в заметную часть тестов вносят релизы, а не беты.

_________
p.s.
Ровно этим же страдает и Гудини: релиз раз в лучшем случае в год, при том, что явно есть внутренние (промежуточные) сборки садит его рейтинг на уровне Комодо.

Цель у авторов другая. Быть, а не казаться...

[Maratka]

Чтобы быть - нужно доказать, что ты есть.

А беты никто не тестирует. Иначе почему бы не тестировать беты Гудини и Комодо (они тоже есть, и если их командам нужно для повышения рейтинга - их вне всякого сомнения дадут на тест). Но рейтинг повышать не нужно - Комодо и так 9 месяцев в году не хуже чем SF, а 6 месяцев - безоговорочно лучше.

Опять же, ну какая трудоемкость перебить
if (Version.empty())
{
date >> month >> day >> year;
ss << setw(2) << day << setw(2) << (1 + months.find(month) / 4) << year.substr(2);
}
на номер релиза?
Но не делают. Значит им не нужно. Но а проблемы индейцев - это и есть проблемы индейцев.

[otodranik]

Цитата: Сообщение от Maratka

Чтобы быть - нужно доказать, что ты есть.

А беты никто не тестирует. Иначе почему бы не тестировать беты Гудини и Комодо (они тоже есть, и если их командам нужно для повышения рейтинга - их вне всякого сомнения дадут на тест). Но рейтинг повышать не нужно - Комодо и так 9 месяцев в году не хуже чем SF, а 6 месяцев - безоговорочно лучше.

Опять же, ну какая трудоемкость перебить
if (Version.empty())
{
date >> month >> day >> year;
ss << setw(2) << day << setw(2) << (1 + months.find(month) / 4) << year.substr(2);
}
на номер релиза?
Но не делают. Значит им не нужно. Но а проблемы индейцев - это и есть проблемы индейцев.

А для кого тестировать? Тема специфическая, кому надо - тот уже знает, что по чём. Раз в год подтвержают свой статус, а Комодо и Гудини имеют закрытый код.

[Maratka]

А зачем нужны четыре-пять версий Комодо за год?
Все кто им пользуется и так знают, что это один из топовых движков, который тем не менее до лидера не тянет.
Но выпускают. А значит покупатели Комод таки смотрят тесты.

Вот допустим инфа с его страницы:

Faster and meaner

#1 Rated Chess engine CEGT, CCRL!
2017 World Computer Chess Champion
2017 World Computer Rapid Chess Champion
2017 World Computer Blitz
Three-time TCEC Champion

И ни слова про результат последнего TCEC. А почему? Да потому что это уменьшит его продажи.
На CCRL есть ссылка 40/40, но нет на 40/4
Почему? Да по той же причине!

[otodranik]

Цитата: Сообщение от Maratka

А зачем нужны четыре-пять версий Комодо за год?
Все кто им пользуется и так знают, что это один из топовых движков, который тем не менее до лидера не тянет.
Но выпускают. А значит покупатели Комод таки смотрят тесты.

Вот допустим инфа с его страницы:

Faster and meaner

#1 Rated Chess engine CEGT, CCRL!
2017 World Computer Chess Champion
2017 World Computer Rapid Chess Champion
2017 World Computer Blitz
Three-time TCEC Champion

И ни слова про результат последнего TCEC. А почему? Да потому что это уменьшит его продажи.
На CCRL есть ссылка 40/40, но нет на 40/4
Почему? Да по той же причине!

Комодо - продают же.

[ck195708]

Цитата: Сообщение от otodranik

А для кого тестировать? Тема специфическая, кому надо - тот уже знает, что по чём. Раз в год подтвержают свой статус, а Комодо и Гудини имеют закрытый код.

С точки зрения пользователя программного продукта, тест, в котором Гудини 6 побьет Стокфиш 8, имеет в данное время ценность, близкую к нулю. Вот если он побьет какой-либо из сентябрьских стокфишей, а потом будет это делать регулярно и с последующими версиями стока, то тогда-да, и тесты будут представлять интерес, и сам движок.

[Maratka]

Цитата: Сообщение от otodranik

Комодо - продают же.

Только разницы никакой.
Команде в любом случае хочется быть первой, а за бабки, или для души - это дело даже не второе.

[Maratka]

Цитата: Сообщение от ck195708

С точки зрения пользователя программного продукта, тест, в котором Гудини 6 побьет Стокфиш 8, имеет в данное время ценность, близкую к нулю.

С точки зрения пользователя программного продукта, который знает, что бета-версия - это что-то сырое и неустойчивое по определению (а таковые большинство пользователей), этот тест имеет основополагающее значение.

[Viktor]

Цитата: Сообщение от Maratka

С точки зрения пользователя программного продукта, который знает, что бета-версия - это что-то сырое и неустойчивое по определению (а таковые большинство пользователей), этот тест имеет основополагающее значение.

Бета-версии - не всегда "сырой продукт". В большинстве случаев проводятся проверки усилений, многие из которых и дают рост.
И если "такой продукт" превосходит "оригинал", то в дальнейшем происходит постепенная "доработка".
И как тогда понимать, что "это сырой продукт"..., который обыгрывает лицензированный?!
Ну, выпустят Сток 9 и он сомнет этот "хваленый" Гудини! Вы это не признаете, а придется.
Конечно, гораздо легче представить Гудок накануне продажи (!), тем самым обмануть пользователей.

[Maratka]

Цитата: Сообщение от Viktor

Бета-версии - не всегда "сырой продукт".

Только пользователи об этом не знают :D
Они идут в магазин, и покупают релизную версию, ибо других не продается.

А тут вдруг им предлагают скачать некую непонятую версию, где на первой же строке в описании сказано:
Stockfish Development Versions are build automatically if there are changes on the master branch in the git repository (https://github.com/official-stockfish/Stockfish). Use it at your own risk.

Цитата: Сообщение от Viktor

Ну, выпустят Сток 9 и он сомнет этот "хваленый" Гудини! Вы это не признаете, а придется.

Это где я такое написал, что не признаю?
Я регулярно пишу ровно обратное. Вот даже в этой самой теме:

Цитата: Сообщение от Maratka

Этот вопрос я поднимал еще на иимортале: SF, будуче по-факту последние полтора года самым мощным движком, по тестами таковым не является, ибо в заметную часть тестов вносят релизы, а не беты

[Viktor]

Цитата: Сообщение от Maratka

Только пользователи об этом не знают :D
Они идут в магазин, и покупают релизную версию, ибо других не продается.
А тут вдруг им предлагают скачать некую непонятую версию, где на первой же строке в описании сказано:
Stockfish Development Versions are build automatically if there are changes on the master branch in the git repository (https://github.com/official-stockfish/Stockfish). Use it at your own risk.

Никто никого не заставляет качать. Многие прежде чем использовать эти релизы тестируют. И вот на поверке дня оказывается, что эти "сырые продукты" вламывают лицензированным. В итоге большинство шахматистов используют их в анализе.

Цитата: Сообщение от Maratka

Цитата: Сообщение от Maratka
Этот вопрос я поднимал еще на иимортале: SF, будуче по-факту последние полтора года самым мощным движком, по тестами таковым не является, ибо в заметную часть тестов вносят релизы, а не беты

Только что вы говорили против бета-версий. Пользователям всё равно: бета это или релиз - провели тестирование и выбрали лучшую.

[Maratka]

Я ни слова не говорил против бета-версий.
Я лишь скромно пытаюсь объяснить, почему на CCRL заменили SF8 не на бету SF9, а на Sugar, и меня очень похоже никто не понимает.

[sergey1963]

почему не понимает?
-я уже написал свой отзыв- полный бред!
-сток имеет со всеми движками плюс, версии его с открытым кодом!!! выложены на всеобщее обозрение, а тут такая борзота...

[otodranik]

Цитата: Сообщение от Maratka

Я ни слова не говорил против бета-версий.
Я лишь скромно пытаюсь объяснить, почему на CCRL заменили SF8 не на бету SF9, а на Sugar, и меня очень похоже никто не понимает.

Ты слишком критично ставишь вопрос. Они иногда берут и промежуточные версии Стокфиша. Помню, в конце 2015 такое было. То, что они не берут чаще промежуточные версии Стокфиша - это их дело, зато они активно берут промежуточные версии других движков, даже не топовых.

[svoitsl]

а тем временем ....

CCRL 40/40
September 30, 2017
1 SugaR XPrO 1.2 64-bit 4CPU 3415
2 Komodo 11.2 64-bit 4CPU 3396
3 Houdini 6 64-bit 4CPU 3385
Как видите комодо снова опустился ниже 3400!, стокфиш так и не появился, а вот сахар , хоть и старый, но все же лидирует!!!!!

[Ofiscer]

А Гудок-то новый - еще даже послабже Комода будет...