TCEC - Top Chess Engine Championship

Я ждал этого))

 

WinPooh,-жаль сбои как проигрыш считается.Два раза что-то стокфиш заглючило и просрочил время.

 

Переигрывать конечно,глючат все(надеюсь я не ошибаюсь),только нельзя предугадать когда это случится.

 

Уже ничего переигрывать не будут. Там что-то с dll-кой у Стока было. Специально скомпилировали так, чтобы добиться максимальной производительности, поэтому без -static. В итоге, даже голосование сделали среди авторов движков DivP: исправить Сток или нет. В итоге Сток не исправили, т. к. 1 был против.
Здесь обсуждение крешей Стока: http://talkchess.com/forum3/viewtopic.php?f=2&t=71810
Здесь обсуждение темы клонирования (известно, что Allie взял почти весь код работы с нейронной сетью у Lc0). Обсуждается не сам факт копирования, а правила TCEC. С картинками и графиками от crem: http://talkchess.com/forum3/viewtopic.php?f=2&t=71822

Это будет уроком, что лучше на 1% медленнее, зато стабильно и без вылетов. Хотя, конечно, жаль, что финал может быть скучным без Стока.

 

Стокфиш взял победу из ниоткуда против стуфвлес, причем увидел ее очень заранее
https://www.tcec-chess.com/archive.html?season=16&div=p&game=114

 

надо бы ещё выигрышей побольше что б было, хотя бы раза в два

 

А сколько партий каждый движок должен будет сыграть в текущем раунде?

 

В этом сезоне вроде не будет кубка.

 

Давайте еще раз глянем на оценку (это победа Allie над Houdini):


Вот опять, все подъемы и спуски оценки Лилы (синяя) совпадают с Allie (черная). (Я уверен, что если бы был одинаковый пересчет оценки, графики бы в основном имели наложение)
Особенно важно хочу отметить 70-е ходы, у обоих провал в оценке был. Это о многом говорит, в том числе и о том, что Лила, дай ей те же дебюты против тех же соперников, будет иметь как минимум такой же счет, как и Allie, т. к. очень много совпадений в мышлении. Конечно, есть и эффект бабочки, но то, что у Лилы сейчас мало побед - всего лишь случайность и на дистанции это будет видно. К сожалению, ситуация следующая: Allie банально слабее Лилы: если Лила в финале обыграет Сток с вероятностью за 90-95%, то Allie - это как бросок монеты с равными шансами.

 

Вот, кстати, статья CB: https://en.chessbase.com/post/fat-fritz-what-on-earth-is-that - ни одного упоминания Lc0. Сплошная ложь в статье (ведь DeusX - это Lc0 с измененными весами).

"13.08.2019 - Это полусекретная разработка, клон AlphaZero, созданный за последние девять месяцев для ChessBase. Fat Fritz был протестирован одними из лучших игроков в мире, которые выразили неоспоримое восхищение идеями и улучшениями, которые он предложил. Теперь программа общедоступна на ChessBase Engine Cloud. И он работает на потрясающем оборудовании. АЛЬБЕРТ СИЛЬВЕР объясняет."

(Я почему-то уверен, что их облако - это последняя Lc0 с лучшими сетями и измененной формулой пересчета. Поправьте, если я не прав.)

 

Эта хрень stoofvlees играет сильно, но рандомно совершает простые ошибки. Что при малом числе партий в турнире просто рушит все.
Оно уже дважды сделало грубейшие зевки, один раз зевнув мат в 5 ходов и второй раз не такой грубый но фатальный зевок совсем недавно и самое главное оба раза против алли.

 

Ну а Полулила (Allie) только за счёт везения и держится. По всем тестам она достаточно далека от оригинала. А ещё Полулила 2 раза слила Стоку, чтобы оригинальная Лила отставала на пол-очка.

 

Штейн совсем другая нейронка. Намного более агрессивная чем Лила. Особенно черными (7 побед против 2 у Лилы). В полуфинале CCCC у Лилештейна тоже побед значительно больше. 32 против 26. Причем там много некорректных дебютов, без них разрыв по победам мог быть и больше.

В матче против Стокфиша или Лилы вероятно эта агрессивность действительно в минус скажется. Но в турнирах где есть соперники послабее это однозначный плюс.

ps
Кто нибудь знает как Штейн тренируют? Скорей всего не на партиях с самим собой.

 

Насколько я знаю, много партий берут именно тех, которые "сама с собой" - а именно, с серверов Лилы. Ну и да, выводы делать по турнирам не стоит, т. к. выборка маленькая. Лучше обратите внимание на сходство оценок и представьте, что будет, если Лиле дать те же дебюты с теми же соперниками, что и у Allie.

 

150 партий это маленькая выборка? Особого сходства в оценках не вижу. Играют они в одних и тех же турнирах, соперники и дебюты те же самые.

Проблема Лилы в самообучении. Против самой себя рисковать не выгодно, особенно черными. Поэтому Лила достаточно сухо играет, мало подкручивает. Из-за этого у нее проблемы с обыгрышем более слабых соперников. Поэтому в турнирах она очков не добирает, зато в матчах очень сильна. Лила это компьютерный Леко.

А Штейн более сбалансированная нейронка. Одинаково сильно играющая и против сильных, и слабых соперников.

 

Сходства оценки не видите, т. к. пересчет оценки разный. А по поводу числа партий - да, их невообразимо мало (150 партий на 8 движков). AllieStein банально слабее, вот в чем заключается факт. А все остальное - это всего лишь ошибочные домыслы, т. к. основаны на маленькой выборке.

Allie банально везет в турнире. Сток умудрился упасть во время партии против Лилы. Stoofvlees тоже умудряется это делать именно в партиях с Allie. Вот вам и лишнее очко, на которое Allie опережает Лилу))

Я уверен, если гипотетически запустить 1000 кругов в TCEC, Лила таки будет #1, как и в тестах. А сказки про масштабирование и вынос хвоста на такой выборке уже работать не будут.

 

Лилештейн обгонит Лилу в подобном турнире. Нейронка Штейн для турниров подходит больше, чем нейронка Лилы. Аллиштейну может быть действительно немного повезло. Алли хуже движок, чем движок Лилы, поэтому Аллиштейн слабее Лилештейна.

Какие сказки? Лила всегда играла в турнирах слабее, чем в матчах против Стокфиша.

 

Скоро результаты будут здесь (Allie v0.5, Stein v10.2): https://www.sp-cc.de/lc0-testing.htm - тут будут игры и против Fire, и против Xiphos (слабых соперников). С каждым не 6 партий а 500. Вот тогда и можно будет сделать выводы.

 

Все шло идеально, как я и предполагал, за исключением одного - lc0 должна выигрываь в последней партии. Но этого не произошло, будет ничья. И теперь финал стокфиш - алли

 

По Лиле там уже можно сделать выводы: https://www.sp-cc.de/files/nn_programs.dat

Lc0 0.22.0 T40B.4-160 в матче будет чуть сильнее Stockfish 190622 bmi2 (50.8% очков)

Зато движки второго эшелона против Лилы набирают заметно больше, чем против Стокфиша.

Fire 7.1 popc - 23% против Лилы и 17% против Стокфиша
Xiphos 0.5.3 bmi2 - 25% и 19%
Ethereal 11.53 pext - 23% и 17%

То есть против этих соперников Лила играет на 50 пунктов слабее Стокфиша.

Это и сказывается в турнирах. В матче Лила будет заметно сильнее Аллиштейна. А в турнире их сила сопоставима и результат зависит от везения.

 

Ого, оно сделало ход (Kf6), всего лишь за час с небольшим, крутой тайм-менеджмент!

 

Пока 2-1 в пользу Стока.
Тем временем в альтернативном финале TCEC: http://lc0.org/sufi Лила ведет 3-0, 4-я победа намечается.

 

Тут крепость, похоже

 

36-28
https://www.tcec-chess.com/archive.html?season=16&div=sf&game=64

 

Была ли тут победа черных?
https://www.tcec-chess.com/archive.html?season=16&div=sf&game=98

p.s. видимо да, на 105-м ходу например (5r2/8/bp1p1nk1/p1bPp1n1/P1N1Pp2/1P3Pp1/1KR3B1/6NR b)

 

Бедный этериал. Итого 4.5-2.5
https://www.tcec-chess.com/archive.html?season=cup4&round=round16&game=13#/

 

pavelgttfj8, а иначе никак, Scorpio +- на уровне Лилы по тестам играет