Контроль времени для тестирования программ

Интересно было бы обсудить вопросы контроля времени. Что считать "честным" контролем для движков: фиксированное время? инкремент на ход? время на серию ходов? В соседних ветках высказывались самые разные мнения на этот счёт. Насколько контроль времени влияет на относительную силу разных программ?

Что такое блиц, рапид, "длинный" контроль? Что лучше - много партий в блиц, или мало, но с длинным контролем? Где лежит "золотая середина"?

Призываю к обмену мнениями. Особенно интересно послушать тех, кто проводит более-менее регулярное тестирование разных движков.

 

я считаю, что если хочется посмотреть красивую, качественную программу, то без длинного контроля не обойтись. правда, некоторые думают, что без ошибок в партии и красоты быть не может

 

Для тестирования движков лучше быстрые контроли. Рейтинги при длинных и коротких контролях почти всегда совпадают. Т.е. быстрые контроли позволяют получить более качественые рейтинги для > 95% программ. А есть ли исключения еще неизвестно.

С другой стороны, если человек не просто тестирует, а еще и наблюдает за партиями, то тут лучше тот контроль, при котором человеку наиболее приятно следить за партией. Лично мне удобен 2+1. Т.к. я предпочитаю не вдаваться во внутренние тонкости борьбы, а предпочитаю любоваться внешней красотой.

 

А где рейтинги?

 

Не понял. И какой же вывод мы можем из всего этого сделать? По-моему никакого.

Djinn набрал 17 очков (рейтинг 40/40 - 2402)
Eeyore 14.5 (2417)

Выходит Eeyory сильнее при длинных?

Покажи конкретно на что ты намекаешь. На всякий случай стат. ошибка при 23 играх будет где-то 100 - 200 Эло.

 

Там у них заголовок CEGT 40/40, поэтому неправильно понял.
Все-таки очень мало игр. Нужно хотя бы несколько сотен.

Если интересно могу устроить несколько матчей между Анечкой и Иа-Иа с разными контролями начиная с 1+0.

 

Да, было бы очень интересно. Ещё интереснее было бы взять несколько движков, хотя бы 5, и устроить круговой турнир кругов на 100 с разными контролями. Можно всего с тремя, например 1+0, 5+0, 25+0.

 

Когда то делал такой. Но нехватило терпения довести до конца. Единственный результат это что Amyan теряет силу при увеличении контроля.

Могу попробовать заново сделать. Будет 50 кругов. Думаю нужно не меньше 10 движков. Все должны играть примерно в одну силу.
Anechka 0.08
Eeyore 1.48
WildCat 3 (есть подозрение, что сила игры падает с увелич. контроля)
Amyan 1.595

Предлагайте кандидатов!

 

Контроли думаю сделать такие:
2+1
8+4
32+16

 

Обе версии включить? Или только 0.07?

Что-то никто не предлагает какие движки включать в турнир. Совсем никому не интересно?

 

Ну, пусть Грека сыграет. Займёт последнее место

 

Anechka 0.07
Anechka 0.08
Eeyore 1.48
WildCat 3
WildCat 4
Amyan 1.592 (возьму версию постарше, не будет сильно всех остальных мочить)
GreKo 3.3a

Кого еще включить? Нужно еще 3.

 

Предлагаю GnuChess 4 TM, Genesis 2.0 или Scidlet 3.6 - я их часто для тестирования использую. Scidlet из них самый сильный, вроде бы.

 

Еще были слухи, что Little Goliath играет намного лучше в блиц (лично я думаю, что наоборот).

Нужны движки у которых есть подозрения на предпочтение короткого или длинного контроля.

Anechka 0.07
Anechka 0.08
Eeyore 1.48
WildCat 3
WildCat 4
Amyan 1.592
GreKo 3.3a
Little Goliath 3.9
Zeus 1.27
Scidlet 3.6

Пока такой состав. Будут еще предложения?

 

а почему Amyan 1.592 а не 1.597?

 

Объяснял выше. Чтобы он не выносил всех со страшной силой. Со старой версией легче бороться будет.

 

ясно. а алфил последний не возьмешь?

 

Вместо Scidlet могу взять. Есть в нем что-то особенное?

 

Wildcat, включите Little Goliath, любую версию! Очень интересно посмотреть как именно этот движок себя поведёт на разных контролях.

 

Новости КВН:
Команда могилевского СПТУ палачей в очередной раз оказалась на голову выше своих соперников.

 

Вот состав участников:

Alfil 6.7.1
Amyan 1.592
Anechka 0.07
Anechka 0.08
Eeyore 1.48
GreKo 3.3a
Little Goliath 2000 3.9
WildCat 3
WildCat 4
Zeus 1.27

 

у Alfila были когда-то глюки со временем, я автору говорил, он вроде бы исправил. только я не проверял

 

Alfil не катит. Продул по времени в первой же партии. Имел 1.61 секунды на ход. И после хода нагло заявил, что использовал 1.719 сек.

Предлагайте еще какой-нибудь интересный движок. Сила игры желательно в диапазоне 2300 - 2500.

 

Результаты после первого круга (контроль 2+1):

Code:

 1. Amyan 1.592             8.5 / 9
 2. Little Goliath 2000 3.9 7.5 / 9
 3. WildCat 4               6.0 / 9
 4. WildCat 3               5.0 / 9
 5. Eeyore 1.48             4.0 / 9
 6. Zeus 1.27               4.0 / 9
 7. Gaia 3.5                4.0 / 9
 8. Anechka 0.08            4.0 / 9
 9. Anechka 0.07            2.0 / 9
10. GreKo 3.3a              0.0 / 9