AlphaZero. Нейронная сеть играет в шахматы

Тема в разделе "Машинное отделение", создана пользователем grizly, 6 дек 2017.

  1. Нестор консультант_ специалист по черной магии

    • Заслуженный
    • Участник
    • Старожил
    Рег.:
    10.04.2006
    Сообщения:
    2.955
    Симпатии:
    3.311
    Репутация:
    331
    Адрес:
    Москва
    Оффлайн
    В целом согласен, добавлю только, что с тем же успехом, как в Го и шахматы, сильный алгоритм можно обучить играть в "Цивилизацию", например. А взрослые дяди и тети, обладающие властью, могут потом передать ему в управление реальные материальные и людские ресурсы ...
    Это я ещё оставляю за скобками, как маловероятную, гипотезу Свидлера о фатальной для человечества ошибке в коде такого алгоритма и недостаточно длительном тестировании ;)
    Vladruss нравится это.
  2. Vladruss НедоКМС, победитель второразрядников.

    • Заслуженный
    • Ветеран
    • Заблокирован
    Рег.:
    30.12.2009
    Сообщения:
    13.714
    Симпатии:
    6.417
    Репутация:
    471
    Нарушения:
    31
    Оффлайн
    Ну, обычно, прежде чем начинают большой проект, его предварительно тестируют "на кошках". Точнее, на тех, кого не жалко. Так что, обкатают программу на каком-нибудь Гондурасе, потом проверят на России, а там, глядишь, уже и всю планету можно к ногтю прижать.
    Нестор нравится это.
  3. nn Старожил

    • Участник
    • Старожил
    Рег.:
    25.03.2007
    Сообщения:
    1.141
    Симпатии:
    2.857
    Репутация:
    111
    Нарушения:
    18
    Оффлайн
    А я то думал сколько времени займет понять, что это русофобский проект. Даже фотографию Каспарова с руководителем проекта запостил.. Достаточно быстро - 2 дня, ведь шахматисты. А было бы AlphaZero сообразили бы за полсекунды.
    ajax111, Комсюк и Нестор нравится это.
  4. Нестор консультант_ специалист по черной магии

    • Заслуженный
    • Участник
    • Старожил
    Рег.:
    10.04.2006
    Сообщения:
    2.955
    Симпатии:
    3.311
    Репутация:
    331
    Адрес:
    Москва
    Оффлайн
    nn, мы сообразили не за полсекунды, конечно, но и не за два дня.
    Мы просто написали об этом через два дня ;)
  5. ШахматыЭтоДиагноз Учаcтник

    • Участник
    Рег.:
    31.03.2017
    Сообщения:
    2.129
    Симпатии:
    2.668
    Репутация:
    137
    Онлайн
    Гугловцев уже предупреждали что им надо бояться ходить в сортир.
    Нестор нравится это.
  6. Benas Учаcтник

    • Участник
    Рег.:
    09.05.2017
    Сообщения:
    140
    Симпатии:
    26
    Репутация:
    1
    Оффлайн
    Тут зависит кто и как будет то использовать. Если смотреть просто - то ИИ это некий учитель чего то... Вспомните фильм "Матрица " как там все учились за несколько минут, даже кунгфу и поймете , что все было предвиденно....
  7. Котэ Восьмикратный чемпион подъезда

    • Участник
    • Старожил
    Рег.:
    29.04.2010
    Сообщения:
    987
    Симпатии:
    391
    Репутация:
    12
    Оффлайн
    Наличие "свободной воли" не является необходимым фактором для того, чтобы ИИ был опасен для человечества. Ведь ИИ может начать небольшую победоносную ядерную войну просто из соображений экономической целесообразности, а не из-за своей русофобии или желания избавить третью планету от людей-паразитов:D. Да и в целом вопрос "свободы воли" для самообучающихся программ довольно факультативен. Есть ли у альфазеро свобода воли? Конечно нет. Но он волен выбирать те шахматные ходы которые кажутся ему наиболее целесообразными. Таким же образом в будущем продвинутая нейронка сможет принимать максимально целесообразные(как ей кажется) решения и в других областях. И крайне важно, чтобы она не могла их самостоятельно применять.....
    Любитель_, Undying, sovaz1997 и ещё 1-му нравится это.
  8. Нестор консультант_ специалист по черной магии

    • Заслуженный
    • Участник
    • Старожил
    Рег.:
    10.04.2006
    Сообщения:
    2.955
    Симпатии:
    3.311
    Репутация:
    331
    Адрес:
    Москва
    Оффлайн
    Benas, Учитель, ага ;)
    ИИ пока ещё не создан. Кстати, не только лишь все понимают, что такое настоящий ИИ ...
  9. Котэ Восьмикратный чемпион подъезда

    • Участник
    • Старожил
    Рег.:
    29.04.2010
    Сообщения:
    987
    Симпатии:
    391
    Репутация:
    12
    Оффлайн
    Тут зависит кто и как будет то использовать. Если смотреть просто - то ИИ это некий уничтожитель всего то... Вспомните фильм "Терминатор " как там почти все даже погибли за несколько минут, и поймете , что все было предвиденно:D...
  10. N1mTzo Учаcтник

    • Участник
    Рег.:
    16.04.2008
    Сообщения:
    318
    Симпатии:
    30
    Репутация:
    1
    Оффлайн
    Вроде у Демиса Хассабиса (чел в очках рядом с Гарри; глава Deep Mind) всё в порядке с пониманием шахмат. В вики пишут, что в 13 лет имел 2300 эло (1989 год), второй по своему возрасту в мире (на 1-м Юдит). ЗЫ А вообще, если я правильно понял из статьи по AlphaZero (https://arxiv.org/pdf/1712.01815.pdf), с которой вся шумиха началась, то Каспаров косвенным образом "поучаствовал" в обучении A0, т.к. авторы сего монстра использовали 100.000 человеческих партий для анализа нейросетью, а потом уже, после этой "настройки" AlphaZero начал (начала,начало) тренироваться сам с собой.
  11. Benas Учаcтник

    • Участник
    Рег.:
    09.05.2017
    Сообщения:
    140
    Симпатии:
    26
    Репутация:
    1
    Оффлайн
    Но цель куда движеться это есть - то, по крайней мере на словах. Но думаю в ближайшем будущем важно немножко другое. Даже пусть берем шахматы или го и просто представь, что будет, еслиб такой "учитель" будет доступен для одних , но не доступен для других ...последстия такого хоть представляешь ?
    Нафиг все книги и все тренеры и все учителя...нужен только один, который покажет кратчайший путь. Трудно представить, как это повлияет на жизнь миллионов людей. Вот это меня реально волнует....
    Любитель_ нравится это.
  12. nn Старожил

    • Участник
    • Старожил
    Рег.:
    25.03.2007
    Сообщения:
    1.141
    Симпатии:
    2.857
    Репутация:
    111
    Нарушения:
    18
    Оффлайн
    Нет, ничего не использовалось при обучении. Сам с собой играл только. Zero как раз это и обозначает в названии. И если нуждается в пояснении, то то шутка, конечно, была.
  13. Котэ Восьмикратный чемпион подъезда

    • Участник
    • Старожил
    Рег.:
    29.04.2010
    Сообщения:
    987
    Симпатии:
    391
    Репутация:
    12
    Оффлайн
    Видимо вас ввело в заблуждение следующее:
    Finally, we analysed the chess knowledge discovered by AlphaZero. Table 2 analyses the
    most common human openings (those played more than 100,000 times in an online database
    of human chess games (1)). Each of these openings is independently discovered and played
    frequently by AlphaZero during self-play training.
    When starting from each human opening,
    AlphaZero convincingly defeated Stockfish, suggesting that it has indeed mastered a wide spectrum
    of chess play.
    Но здесь утверждается не то, что A0 использовал человеческие открытия для обучения, а то что он независимо воспроизводил их во время тренировочных игр и то, что в популярных дебютных ветках он также победил Стокфиш.
    А обучался A0 самостоятельно, в этом то и вся суть. Он с абсолютного нуля, зная лишь как ходят фигуры смог за несколько часов научиться играть в шахматы лучше чем топовые программы, которые не самые слабые шахматисты и программисты годами доводили до ума. ИИ за несколько часов добился в шахматах большего, чем человечество за несколько десятилетий.
    Но дело не в этом, а в том что, ну какой вообще может быть тренер для самообучающейся!!! нейронки, вы серьезно:lol:
    .
    Любитель_, Gridnev, sovaz1997 и 2 другим нравится это.
  14. Нестор консультант_ специалист по черной магии

    • Заслуженный
    • Участник
    • Старожил
    Рег.:
    10.04.2006
    Сообщения:
    2.955
    Симпатии:
    3.311
    Репутация:
    331
    Адрес:
    Москва
    Оффлайн
    Benas, "хоть представляю", вот только на брудершафт мы с Вами пока ещё не пили, ЕМНИП ...
  15. longinean Учаcтник

    • Участник
    Рег.:
    12.04.2015
    Сообщения:
    2.226
    Симпатии:
    7.098
    Репутация:
    116
    Оффлайн
    ПО-моему, там такого нет. Есть просто статистика по дебютам, которые случались в человечьих партиях из базы более 100.000 раз. Но играла их машина сама, вроде бы.
  16. Gottfrid Учаcтник

    • Участник
    Рег.:
    14.03.2016
    Сообщения:
    1.783
    Симпатии:
    2.213
    Репутация:
    112
    Адрес:
    Москва
    Онлайн
    Исходя из того, что в DeepMind'е из стратегических игр выбрали StarCraft (исходники обучения на github'е) для обучения своего "детища", то, видимо, ему пока готовится миссия инопланетных завоеваний. :roll:
    nn, longinean и Нестор нравится это.
  17. Michael-13 Господин

    • Участник
    Рег.:
    18.11.2011
    Сообщения:
    3.069
    Симпатии:
    1.101
    Репутация:
    29
    Оффлайн
    пока что имеющиеся программы играют неважно, даже любители вроде меня обыгрывают их (у меня платиновая лига - 4 из 7: бронза, серебро, золото, платина, алмаз, мастер, грандмастер. Грандмастер - это 200 сильнейших игроков). Потому что starcraft - игра с неполной информацией. Т.е. есть туман войны. Иначе говоря, вы знаете ландшафт местности, но не видите войска соперника дальше собственной базы. Больше похоже на карточную игру.
    Впрочем, думаю, что deepmind решит и эту задачу.
    felagund08, nn и Gridnev нравится это.
  18. Astrey Учаcтник

    • Участник
    Рег.:
    19.03.2015
    Сообщения:
    671
    Симпатии:
    752
    Репутация:
    54
    Оффлайн
    Воля позволяет сказать "нет". Альфазеро не может сказать "нет, засуньте себе в опу свои шахматы, хочу читать Пастернака и играть на скрипке"

    Не совсем понял при чем тут русофобия.
    Ну да ладно. Если у ИИ нет свободы воли и он не может выйти за рамки заданных критериев, то он не начнет "делать из людей скрепки" пока не получит прямой команды от белкового либо пока не получит (опять же от белкового) криво заданный критерий, приводящий ИИ к необходимости проредить человеческий род. Ну или не криво, а очень даже специально заданный критерий. Но опять же: заданный человеком критерий. Что снова возвращает нас к тезису что опасен не ИИ, а взрослые дяди и тети, которые будут этим ИИ рулить.
  19. Gottfrid Учаcтник

    • Участник
    Рег.:
    14.03.2016
    Сообщения:
    1.783
    Симпатии:
    2.213
    Репутация:
    112
    Адрес:
    Москва
    Онлайн
    Если не решит, доверят миссию Вам.
  20. N1mTzo Учаcтник

    • Участник
    Рег.:
    16.04.2008
    Сообщения:
    318
    Симпатии:
    30
    Репутация:
    1
    Оффлайн
    Ну A0 не с потолка взялся, его создали люди, используя человеческие же технологии и алгоритмы. MCTS (Монте-Карло), к слову, используемый нейросетью A0 известен десятилетия, его пытались использовать и для шахмат ранее, но движки с использованием Альфа-бета играли значительно сильнее и, условно говоря, шахматные программисты пошли по этой дорожке, совершенствуя данный алгоритм (как наиболее перспективный). С появлением нейросетей АБ пытались "прикрутить" туда (DeepChess,NeuroChess и тд), а потом пришел Демис Хассабис, проанализировал опыт предшественников, учёл их ошибки, внёс свои знания и наработки, и появилось то, что теперь называется AlphaZero.
  21. Neo94 Заблокирован

    • Участник
    • Заблокирован
    Рег.:
    15.11.2014
    Сообщения:
    434
    Симпатии:
    143
    Репутация:
    -10
    Нарушения:
    31
    Оффлайн
    Зато в доту лучший бот играет на уровне практически тир-1 игроков, а более слабые ему даже проигрывали. Вон Денди ему мид проиграл, так что и без deepmind справились бы
  22. Baron Учаcтник

    • Участник
    Рег.:
    08.02.2008
    Сообщения:
    2.351
    Симпатии:
    235
    Репутация:
    11
    Оффлайн
    Тогда надо очень осторожно задавать эти "критерии". Человек может из лучших побуждений дать ИИ задачу, например улучшить жизнь людей. Нет никаких гарантий того, что после 4 часового размышления программа не решит, что надо делать из людей скрепки, т.к. в таком виде они дольше хранятся, не портятся, не болеют, не воюют и т.д. Или модифицирует геном человека, изменив хромосому, т.к. с улучшенным синдромом Дауна (который машина придумает попутно, переплюнув достижения генетиков за 50 лет) люди проявляют меньше агрессии, всегда счастливы (благодаря стабильно высокому уровню серотонина), следовательно исключается мировая атомная война, радикализм, экстремизм и тому подобное. Я специально сгущаю краски, просто хотелось бы что мы рассмотрели все варианты, как тупой шахматный движок 20-летней давности. И главный вопрос - если человек был бы настолько умен как этот ИИ, может он так и поступил бы (как описано выше) ?
  23. Benas Учаcтник

    • Участник
    Рег.:
    09.05.2017
    Сообщения:
    140
    Симпатии:
    26
    Репутация:
    1
    Оффлайн
    Несовсем понял из за чего обижаться ?
  24. Нестор консультант_ специалист по черной магии

    • Заслуженный
    • Участник
    • Старожил
    Рег.:
    10.04.2006
    Сообщения:
    2.955
    Симпатии:
    3.311
    Репутация:
    331
    Адрес:
    Москва
    Оффлайн
    Benas, зато Вы про ИИ уже всё поняли ...
    Смените тон общения, и букву "т" на на букву "в" в коротком обращении.
  25. Vladruss НедоКМС, победитель второразрядников.

    • Заслуженный
    • Ветеран
    • Заблокирован
    Рег.:
    30.12.2009
    Сообщения:
    13.714
    Симпатии:
    6.417
    Репутация:
    471
    Нарушения:
    31
    Оффлайн
    Нифига не понял: народ, вы о чем? Вы что, реально считаете, что наступает эра Терминатора1/2/2/3/4 и далее по списку?
    Все на самом деле и проще и приземленнее: поскольку этот А0 умеет находить оптимальные - и даже не побоюсь сказать это слово: "гениальные" - решения, то это означает лишь одно: можно прогнозировать развитие экономической и политической ситуации в глобальном масштабе. То есть, некие дяди получают в руки идеальные прогностический инструмент. В экселе есть такая функция: создаешь формулу, потом подставляешь в нее значения, и потом смотришь, что получается в итоге. Так можно эмпирическим путем подобрать необходимые значения, чтобы ответ соответствовал изначальной задаче. Вот, эта самая А0 и есть этот самый инструмент - ему вводят изначальные значения, а он выдает финальный результат. Неким дядям остается только сравнить графики, сделать выводы, написать отчет и отправить его на стол Президенту одной очень демократической страны, чтобы он знал как надо действовать в данной конкретной политической ситуации.
    Это означает, что в глобальной политической игре нам светит кирдык. Не сразу, не сразу. Но неизбежно.
  26. Neo94 Заблокирован

    • Участник
    • Заблокирован
    Рег.:
    15.11.2014
    Сообщения:
    434
    Симпатии:
    143
    Репутация:
    -10
    Нарушения:
    31
    Оффлайн
    Это интернет, здесь каждый общается как хочет.
    Тебе никто ничем не обязан.
    thenewone нравится это.
  27. N1mTzo Учаcтник

    • Участник
    Рег.:
    16.04.2008
    Сообщения:
    318
    Симпатии:
    30
    Репутация:
    1
    Оффлайн
    Про людей-вещей (своеобразные "болванчики" со специально пониженными способностями, работающие на т.н. "элиту") времен Атлантиды еще Кейси в своих чтениях говорил, для осуществления подобного безобразия ИИ не требуется. Соглашусь с теми, кто пишет, что опасен не сам ИИ как таковой, а люди, которые захотят им манипулировать в своих корыстных целях.
  28. Vladruss НедоКМС, победитель второразрядников.

    • Заслуженный
    • Ветеран
    • Заблокирован
    Рег.:
    30.12.2009
    Сообщения:
    13.714
    Симпатии:
    6.417
    Репутация:
    471
    Нарушения:
    31
    Оффлайн
    Хоть это и оффтоп, но выскажусь: недавно на форуме эту тему уже обсуждали. Обращение на "ты" к незнакомому человеку на данном форуме, это нарушение Правил данного форума. Советую все же Правила соблюдать.
    sovaz1997, Antuan и Нестор нравится это.
  29. Baron Учаcтник

    • Участник
    Рег.:
    08.02.2008
    Сообщения:
    2.351
    Симпатии:
    235
    Репутация:
    11
    Оффлайн
    Зачем тогда Гугл публикует свои результаты? Если можно все протестировать в закрытом режиме. Чтобы с помощь обратной связи с энтузиастами со всего мира латать дыры в программе?. Хотя и ясно, что профильные органы в США внимательно следят за всеми новшествами, помимо того что сами разрабатывают ИИ и не только. Вообще нет сомнений что если настоящий ИИ появится, то с вероятностью 90% это будет в США.
  30. pavelgttfj8 Учаcтник

    • Участник
    Рег.:
    07.12.2017
    Сообщения:
    265
    Симпатии:
    76
    Репутация:
    2
    Оффлайн
    Обучение на 5000tpu
    Игра на 4tpu
    На домашнем компе будет работать на видеокарте.
    СЮ нужно закупать видюхи игровые теперь, а не 24-ядерные машины.
  31. Benas Учаcтник

    • Участник
    Рег.:
    09.05.2017
    Сообщения:
    140
    Симпатии:
    26
    Репутация:
    1
    Оффлайн
    Обычно старикам позволенно к молодым обращаться и на ты....просто по возрасту, но я могу и на Вы, если так желаете , мне то без разницы. Но впечатление такое, что кто то просто хочет придираться....
  32. Antuan moderator

    • Команда форума
    Рег.:
    24.02.2006
    Сообщения:
    5.611
    Симпатии:
    2.062
    Репутация:
    248
    Адрес:
    Estonia
    Оффлайн
    В общем, я с Вами согласен

    Однако, на данном Форуме и Вам и мне предписано - уважительно обращаться к нашим Пользователям.
    Т.е. без Тыкания
    При жалобах (т.е. тем, кому это не нравится) возможно получить наказание.
  33. Котэ Восьмикратный чемпион подъезда

    • Участник
    • Старожил
    Рег.:
    29.04.2010
    Сообщения:
    987
    Симпатии:
    391
    Репутация:
    12
    Оффлайн
    Денди обыграл бот от компании OpenAI, основатель Илон Маск, наверняка слышали про его проекты SpaceX и Tesla. Причем обыграл он не только Денди, он играл и с другими про игроками и общий счет 20-1 в пользу бота. Так что там тоже крайне серьезная нейросетка.
    И правильно вчера Свидлер сказал: как бы они там в пытаясь опередить друг-друг, не нанесли серьезный ущерб человечеству.
    Впрочем паниковать пока рано.
    _________________________________-
    Основатель компаний SpaceX и Tesla Илон Маск назвал искусственный интеллект «самым большим риском, с которым мы (человечество) сталкиваемся как цивилизация», сообщает журнал Fortune со ссылкой на заявление предпринимателя на встрече Национальной ассоциации губернаторов. Он призвал правительство к быстрому и решительному вмешательству в ситуацию, сложившуюся в технологической отрасли.

    Бизнесмен пояснил, что компании, устраивая гонку за более передовыми технологиями, могут забыть про те опасности, которые исходят от искусственного интеллекта. По мнению миллиардера, сдержать разработчиков в погоне за все более совершенным искусственным интеллектом способно лишь государственное регулирование в этой отрасли.
  34. Swordman Vladyslav

    • Заслуженный
    • Участник
    Рег.:
    24.01.2007
    Сообщения:
    836
    Симпатии:
    86
    Репутация:
    1
    Адрес:
    Украина
    Оффлайн
    "Киборги, они заполонили всю планету. Они, киборги" ©
    А. Рева
    История со Слюсарчуком начиналась аналогично: на кухне вслепую обыграл какого старого гросса, раздули шумиху про мегамозг, куча роликов по ТВ. Апогей -погромлена Рыбка. Тоже вслепую. "Нейромозг" играл в бисову силу, а Рыбка чето тоже пару раз тупила. Приставили к правительственным наградам. Потом разоблачение и тюрьма.
    А здесь через месяц будет: - Ребята, мы пошутили.
  35. Котэ Восьмикратный чемпион подъезда

    • Участник
    • Старожил
    Рег.:
    29.04.2010
    Сообщения:
    987
    Симпатии:
    391
    Репутация:
    12
    Оффлайн
    Между Слюсарчуком и гуглом есть большая разница. Первому крайне хотелось известности и денег. А у вторых в первое и второе есть в огромных количествах.....
    Gridnev, Комсюк и crem нравится это.

Поделиться этой страницей