AlphaZero. Нейронная сеть играет в шахматы

В целом согласен, добавлю только, что с тем же успехом, как в Го и шахматы, сильный алгоритм можно обучить играть в "Цивилизацию", например. А взрослые дяди и тети, обладающие властью, могут потом передать ему в управление реальные материальные и людские ресурсы ...
Это я ещё оставляю за скобками, как маловероятную, гипотезу Свидлера о фатальной для человечества ошибке в коде такого алгоритма и недостаточно длительном тестировании

 

Ну, обычно, прежде чем начинают большой проект, его предварительно тестируют "на кошках". Точнее, на тех, кого не жалко. Так что, обкатают программу на каком-нибудь Гондурасе, потом проверят на России, а там, глядишь, уже и всю планету можно к ногтю прижать.

 

А я то думал сколько времени займет понять, что это русофобский проект. Даже фотографию Каспарова с руководителем проекта запостил.. Достаточно быстро - 2 дня, ведь шахматисты. А было бы AlphaZero сообразили бы за полсекунды.

 

nn, мы сообразили не за полсекунды, конечно, но и не за два дня.
Мы просто написали об этом через два дня

 

Гугловцев уже предупреждали что им надо бояться ходить в сортир.

 

Тут зависит кто и как будет то использовать. Если смотреть просто - то ИИ это некий учитель чего то... Вспомните фильм "Матрица " как там все учились за несколько минут, даже кунгфу и поймете , что все было предвиденно....

 

Наличие "свободной воли" не является необходимым фактором для того, чтобы ИИ был опасен для человечества. Ведь ИИ может начать небольшую победоносную ядерную войну просто из соображений экономической целесообразности, а не из-за своей русофобии или желания избавить третью планету от людей-паразитов. Да и в целом вопрос "свободы воли" для самообучающихся программ довольно факультативен. Есть ли у альфазеро свобода воли? Конечно нет. Но он волен выбирать те шахматные ходы которые кажутся ему наиболее целесообразными. Таким же образом в будущем продвинутая нейронка сможет принимать максимально целесообразные(как ей кажется) решения и в других областях. И крайне важно, чтобы она не могла их самостоятельно применять.....

 

Benas, Учитель, ага
ИИ пока ещё не создан. Кстати, не только лишь все понимают, что такое настоящий ИИ ...

 

Тут зависит кто и как будет то использовать. Если смотреть просто - то ИИ это некий уничтожитель всего то... Вспомните фильм "Терминатор " как там почти все даже погибли за несколько минут, и поймете , что все было предвиденно...

 

Вроде у Демиса Хассабиса (чел в очках рядом с Гарри; глава Deep Mind) всё в порядке с пониманием шахмат. В вики пишут, что в 13 лет имел 2300 эло (1989 год), второй по своему возрасту в мире (на 1-м Юдит). ЗЫ А вообще, если я правильно понял из статьи по AlphaZero (https://arxiv.org/pdf/1712.01815.pdf), с которой вся шумиха началась, то Каспаров косвенным образом "поучаствовал" в обучении A0, т.к. авторы сего монстра использовали 100.000 человеческих партий для анализа нейросетью, а потом уже, после этой "настройки" AlphaZero начал (начала,начало) тренироваться сам с собой.

 

Но цель куда движеться это есть - то, по крайней мере на словах. Но думаю в ближайшем будущем важно немножко другое. Даже пусть берем шахматы или го и просто представь, что будет, еслиб такой "учитель" будет доступен для одних , но не доступен для других ...последстия такого хоть представляешь ?
Нафиг все книги и все тренеры и все учителя...нужен только один, который покажет кратчайший путь. Трудно представить, как это повлияет на жизнь миллионов людей. Вот это меня реально волнует....

 

Нет, ничего не использовалось при обучении. Сам с собой играл только. Zero как раз это и обозначает в названии. И если нуждается в пояснении, то то шутка, конечно, была.

 

Видимо вас ввело в заблуждение следующее:
Finally, we analysed the chess knowledge discovered by AlphaZero. Table 2 analyses the
most common human openings (those played more than 100,000 times in an online database
of human chess games (1)). Each of these openings is independently discovered and played
frequently by AlphaZero during self-play training.
When starting from each human opening,
AlphaZero convincingly defeated Stockfish, suggesting that it has indeed mastered a wide spectrum
of chess play.
Но здесь утверждается не то, что A0 использовал человеческие открытия для обучения, а то что он независимо воспроизводил их во время тренировочных игр и то, что в популярных дебютных ветках он также победил Стокфиш.
А обучался A0 самостоятельно, в этом то и вся суть. Он с абсолютного нуля, зная лишь как ходят фигуры смог за несколько часов научиться играть в шахматы лучше чем топовые программы, которые не самые слабые шахматисты и программисты годами доводили до ума. ИИ за несколько часов добился в шахматах большего, чем человечество за несколько десятилетий.
Но дело не в этом, а в том что, ну какой вообще может быть тренер для самообучающейся!!! нейронки, вы серьезно
.

 

Benas, "хоть представляю", вот только на брудершафт мы с Вами пока ещё не пили, ЕМНИП ...

 

ПО-моему, там такого нет. Есть просто статистика по дебютам, которые случались в человечьих партиях из базы более 100.000 раз. Но играла их машина сама, вроде бы.

 

Исходя из того, что в DeepMind'е из стратегических игр выбрали StarCraft (исходники обучения на github'е) для обучения своего "детища", то, видимо, ему пока готовится миссия инопланетных завоеваний.

 

пока что имеющиеся программы играют неважно, даже любители вроде меня обыгрывают их (у меня платиновая лига - 4 из 7: бронза, серебро, золото, платина, алмаз, мастер, грандмастер. Грандмастер - это 200 сильнейших игроков). Потому что starcraft - игра с неполной информацией. Т.е. есть туман войны. Иначе говоря, вы знаете ландшафт местности, но не видите войска соперника дальше собственной базы. Больше похоже на карточную игру.
Впрочем, думаю, что deepmind решит и эту задачу.

 

Воля позволяет сказать "нет". Альфазеро не может сказать "нет, засуньте себе в опу свои шахматы, хочу читать Пастернака и играть на скрипке"

Не совсем понял при чем тут русофобия.
Ну да ладно. Если у ИИ нет свободы воли и он не может выйти за рамки заданных критериев, то он не начнет "делать из людей скрепки" пока не получит прямой команды от белкового либо пока не получит (опять же от белкового) криво заданный критерий, приводящий ИИ к необходимости проредить человеческий род. Ну или не криво, а очень даже специально заданный критерий. Но опять же: заданный человеком критерий. Что снова возвращает нас к тезису что опасен не ИИ, а взрослые дяди и тети, которые будут этим ИИ рулить.

 

Если не решит, доверят миссию Вам.

 

Ну A0 не с потолка взялся, его создали люди, используя человеческие же технологии и алгоритмы. MCTS (Монте-Карло), к слову, используемый нейросетью A0 известен десятилетия, его пытались использовать и для шахмат ранее, но движки с использованием Альфа-бета играли значительно сильнее и, условно говоря, шахматные программисты пошли по этой дорожке, совершенствуя данный алгоритм (как наиболее перспективный). С появлением нейросетей АБ пытались "прикрутить" туда (DeepChess,NeuroChess и тд), а потом пришел Демис Хассабис, проанализировал опыт предшественников, учёл их ошибки, внёс свои знания и наработки, и появилось то, что теперь называется AlphaZero.

 

Зато в доту лучший бот играет на уровне практически тир-1 игроков, а более слабые ему даже проигрывали. Вон Денди ему мид проиграл, так что и без deepmind справились бы

 

Тогда надо очень осторожно задавать эти "критерии". Человек может из лучших побуждений дать ИИ задачу, например улучшить жизнь людей. Нет никаких гарантий того, что после 4 часового размышления программа не решит, что надо делать из людей скрепки, т.к. в таком виде они дольше хранятся, не портятся, не болеют, не воюют и т.д. Или модифицирует геном человека, изменив хромосому, т.к. с улучшенным синдромом Дауна (который машина придумает попутно, переплюнув достижения генетиков за 50 лет) люди проявляют меньше агрессии, всегда счастливы (благодаря стабильно высокому уровню серотонина), следовательно исключается мировая атомная война, радикализм, экстремизм и тому подобное. Я специально сгущаю краски, просто хотелось бы что мы рассмотрели все варианты, как тупой шахматный движок 20-летней давности. И главный вопрос - если человек был бы настолько умен как этот ИИ, может он так и поступил бы (как описано выше) ?

 

Несовсем понял из за чего обижаться ?

 

Benas, зато Вы про ИИ уже всё поняли ...
Смените тон общения, и букву "т" на на букву "в" в коротком обращении.

 

Нифига не понял: народ, вы о чем? Вы что, реально считаете, что наступает эра Терминатора1/2/2/3/4 и далее по списку?
Все на самом деле и проще и приземленнее: поскольку этот А0 умеет находить оптимальные - и даже не побоюсь сказать это слово: "гениальные" - решения, то это означает лишь одно: можно прогнозировать развитие экономической и политической ситуации в глобальном масштабе. То есть, некие дяди получают в руки идеальные прогностический инструмент. В экселе есть такая функция: создаешь формулу, потом подставляешь в нее значения, и потом смотришь, что получается в итоге. Так можно эмпирическим путем подобрать необходимые значения, чтобы ответ соответствовал изначальной задаче. Вот, эта самая А0 и есть этот самый инструмент - ему вводят изначальные значения, а он выдает финальный результат. Неким дядям остается только сравнить графики, сделать выводы, написать отчет и отправить его на стол Президенту одной очень демократической страны, чтобы он знал как надо действовать в данной конкретной политической ситуации.
Это означает, что в глобальной политической игре нам светит кирдык. Не сразу, не сразу. Но неизбежно.

 

Это интернет, здесь каждый общается как хочет.
Тебе никто ничем не обязан.

 

Про людей-вещей (своеобразные "болванчики" со специально пониженными способностями, работающие на т.н. "элиту") времен Атлантиды еще Кейси в своих чтениях говорил, для осуществления подобного безобразия ИИ не требуется. Соглашусь с теми, кто пишет, что опасен не сам ИИ как таковой, а люди, которые захотят им манипулировать в своих корыстных целях.

 

Хоть это и оффтоп, но выскажусь: недавно на форуме эту тему уже обсуждали. Обращение на "ты" к незнакомому человеку на данном форуме, это нарушение Правил данного форума. Советую все же Правила соблюдать.

 

Зачем тогда Гугл публикует свои результаты? Если можно все протестировать в закрытом режиме. Чтобы с помощь обратной связи с энтузиастами со всего мира латать дыры в программе?. Хотя и ясно, что профильные органы в США внимательно следят за всеми новшествами, помимо того что сами разрабатывают ИИ и не только. Вообще нет сомнений что если настоящий ИИ появится, то с вероятностью 90% это будет в США.

 

Обучение на 5000tpu
Игра на 4tpu
На домашнем компе будет работать на видеокарте.
СЮ нужно закупать видюхи игровые теперь, а не 24-ядерные машины.

 

Обычно старикам позволенно к молодым обращаться и на ты....просто по возрасту, но я могу и на Вы, если так желаете , мне то без разницы. Но впечатление такое, что кто то просто хочет придираться....

 

Денди обыграл бот от компании OpenAI, основатель Илон Маск, наверняка слышали про его проекты SpaceX и Tesla. Причем обыграл он не только Денди, он играл и с другими про игроками и общий счет 20-1 в пользу бота. Так что там тоже крайне серьезная нейросетка.
И правильно вчера Свидлер сказал: как бы они там в пытаясь опередить друг-друг, не нанесли серьезный ущерб человечеству.
Впрочем паниковать пока рано.
_________________________________-
Основатель компаний SpaceX и Tesla Илон Маск назвал искусственный интеллект «самым большим риском, с которым мы (человечество) сталкиваемся как цивилизация», сообщает журнал Fortune со ссылкой на заявление предпринимателя на встрече Национальной ассоциации губернаторов. Он призвал правительство к быстрому и решительному вмешательству в ситуацию, сложившуюся в технологической отрасли.

Бизнесмен пояснил, что компании, устраивая гонку за более передовыми технологиями, могут забыть про те опасности, которые исходят от искусственного интеллекта. По мнению миллиардера, сдержать разработчиков в погоне за все более совершенным искусственным интеллектом способно лишь государственное регулирование в этой отрасли.

 

"Киборги, они заполонили всю планету. Они, киборги" ©
А. Рева​

История со Слюсарчуком начиналась аналогично: на кухне вслепую обыграл какого старого гросса, раздули шумиху про мегамозг, куча роликов по ТВ. Апогей -погромлена Рыбка. Тоже вслепую. "Нейромозг" играл в бисову силу, а Рыбка чето тоже пару раз тупила. Приставили к правительственным наградам. Потом разоблачение и тюрьма.
А здесь через месяц будет: - Ребята, мы пошутили.

 

Между Слюсарчуком и гуглом есть большая разница. Первому крайне хотелось известности и денег. А у вторых в первое и второе есть в огромных количествах.....