Компьютерная революция в шахматах

Шахматные турниры на форуме, обсуждение теории и новостей

Компьютерная революция в шахматах

Сообщение Fouras » Чт дек 14, 2017 12:20 am

Вот как СтокФиш оценивает изменение качества позиции:

Изображение

Качество меняется постепенно. Но если вдруг человек сделал бы ход, который ухудшил бы качество резко, АльфаЗеро только бы спасибо ему сказала. Просто меньше ходов до победы.
Последний раз редактировалось Fouras Чт дек 14, 2017 12:28 am, всего редактировалось 1 раз.
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Компьютерная революция в шахматах

Сообщение Oleg » Чт дек 14, 2017 12:21 am

ENTP писал(а):
Oleg писал(а):АльфаЗеро выиграл без слона и двух пешек у проги с рейтингом в 3400

Разве это не является тревожным звоночком, что времени проге не хватило?
Хорошо, если бы гроссмейстеры допустили в своей голове мысль: "Стокфиш мог зевнуть" и посмотрели, происходили ли в партии такие моменты.

СтокФиш зевнул в одной из партий из-за нехватка времени, он мог вничью сыграть.
Конкретно в той, гроссы говорят, что СтокФиш выбирал вполне адекватные ходы, но уползти не смог.
Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Oleg » Чт дек 14, 2017 1:00 am

«Alpha Zero играла сама с собой всего девять часов, но это были часы на тех ещё стероидах – более 5,000 тензорных процессоров, разработанных Google специально для машинного обучения. За это время она сыграла 44 миллиона партий – в несколько раз больше, чем все шахматные профессионалы в истории человечества»
Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Fouras » Чт дек 14, 2017 1:03 am

Oleg писал(а):
«Alpha Zero играла сама с собой всего девять часов, но это были часы на тех ещё стероидах – более 5,000 тензорных процессоров, разработанных Google специально для машинного обучения. За это время она сыграла 44 миллиона партий – в несколько раз больше, чем все шахматные профессионалы в истории человечества»


Это обучение шло на таком железе. Чтобы обучить чип распознавать улыбку в кадре, используют мощное железо, которое считает месяцами. А распознавание идет на лету на дохлом процессоре.

То же самое и здесь: обучал сеть кластер, а играла относительно простая (по меркам гугла) железяка.
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Компьютерная революция в шахматах

Сообщение Oleg » Пн дек 18, 2017 11:56 pm

А сколько компов в кластере обучающем было?
Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Fouras » Вт дек 19, 2017 12:36 am

Oleg писал(а):А сколько компов в кластере обучающем было?


Training proceeded for 700,000 steps (mini-batches of size 4,096) starting from randomly initialised parameters, using 5,000 first-generation TPUs (15) to generate self-play games and 64 second-generation TPUs to train the neural networks.


На один комп ставится 4 TPU, то есть, всего было использовано 5000/4+64/4= 1266 компа.

В пересчете на обычные компы, наверное будет более 20 000 (по порядку величины).

Конечно, компы там - это такие пластины, в одну стойку пихают сейчас 132 компа, но это обычных серверов, а с TPU, наверное, потолще будут. И конечно они не прямо в дата центре программу ставили, это распределенно считалось и точную цифру они и сами не знают.
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Компьютерная революция в шахматах

Сообщение Oleg » Ср дек 20, 2017 11:54 pm

4 часа на 20 тысяч компов это все-таки не так мало, получается 80 тысяч часов, а это примерно 50 лет на одном современном компе.
А то уж можно было подумать что человечество совсем тупое, раз за 4 часа шахматы железяка раскусила.

Дальше будут более сложные задачи решать:
- такси без водителя (уже есть работающий проект у Google)
- перевод на уровне профи с основных языков (пока качество Google-переводчика не дотягивает до человеческого, но смысл уже ясен, 5 лет назад все было сильно хуже)
- предсказание погоды
- предсказание землетрясений
- эмуляция великих художников для новых картин
- создание музыки
- создание домов и заводов
- открытие новых законов в математике, физике, астрономии
- создание космолетов для межзвездных перелетов

В целом человеческий интеллект будет обесцениваться довольно быстро.
Но лет 20 у нас еще есть.
К тому же такие работы как психолог, программист, генетик, робототехник скорее всего будут востребованы до конца 21 века.
Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Fouras » Чт дек 21, 2017 12:03 am

Oleg писал(а):4 часа на 20 тысяч компов это все-таки не так мало, получается 80 тысяч часов, а это примерно 50 лет на одном современном компе.
А то уж можно было подумать что человечество совсем тупое, раз за 4 часа шахматы железяка раскусила.


Даже так: за 4 часа АльфаЗеро сравнялся в силе со СтокФиш, поэтому эта цифра часто упоминается. Чтобы заметно превзойти СтокФиш, гоняли 9 часов. Это уже более 100 лет. Без сна и отдыха.

Еще надо участь, сколько было попыток и подборов стратегии обучения. Можно подумать, что они взяли и за 9 часов сбацали. Ничего подобного, 9 часов это только финальная версия, а до этого они 2 года мучили компьютеры и подбирали стратегии, число слоев, принципы обучения, способы коррекции оценочной функции. Вот это человеческая работа. А железяка только считала то, что придумали люди.

Самый сильный ход был в том, чтобы придумать такую стратегию обучения, которая позволила по ходу дела создавать обучающую выборку, а не обучать по предоставленной заранее.
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Компьютерная революция в шахматах

Сообщение Oleg » Чт дек 21, 2017 12:36 am

Fouras, они все-таки конкретно шахматам ее не обучали, возможно подбирали параметры экспериментальным путем.
Но по словам представителя Гугла, можно натравить нейросеть на любую другую игру с полной инфой, дав только правила и она сама все сделает.
Это намного более универсальный подход чем у специализированных шахматных программ, но до полной универсальности конечно далеко, когда будут просто ставить проблему, а комп сам искать решение.
Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Asqard » Чт дек 21, 2017 12:45 am

Oleg писал(а):4 часа на 20 тысяч компов это все-таки не так мало, получается 80 тысяч часов, а это примерно 50 лет на одном современном компе.
А то уж можно было подумать что человечество совсем тупое, раз за 4 часа шахматы железяка раскусила.

Дальше будут более сложные задачи решать:
- такси без водителя (уже есть работающий проект у Google)
- перевод на уровне профи с основных языков (пока качество Google-переводчика не дотягивает до человеческого, но смысл уже ясен, 5 лет назад все было сильно хуже)
- предсказание погоды
- предсказание землетрясений
- эмуляция великих художников для новых картин
- создание музыки
- создание домов и заводов
- открытие новых законов в математике, физике, астрономии
- создание космолетов для межзвездных перелетов

В целом человеческий интеллект будет обесцениваться довольно быстро.
Но лет 20 у нас еще есть.
К тому же такие работы как психолог, программист, генетик, робототехник скорее всего будут востребованы до конца 21 века.

Такие технологии открывают море возможностей для тех , у кого они окажутся в руках.

Хотелось бы в судебной системе иметь подобные машины ..

Возможно , в этом случае у некоторых чиновников не будет проблем с лишним весом.. Хотя , казалось бы , какая связь ?

Программист - самая востребованная специальность ..
"Если вам нужен образ будущего, вообразите себе сапог, топчущий лицо человека- вечно."
Оруэл.
Asqard
Клуб пиратов
Клуб пиратов
 
Сообщения: 16553
Зарегистрирован: Чт фев 10, 2011 4:42 pm
Медали: 5
Пол: Женский
Соционический тип: Джек Лондон
Темперамент: Меланхолик
Профессия: дарю любовь и печеньки

Компьютерная революция в шахматах

Сообщение Fouras » Чт дек 21, 2017 1:11 am

Oleg писал(а):Fouras, они все-таки конкретно шахматам ее не обучали, возможно подбирали параметры экспериментальным путем.
Но по словам представителя Гугла, можно натравить нейросеть на любую другую игру с полной инфой, дав только правила и она сама все сделает.
Это намного более универсальный подход чем у специализированных шахматных программ, но до полной универсальности конечно далеко, когда будут просто ставить проблему, а комп сам искать решение.


Есть несколько статей, как они подбирали стратегию обучения для АлфаГо и АльфаЛи. Так же, говорилось, что изначально правила были заданы людьми, а их неучастие в обучении заключалось в том, что программа играла с собственной версией не используя человеческие игры. В первых версиях программа предсказывала человеческие ходы, потом искала лучшие.

Ну и так по логике: если программа играла сама с собой, как бы она догадалась по каким правилам играть, если они не заданы и училась она не по партиям?
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Компьютерная революция в шахматах

Сообщение Oleg » Пн янв 08, 2018 9:04 pm

Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Oleg » Пн янв 08, 2018 10:29 pm

Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Oleg » Пн янв 08, 2018 10:37 pm

Аватара пользователя
Oleg
Администратор
Администратор
 
Сообщения: 75647
Зарегистрирован: Вс окт 09, 2005 9:08 pm
Откуда: Москва
Медали: 10
Пол: Мужской
Соционический тип: Бальзак
Тип по психе-йоге: Сократ (ВЛЭФ)
Темперамент: Флегматик
Профессия: Программист, оптимизатор

Компьютерная революция в шахматах

Сообщение Fouras » Пн янв 08, 2018 10:51 pm

Сергей Шипов разобрал одну партию. Все-таки, гроссмейстер и профессиональный комментатор лучше и интереснее объясняет, даже я понял.
Аватара пользователя
Fouras
Старожил
Старожил
 
Сообщения: 7249
Зарегистрирован: Пн июн 12, 2017 1:23 am
Медали: 11
Пол: Мужской

Пред.След.

  • { SIMILAR_TOPICS }
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в Шахматы

Кто сейчас на конференции

Зарегистрированные пользователи: cooler462, GoGo [Bot], Google [Bot], Yandex 3.0 [Bot], Yandex [Bot]