💎 БОТЫ

Главный экономический регулятор Китая (NDRC) недавно выразил обеспокоенность перегревом индустрии гуманоидных роботов.

Сегодня в Китае насчитывается около 150 компаний, занимающихся разработкой гуманоидных роботов. Этот сектор считается очень перспективным и привлекает значительные инвестиции. Ожидается, что такие устройства найдут широкое применение в бизнесе и повседневной жизни.

Однако массовое внедрение роботов пока не произошло, и перспективы быстрого роста рынка остаются неясными. Технологии гуманоидных роботов находятся лишь на стадии экспериментов и пилотирования.

Покерные боты

Покерные боты существовали задолго до того, как ими заинтересовались профессионалы в области ИИ. Но отсутствие достаточных знаний и алгоритма самообучения делало их весьма посредственными игроками. Они работали по принципу «в такой-то ситуации всегда делай так, а в другой — иначе». В них должен был быть прописан код или загружена большая база рук успешных игроков, которая использовалась как пример для каждой ситуации.

Первый официальный бой

В первой половине 2015 года прошел матч между топовыми онлайн-регулярами в HU игре и лучшим на тот момент покерным ботом Claudio, разработанным профессорами университета Карнеги-Меллон. Эксперимент должен был показать, способна ли программа обыграть лучших регуляров.

В команде людей были Дуглас Полк, Донг Ким, Бьорн Ли и Джейсон Лес.

Им удалось победить компьютерного оппонента за 80 000 раздач. Разработчики Claudio подытожили матч словами о том, что люди имели небольшое преимущество, и удалились для доработки программы.

Через некоторое время опасения многих профессионалов покерного дела подтвердились.

Второй раунд

В 2017 году появился новый покерный бот созданный теми же учеными — Libratus (баланc). Ученые изменили подход к обучению. На этот раз они просто заложили в программу правила покера: силу комбинаций, правила выхода общих карт и последовательность ходов. После чего отправили программу играть саму с собой триллионы раздач.

Со временем компьютер научился понимать, какие действия выгодны, а какие — нет.

Был назначен новый матч между программой и человеком. На этот раз собрали команду из четырех профессионалов, заработавших в покере миллионы: Джимми Чу, Дэниэл МакАлэй, Донг Ким и Джейсон Лес — все специалисты по игре HU. Матч длился 20 дней, каждый день все покеристы играли по 12 часов. Требовалось наиграть дистанцию в 120 000 рук.

Поначалу игроки думали, что найдут ошибки в игре, которые можно использовать, но время показало обратное. Libratus начал выигрывать с самого начала поединка и, более того, перенимал опыт людей, усиливая свою стратегию.

«Поначалу мы играли с ним, как с Claudio, и это была большая ошибка. Мы попробовали несколько, но они не работали. Мы попробовали играть с ним, как с человеком — но и это не работало, хотя все шло неплохо. Мы меняли стратегии, чтобы найти уязвимости, но не преуспели»,

— рассказал Донг Ким.

В результате люди проиграли 1,8 миллиона фишек. Это около 90 полных стеков по 200бб, и винрейт бота составил за 120 000 раздач примерно 15бб/100 и это без учета рейка.

Обыграть Libratus было практически невозможно. У топовых регуляров в покере есть 3–4 разных размера ставок на постфлопе, у бота их было свыше 10, и каждый из них был сбалансирован.

По мере того, как ИИ продолжает развиваться, ожидается, что его роль в покере будет расширяться. Интеграция ИИ в мир покера вызвала существенные этические дебаты, в ходе которых мнения разделились по поводу того, улучшает ли ИИ игру или подрывает ее.

А что вы думаете про влияние ИИ на нашу любимую индустрию?