python

Мелкая питонячая радость #6: OpenAI Gym — играем в игры и управляем роботами

  • пятница, 5 июля 2019 г. в 00:19:37
https://habr.com/ru/post/458596/
  • Python


Мы привыкли к тому, что специалисты по машинному обучению огромную часть своего рабочего времени сидят над анализом табличных данных или обучают нейросеть для раскладывания фотографий кошек и собак на две аккуратные кучки. Ибо такова воля бизнеса — чаще всего нужно давать прогнозы, классифицировать данные и строить модели.


Сегодня мы проветрим мозги и разомнем дряблеющие от скуки синапсы с помощью кое-чего интересного — OpenAI Gym.



OpenAI Gym позволяет оттачивать свои навыки в обучении с подкреплением. Это одна из разновидность задач машинного обучения, в которой вам предлагается некая среда с определенными правилами и агент, способный действовать в этой среде. Например, игра про Марио — это среда, а фигурка итальянского сантехника в ней, управляемая машинным алгоритмом — агент.


OpenAI Gym предлагает пользователям на выбор здоровый набор сред и агентов — симуляторы старых компьютерных игр (в том числе и классические игры от Atari), виртуальны роботы, промышленные станки и примитивные среды с простыми физическими законами.




Все эти сложные и разнообразные среды представлены в виде понятных и стандартных числовых моделей, которому легко и просто управлять из Python скриптов. Агенты также лего управляются из Python приложения.


Прекрасная и комфортная среда, чтобы скоротать несколько вечеров скучающему специалисту по машинному обучению или погрустневшему Python разработчику.