Gym工具库简介

最近在学习棋类（五子棋）的AI算法时，了解到gym工具库，
先来看一下它是干什么的，到官网看看，https://gym.openai.com/docs/
Gym is a toolkit for developing and comparing reinforcement learning algorithms. 
是用来开发和比较强化学习（RL）算法的。
安装之前，要保证有python3.5+的环境。
pip install gym 就可以了。
然后跑一下简介入门代码：

import gym
env = gym.make('CartPole-v0') #这里是已注册的环境的名字 CartPole-v0 一个车摆
env.reset()
for _ in range(1000): 
    env.render()
    env.step(env.action_space.sample()) # take a random action
env.close()

马上就出问题了哎，因为安装的版本的问题、依赖库的版本的问题，真是有些烦人。
先是在env.render()那里报错：NotImplementedError: abstract
然后网上说降个版本试试：pip install pyglet==1.2.4
结果报另外的错：NameError: name 'base' is not defined
烦人。
gym:0.18.0  默认安装的pyglet是1.5.0

我看算法里gym的用法是，用到gym.Env。所以官方的例子我决定到这里放弃不弄了。
怎么继承这个Env基类，可以参考：强化学习Gym库学习实践(一） https://zhuanlan.zhihu.com/p/91497695 作者愣娃RC 上海交通大学 控制科学与工程博士在读
有空再看。