下記の方のセットアップでUbuntu on WindowsでOpenAI/Gymを動かしてみましたが，CartPoleはできたけど，Pongなどのatariのゲームが動かなかった．
qiita.com
環境
- python 3.5.2 :: Anaconda 4.2.0 (64-bit)
エラーと対策
gym[atari]を入れようとするとエラー．
$ pip install gym[atari] (略) Could not build atari-py: Command '['make', 'build', '-C', 'atari_py/ale_interface', '-j', '7']' returned non-zero exit status 2. (HINT: are you sure cmake is installed? You might also be missing a library. Atari-py requires: zlib [installable as 'apt-get install zlib1g-dev' on Ubuntu].) (略)
下記を入れたら動きました
$ sudo apt-get install cmake $ sudo apt-get install swig $ sudo apt-get install zlib1g-dev $ pip install gym[atari]
最後の方が入れているものを参考にしました．anacondaは消してないけど．
pip install gym failed, can not install pachi-py · Issue #204 · openai/gym · GitHub
