Siraj Raval氏のAI関係のYoutube動画はよく見るのですが、9/10から無料のコース「MOVE 37」が始まったので試しに登録してみました。内容は主に強化学習についてであり、10週で完了するコースです。
去年まではGANなどの生成的ネットワークにトピックが集中していたような気がしますが、最近は強化学習が流行ってきたのでしょうか？Pose Estimatorのようなアルゴリズムも公開され、ディープラーニングの応用法においても幅が広がってきたのかもしれません。
この「MOVE 37」というコースにおいては、以下を使って学ぶようです。
・Pytorch
・OpenAI Gym
・Google Collaborator
・TensorFlow
Google Colab上でコーディングし無料GPUで訓練できるので、どんなパソコンでも大丈夫という感じです。
コース内容は、1週間ごとに以下の項目を実施（合計10週）。
・Markov Decision Processes 0/7
・Dynamic Programming 0/7
・Monte Carlo Methods 0/6
・Model Free Learning 0/7
・RL in Continuous Spaces 0/7
・Deep Reinforcement Learning 0/7
・Policy Based Methods 0/7
・Policy Gradient Methods 0/7
・Actor Critic Methods 0/7
・Multi Agent RL 0/7
基本から始まり、一通り強化学習を順を追って勉強していくので、全体を網羅するにはいいのかもしれません。
1週目は「マルコフ決定過程」についてですが、
・強化学習の基礎知識（ビデオや文章）
・ミニテスト
・OpenAIのインストール
・Google Dopamine（Google最新の強化学習フレームワーク）の紹介
などです。
2週目（来週）から本格的にコーディングしていくという感じでしょうか。
無料コースなので、それほど親切丁寧に指導してくれるというわけではなさそうですが、Forumなどもあるので、聞きたいことがあれば誰かが答えてくれるといった環境はあります。そもそも強化学習に興味あるけど、どのような順番で何を勉強していけばいいかという手がかりは最低限得られるので、その後独学する手立てにもなると思います。
