Matter.jsでカートポール
CartPole on Matter.js
カートポール強化学習をMatter.jsで作る準備として、カートポール動作環境を作ってみた。なお、いつものように、下のデモはあなたの端末上で走っている。プログラムはこちら。Just made CartPole model on Matter.js to use as a CartPole Reinforcement Learning platform. Note that below demo is running on your machine as always. Code is here.
制御はポールのX座標の直下にボールを移動するハードコードとした。これだけで釣り合ってしまうが、マウスで系を乱すと、それなりにつり合いは崩れるので、マウスでドラッグしてみて欲しい。Temporalily, control is to move ball's X axis toward the Pole's X axis, hard coded. Looks this balances well already however, if you disturb the system by mouse, the balance is lost accordingly. So pls try yourself by mouse drag.
これをTensorflowで強化学習させるわけだ。The next step is to educate by reinforcement learning on Tensorflow.
これから、目的関数をポールのAngleとして、環境変数はポールの位置、角度、入力はボールの位置として組み上げていく予定。どうなるだろうか。Plan is to use the angle of pole as an objective function, while input is ball position. Let's see what happens.