Interactive Deep RL Demo (強化学習エージェントの適応実験)
深層強化学習で訓練された二足歩行ロボット、チンパンジー、魚のエージェントをさまざまな地形に置き、どう動くかを観察するデモです。用意された地形を読み込むだけでなく、地面と天井を自分で描いて、エージェントが学習時に見たことのない状況を作ることもできます。学習した行動が慣れた環境ではうまく働いても、環境が変わると崩れうるという汎化の問題を自分の目で確かめられます。
使い方
「Getting Started」で平らな地形、チンパンジーがぶら下がるつるのある地形、難しい地形、水中の地形のいずれかを読み込み、実行ボタンを押すとエージェントが動き始めます。「Terrain Generation」のGround・Ceilingボタンでマウスで地形を描き「Generate Terrain」を押せば、自分で作った環境で同じエージェントを試せ、水位やつるの設定も変えられます。画面が英語とフランス語のみで、物理シミュレーションが動き続けるためデスクトップのブラウザを推奨します。