とっとり（砂丘）

<h1 id="%E7%8A%B6%E6%85%8B%E8%A9%95%E4%BE%A1%E5%80%A4%E3%81%AE%E5%8F%96%E5%BE%97">
<a class="header-anchor-link" href="#%E7%8A%B6%E6%85%8B%E8%A9%95%E4%BE%A1%E5%80%A4%E3%81%AE%E5%8F%96%E5%BE%97" aria-hidden="true"></a> 状態評価値の取得</h1>
<ul>
<li>通常tableで評価値を持つので、該当のidxを取り出す
<ul>
<li>状態数が多い系には適応できない</li>
<li>報酬は直接加算すればいい</li>
</ul>
</li>
<li>NNの場合は多段の行列を入力に作用させる
<ul>
<li>空間をtable形式で表現しなくて済む</li>
<li>報酬は位置座標(action)を作用して得られる評価値を調整する（間接）</li>
</ul>
</li>
</ul>


<p>空間の探索が一様に行われるのであれば伝搬した報酬をそのまま教師データとの差分として扱ってnnを更新しても良さそう</p>
