对于单过程：

$$S_t \xrightarrow{A_t} R_{t+1},\, S_{t+1}$$

最优策略 Optimal policy

状态价值可用于评估策略的优劣：若对所有状态 $s \in \mathcal{S}$ ，都满足