在某些资源中，贝尔曼方程如下所示：

$v_{\pi}(s) = \sum\limits_{a}\pi(a|s)\sum\limits_{s',r}p(s',r|s,a)\big[r+\gamma v_{\pi}(s')\big]$

我感到困惑的是，$\pi$ 和$p$右手边的零件。

由于概率部分 - $p(s',r|s,a)$- 表示处于下一个状态的概率 ($s'$)，并且由于处于下一个状态 ($s'$) 必须通过执行特定操作来完成，$p$部分还包括在其中采取特定行动的概率。

但是，为什么 $\pi(a|s)$写在等式的开头？为什么我们需要它？采取行动的可能性不是在$p(s',r|s,a)$ 部分已经？