一个小球在这个位置移动。小球向前、向后各移动一个单位的概率都为;若在0处,则只能向前移动。若初始位置在0处,则首次移动到的步数的期望为。
内点转移示意;小的边界按正文分别处理。
分数写 a/b,根号写 √ 或 sqrt,π 写 pi 也可以。
用当前位置到首次到达目标的剩余期望作状态量。
内部位置可向两边走,而零点强制向前,边界方程必须单独写。
设 为从位置 首次到达 的剩余步数期望。对 ,从任一位置连续向前,至多 步就到达目标,其概率至少为 ;由逐段比较几何尾概率,首次到达的期望有限,可写首步方程。
边界为 、。对 ,
令 ,边界给 ,内部方程给 ,故 。于是
所求期望为 。
时从零点强制一步到目标,结果为 ; 时方程 、 给 。这也说明若把零点误当作普通内点,边界行为与结果都会改变。若允许 ,起点已为目标,期望为零,同样符合公式。
首次到达时间的期望可用首步分解建立差分方程。求解前先核期望有限,求解时把反射边界与吸收边界分别处理。
需从全程转剩余期望、取正确两边界后作一阶差分。
已记下,谢谢!