(1)
初めは点1にあるので (P0(1),P0(2),P0(3),P0(4),P0(5))=(1,0,0,0,0) である。1回ずつ確率を更新する。
1回後は必ず点2に移るので (P1(1),P1(2),P1(3),P1(4),P1(5))=(0,1,0,0,0) である。以後、遷移規則を用いると(P2(1),P2(2),P2(3),P2(4),P2(5))=(21,0,21,0,0),(P3(1),P3(2),P3(3),P3(4),P3(5))=(0,43,0,41,0),(P4(1),P4(2),P4(3),P4(4),P4(5))=(83,0,21,0,81),(P5(1),P5(2),P5(3),P5(4),P5(5))=(0,85,0,83,0)である。したがって(P6(1),P6(2),P6(3),P6(4),P6(5))=(165,0,21,0,163)である。すなわちP6(1)=165,P6(2)=0,P6(3)=21,P6(4)=0,P6(5)=163である。
(2)
点1には初めから印がついており、すべての点に印がつくためには、6回以内に点5へ到達すればよい。点5へ初めて到達する最短経路は 1,2,3,4,5 であり、これは4回の移動である。6回後までを見るので、点5に初めて到達する時刻は4回目または6回目である。
6回目に初めて点5へ到達する経路は 1,2,1,2,3,4,5, 1,2,3,2,3,4,5, 1,2,3,4,3,4,5 の3つである。それぞれの確率は 1⋅21⋅1⋅21⋅21⋅21=161, 1⋅21⋅21⋅21⋅21⋅21=321,1⋅21⋅21⋅21⋅21⋅21=321である。
4回目に点5へ到達する場合は 1,2,3,4,5 の後、5回目は必ず点4へ戻り、6回目は点3または点5へ移る。したがって経路は 1,2,3,4,5,4,3,1,2,3,4,5,4,5 であり、それぞれの確率は 1⋅21⋅21⋅21⋅1⋅21=161 である。
よって求める確率は 161+321+321+161+161=41 である。したがって 41 である。
(3)
点1から出発し、1回の移動で点の番号の偶奇が必ず変わる。したがって、奇数回後には偶数の点にいるので Pn(3)=0(n が奇数) である。
次に n が正の偶数のときを考える。偶数回後に石がいる可能性があるのは点 1,3,5 である。これらの点から2回移動したとき、点3にいる確率を調べると、点1からは 1→2→3 となる確率が 1/2、点3からは 3→2→3,3→4→3 となる確率の和が 1/4+1/4=1/2、点5からは 5→4→3 となる確率が 1/2 である。つまり、偶数回後にどの奇数点にいても、その2回後に点3にいる確率は 1/2 である。
実際 P2(3)=1/2 であり、上の性質を繰り返せば、すべての正の偶数 n について Pn(3)=21 である。したがってPn(3)=⎩⎨⎧021(n が奇数),(n が偶数)である。