Hola
Como punto de partida construye la matriz de transición de estados.
Será una matriz \( 6\times 6 \) que en la posición \( i,j \) tiene la probabilidad de llegar a la casilla \( i \), si estamos en la \( j \).
Te queda:
\( T=\left(
\begin{array}{cccccc}
0 & \frac{1}{3} & 0 & \frac{1}{3} & 0 & 0 \\
\frac{1}{2} & 0 & 0 & 0 & \frac{1}{2} & 0 \\
0 & \frac{1}{3} & 1 & 0 & 0 & 0 \\
\frac{1}{2} & 0 & 0 & 0 & \frac{1}{2} & 0 \\
0 & \frac{1}{3} & 0 & \frac{1}{3} & 0 & 0 \\
0 & 0 & 0 & \frac{1}{3} & 0 & 1 \\
\end{array}
\right) \)
Ahora ten en cuenta que \( T^n \) indica la probabilidad de pasar de la casilla \( j \) a la \( i \) en \( n \) pasos.
Saludos.