Um vendedor de uma determinada empresa pode visitar duas cidades A e B para vender o seu produto. Para ir a essas cidades, ele segue algumas regras: caso ele esteja na cidade A, ele escolhe ir, no dia seguinte, para a cidade B com probabilidade 0,7; se ele estiver na cidade B, ele vai para cidade A com probabilidade 0,6.
A matriz de transição da cadeia de Markov é dada por:
Sabendo-se que a probabilidade de ele estar hoje nas cidades
A e B são iguais, então a probabilidade de ele estar
na cidade B amanhã é
