Considere um processo de Markov com matriz de transição
- Se o sistema tiver uma chance de 50% de estar inicialmente no estado 1, com qual probabilidade ele estará no estado 2 na próxima observação?
Passo 1
Como num primeiro momento, a chance de o sistema estar no estado é de , precisamos multiplicar toda a matriz pelo vetor ) para obter as probabilidades na próxima observação.
Sendo assim:
Sendo assim, na segunda observação a chance de o sistema estar no estado é de e de estar no estado é de .