Matrice delle probabilità di transizione
Da Wikipedia, l'enciclopedia libera.
La matrice delle probabilità di transizione o matrice di transizione in k passi di un processo markoviano a tempi discreti è la matrice generata dalle probabilità di transizione in k passi:
Dove N è la cardinalità dell'insieme degli stati e n è l'istante attuale.
[modifica] Proprietà delle matrici delle probabilità di transizione
Le proprietà delle matrici delle probabilità di transizione derivano direttamente dalla natura degli elementi che le compongono. Infatti, osservando che gli elementi della matrice sono delle probabilità, essi devono avere un valore compreso tra 0 e 1. Inoltre, pensando al significato di ogni elemento e al fatto che una catena di Markov deve trovarsi sempre in uno tra gli stati ammissibili, risulta evidente che la somma, fatta sugli stati di arrivo, delle probabilità di transizione da uno stato i, in un qualsiasi numero k di passi, debba essere unitaria:
dove con S è stato indicato l'insieme degli stati ammissibili per la catena di Markov. Quindi la matrice delle probabilità di transizione risulta essere una matrice stocastica, cioè una matrice in cui la somma degli elementi di ogni riga è unitaria.
Un altro risultato molto importante è il fatto che la matrice delle probabilità di transizione in k passi può essere calcolata agevolmente da quelle ad un passo mediante la produttoria delle matrici delle probabilità di transizione in un passo:
Nel caso semplificato dei processi di Markov omogenei, nei quali la dipendenza dal tempo sparisce, la matrice delle probabilità di transizione in k passi si ottiene come elevamento alla k-esima potenza della matrice delle probabilità di transizione ad un passo.