En Markov-övergångsmatris är en kvadratmatris som beskriver sannolikheten för att flytta från ett tillstånd till ett annat i ett dynamiskt system. I varje rad är sannolikheterna för att flytta från det tillstånd som representeras av den raden till de andra tillstånden. Således lägger raderna i en Markov-övergångsmatris till var och en. Ibland benämns en sådan matris något liknande Q (x '| x) som kan förstås på detta sätt: att Q är en matris, x är det befintliga tillståndet, x' är ett möjligt framtida tillstånd och för alla x och x 'i modellen, sannolikheten för att gå till x 'med tanke på att det befintliga tillståndet är x, är i Q.
Journalartiklar om Markov Transition Matrix