Марковские процессы. Как рассчитать вероятность что система окажется в состоянии 1 на 7 шаге, если она начала в состоянии 2 и с третеьго шага?
Система начинает с 3 шага в состоянии 2 и с какими-то вероятностями меняет состояния(1-4) до 7 шага. Заканчивает в состоянии 1. Как при расчете вероятности учесть тот факт, что система начала с 3 шага?
P - матрица переходов, Q - вектор перехода в состояние 1.
(P^4) * Q - вероятность оказаться в состоянии 1 на 5 "день" (по ур. Колмогорова)