Матрица вероятностей перехода однородной цепи Маркова имеет вид , а вектор начального распределения вероятностей – . Тогда вектор вероятностей состояний цепи Маркова на втором шаге равен …
Матрица вероятностей перехода однородной цепи Маркова имеет вид , а вектор вероятностей состояний цепи Маркова на втором шаге равен . Тогда вектор вероятностей состояний цепи Маркова на третьем шаге равен …