Тема 10: Вероятности состояний цепи Маркова

1. Матрица вероятностей перехода однородной цепи Маркова имеет вид , а вектор начального распределения вероятностей – . Тогда вектор вероятностей состояний цепи Маркова на втором шаге равен …

Решение:
Вектор вероятностей состояний цепи Маркова на втором шаге можно вычислить последовательно как

2. Матрица вероятностей перехода однородной цепи Маркова имеет вид а вектор вероятностей состояний цепи Маркова на втором шаге равен . Тогда вектор вероятностей состояний цепи Маркова на третьем шаге равен …

Решение:
Вектор вероятностей состояний цепи Маркова на третьем шаге можно вычислить как

3. Матрица вероятностей перехода однородной цепи Маркова имеет вид а вектор начального распределения вероятностей – . Тогда вектор вероятностей состояний цепи Маркова на втором шаге равен …

Решение:
Вектор вероятностей состояний цепи Маркова на втором шаге можно вычислить последовательно как