Создайте Цепь Маркова с четырьмя состояниями из случайным образом сгенерированной матрицы перехода, содержащей восемь неосуществимых переходов.
mc
является объектом dtmc
.
Постройте диграф Цепи Маркова.
4
состояния является абсорбирующим состоянием.
Запустите три симуляции с 10 шагами для каждого состояния.
X
11 12 матрица. Строки соответствуют шагам в случайном обходе. Столбцы 1-3 являются симуляциями, которые запускаются в состоянии 1; столбец 4-6 является симуляциями, которые запускаются в состоянии 2; столбцы 7-9 являются симуляциями, которые запускаются в состоянии 3; и столбцы 10-12 являются симуляциями, которые запускаются в состоянии 4.
В течение каждого раза постройте состояния пропорций, которые посещают по всем симуляциям.