Для обзора аналитических инструментов Цепи Маркова смотрите, что Цепь Маркова Моделирует.
Цепи Маркова являются дискретным состоянием процессы Маркова, описанные правильно-стохастической матрицей перехода и представленные ориентированным графом.
Класс dtmc обеспечивает основные инструменты для моделирования и анализа дискретных цепей Маркова. Класс поддерживает цепочки с конечным числом состояний, которые развиваются в дискретное время с гомогенной временем структурой перехода.
Создайте и измените объекты модели цепи Маркова
Создайте объект модели Цепи Маркова из матрицы Грина вероятностей или наблюдаемых количеств, и создайте случайную Цепь Маркова с заданной структурой.
Визуализируйте структуру цепи Маркова и эволюцию
Визуализируйте структуру и эволюцию модели Цепи Маркова при помощи функций построения графика dtmc.
Определите асимптотическое поведение цепи Маркова
Вычислите стационарное распределение Цепи Маркова, оцените ее смешивание времени и определите, является ли цепочка эргодической и приводимой.
Сравните времена смешивания цепи Маркова
Сравните предполагаемые времена смешивания нескольких Цепей Маркова с отличными структурами.
Идентифицируйте классы в цепи Маркова
Программно и визуально идентифицируйте классы в Цепи Маркова.
Моделируйте случайные обходы через цепь Маркова
Сгенерируйте и визуализируйте случайные обходы через Цепь Маркова.
Вычислите распределенность цепи Маркова на каждом временном шаге
Вычислите и визуализируйте перераспределения состояния, которые показывают эволюцию детерминированных дистрибутивов состояния в зависимости от времени от начального распределения.