Введение в конечные цепи Маркова

Цель этой книги - познакомить читателя и развить его знания о конкретном типе марковских процессов, называемых марковскими цепями. В книге представлены конечные марковские цепочки, в которых пространство состояний конечно, начиная с ознакомления читателя с конечными марковскими цепочками и с тем, как вычислить их вероятности перехода, а также матрицы вероятностей перехода и графическое представление перехода. Получена классификация этих марковских цепочек путем классификации пространства состояний в этом процессе. Также был рассмотрен вопрос поглощения цепей Маркова и расчета поглощающих вероятностей. Кроме предмета стационарности в марковских цепях, где изучались стационарные распределения, а также исследование нового типа, были исследованы так называемые квазистационарные распределения в поглощающих марковских цепях. Кроме того, книга заканчивается представлением некоторых приложений, появляющихся в практической жизни.