Wprowadzenie do łańcuchów Finite Markov

Wprowadzenie do łańcuchów Finite Markov

Celem tej książki jest przedstawienie czytelnikowi i rozwinięcie jego wiedzy na temat specyficznego typu procesów Markova, zwanych łańcuchami Markova. Książka ta przedstawia skończone łańcuchy Markowa, w których przestrzeń stanu jest skończona, począwszy od przedstawienia czytelnikom skończonych łańcuchów Markowa i sposobu obliczania ich prawdopodobieństwa przejścia, a także matryc prawdopodobieństwa przejścia i graficznej reprezentacji przejścia. Klasyfikację tych łańcuchów Markowa uzyskuje się poprzez sklasyfikowanie przestrzeni stanu w tym procesie. Podjęto również temat absorpcji łańcuchów Markova i obliczenia prawdopodobieństwa absorpcji. Oprócz tematu stacjonarności łańcuchów Markova, w którym badano rozkłady stacjonarne oraz badania nowego typu tzw. rozkładów quasi-stacjonarnych w absorbujących łańcuchach Markova. Ponadto, książka ta kończy się przedstawieniem niektórych zastosowań, które pojawiają się w życiu praktycznym.