Teorema mengenai Limiting ProbabilityDefinisi: πj(n) adalah probabilitas suatu rantai Markov {Xn} berada dalam status j pada step ke n. Maka, πj(n) = P[Xn = j]. Distribusi awal (intial) dari masing…
Teorema mengenai Relasi Ekovalensi
(a) Relasi i ↔j merupakan relasi ekivalen, yaitu untuk setiap status i, berlaku i ↔ i jika i ↔ j , maka juga j ↔ i jika i ↔j dan j ↔k maka i ↔ k (b) Status-status suatu rantai Markov dapat dipartis…
Terminologi
Reachable State status j reachable dari status i apabila dalam rantai dapat terjadi transisi dari status i ke status j melalui sejumlah transisi berhingga; Terdapat n, 0 ≤ n ∞, sehingga Pnij > 0 Ir…
Transisi Multistep (n-langkah)
Berdasarkan probabilitas satu langkah di atas, maka dapat dibentuk probabilitas n-langkah (n-step) yang menyatakan probabilitas transisi dari status i ke status j setelah melalui n langkah transisi. …
Proses Rantai Markov
Proses stokastik {X(t), t ∈ T} merupakan suatu Proses Markov jika untuk setiap n+1, dengan indeks t1t2 tn tn+1 dan harga-harga status {x1, x2, …, xn+1}, terjadi persamaan: P[X (tn+1) = xn+1| X (…