Contoh 1.21 Diketahui rantai Markov ( S, _(1=0)^infty ,Omega ,P) dengan matriks peluang transisi 1(} 3/4&1/4&0&0 1/4&1/2&1/4&0 3&0&1/4&1/2&1/4 4&0&0&1/4&1/4 )

**Matriks peluang transisi untuk rantai Markov yang diberikan adalah: Dengan memahami struktur dan elemen-elemen dari matriks ini, kita dapat menganalisis rantai Markov dalam berbagai kondisi.

**Rantai Markov adalah model matematika yang digunakan untuk menggambarkan sistem yang berubah dari satu keadaan ke keadaan lainnya secara acak. Dalam konteks ini, kita memiliki rantai Markov yang didefinisikan oleh matriks peluang transisi.Matriks peluang transisi yang diberikan adalah: Setiap baris dari matriks ini mewakili keadaan atau status dari sistem, sedangkan setiap kolom mewakili kemungkinan transisi ke keadaan berikutnya. Elemen-elemen dalam matriks menunjukkan probabilitas transisi dari satu keadaan ke keadaan lainnya.Untuk memahami lebih lanjut tentang bagaimana rantai Markov ini bekerja, kita bisa melihat elemen-elemen individu dalam matriks. Misalnya, elemen menunjukkan bahwa jika sistem berada pada keadaan 1, maka probabilitas untuk tetap berada di keadaan 1 adalah .**2.