Quá trình có thể bắt đầu tại một trong các quốc gia này và di chuyển sang tiểu bang khác. Mỗi di chuyển ở đây được gọi là một bước. Mỗi bước có một xác suất. Nếu chuỗi hiện tại đang có ở bang si, sau đó nó di chuyển đến bang sj tại bước tiếp theo với một xác suất Hiển thị bởi pij, và xác suất này không phụ thuộc vào mà tiểu bang vào chuỗi trước khi hiện tại. Xác suất pij danh xưng trong tiếng Pháp là quá trình chuyển đổi xác suất. Các xác suất có thể được hiển thị trong một ma trận được gọi là ma trận chuyển tiếp. P ma trận chuyển tiếp dưới pij là xác suất của đang trong bang Si tại bước n + 1 cho rằng quá trình là bang Sj tại bước n.
đang được dịch, vui lòng đợi..