P {Xt + 1 = y | Ht-1
∩ {Xt = x}} = P {Xt + 1 = y | Xt = x} = P (x, y). (1.1)
Phương trình (1.1), thường được gọi là tài sản Markov, có nghĩa là có điều kiện
xác suất phát từ nhà nước để nhà nước x y là như nhau, không có vấn đề gì
tự x
0
, x1
,. . . , Xt-1
của các quốc gia đi trước trạng thái hiện tại x. Đây chính là lý do tại sao
các | Ω | × | Ω | ma trận P đủ để mô tả quá trình chuyển đổi.
Các hàng x-thứ của P là P phân phối (x, ·). Do đó P là ngẫu nhiên, có nghĩa là,
các mục của nó là tất cả các không âm và
đang được dịch, vui lòng đợi..
