Trong các lĩnh vực khác nhau của cuộc sống hàng ngày của chúng tôi như thị trường chứng khoán, tài chính, kế toán, giáo dục và tiếp thị, chúng tôi có thể cần phải hiểu làm thế nào một biến ngẫu nhiên thay đổi theo thời gian. Nghiên cứu này có thể được thực hiện với chuỗi Markov. Xích Markov là một quá trình thời gian rời rạc. Điều này có nghĩa là giả sử chúng ta có một bộ kỳ:
đang được dịch, vui lòng đợi..