Tính toán, chúng tôi chỉ cần làm cho một chuỗi hai nhà nước khái quát để bất kỳ hữu hạnXích Markov. Đặc biệt, phân phối tại thời gian t có thể được tìm thấy bởi ma trậnnhân. Cho (X 0, X 1,...) là một xích Markov hữu hạn với bang space Ω vàchuyển đổi ma trận P, và để cho µt vector hàng là phân phối Xt:
đang được dịch, vui lòng đợi..