17.1 DEFINITION OF A MARKOV CHAINLe

17.1 DEFINITION OF A MARKOV CHAIN
Let Xt be a random variable that characterizes the state of the system at discrete points in time t = 1,2,... The family of random variables {A',} forms a stochastic process. The number of states in a stochastic process may be finite or infinite, as the following two examples demonstrate:
Example 17.1-1 (Machine Maintenance)
The condition of a machine at the time of the monthly preventive maintenance is characterized as fair, good, or excellent. For month r, the stochastic process for this situation can be represent¬ed as:

Kết quả (Việt) 2:

17.1 ĐỊNH NGHĨA một chuỗi Markov
Hãy Xt là một biến ngẫu nhiên, đặc trưng của nhà nước của hệ thống tại các điểm rời rạc trong thời gian t = 1,2, ... Gia đình của các biến ngẫu nhiên {A ',} tạo thành một quá trình ngẫu nhiên. Số lượng của các quốc gia trong một quá trình ngẫu nhiên có thể là hữu hạn hoặc vô hạn, như các ví dụ sau đây chứng minh:
Ví dụ 17,1-1 (Machine Maintenance)
Tình trạng của máy tại thời điểm bảo dưỡng phòng ngừa hàng tháng được mô tả như là công bằng, tốt, hoặc Xuất sắc. Trong tháng r, các quá trình ngẫu nhiên cho tình hình này có thể được represent¬ed như: