The concepts of rule strength and r

The concepts of rule strength and rule specificity have played an important role in the development of Holland's classifier system. In the current research, alternative measures of rule fitness were examined in an effort to address problems we encountered with this application. With some of our parameter selections, stable performance was observed for a period of time and then an abrupt deterioration occurred. Useful default hierarchies, which had been developed gradually, appeared to lose one or two critical rules, seemingly for complex reasons. These losses triggered a major calamity in which other rules, no longer protected from over-generalizing their knowledge, began to make many errors. Within a short time, a large number of previously successful rules had been discarded and the performance of the system dropped significantly. We believe that this problem resulted from selecting the wrong set of parameters for the bidding and reward system. In essence, the strength specificity bidding system seems to be very sensitive to parameter values and can perform quite poorly if these values are not set within a precise range. Our experience with these difficulties provided motivation to explore an alternative reward allocation system. The "accuracy-utility" procedure (AU) separates the concept of rule strength into two distinct measures: accuracy and utility. These two measures bear a functional resemblance to Holland's (1976) measures of average payoff rate and age. Holland defined the rate measure (p. 282) as the payoff received over an epoch divided by the length of the epoch. Our accuracy measure follows this precedent except that it tracks the relative frequency of payoff rather than the average amount. Holland's age measure (p. 186) was defined as the number of time steps since the rule received a positive payoff. Our utility measure assesses a similar
aspect of performance except that it tracks overall performance rather than focusing exclusively on the rule's most recent exploit. Booker (1988, p. 180) also employs multiple performance measures to determine reward distribution.

Kết quả (Việt) 1:

Khái niệm về sức mạnh quy tắc và quy tắc đặc trưng đã đóng một vai trò quan trọng trong sự phát triển của Hà Lan loại hệ thống. Trong các nghiên cứu hiện tại, các biện pháp thay thế của thể dục quy tắc đã được kiểm tra trong một nỗ lực để giải quyết vấn đề chúng tôi gặp phải với ứng dụng này. Với một số lựa chọn thông số của chúng tôi, hiệu suất ổn định được quan sát thấy trong một thời gian và sau đó một sự suy giảm đột ngột xảy ra. Phân cấp mặc định hữu ích, đã được phát triển dần dần, xuất hiện để mất một hoặc hai quy tắc quan trọng, dường như vì lý do phức tạp. Những thiệt hại gây ra một tai họa lớn mà trong đó các quy định khác, không còn được bảo vệ từ Over-khái quát kiến thức của họ, bắt đầu để thực hiện nhiều lỗi. Trong vòng một thời gian ngắn, một số lớn các quy định trước đây đã thành công đã được loại bỏ và hiệu suất của hệ thống giảm xuống đáng kể. Chúng tôi tin rằng vấn đề này là kết quả của việc lựa chọn các thiết lập sai của tham số cho các hệ thống đặt giá thầu và phần thưởng. Về bản chất, các đặc trưng sức mạnh hệ thống đấu thầu có vẻ là rất nhạy cảm với các giá trị tham số và có thể thực hiện khá kém nếu những giá trị này không được thiết lập trong một phạm vi chính xác. Chúng tôi kinh nghiệm với những khó khăn này cung cấp động lực để khám phá một hệ thống phân bổ các phần thưởng khác. Thủ tục "chính xác Tiện ích" (AU) chia tách các khái niệm của quy tắc sức mạnh thành hai biện pháp riêng biệt: độ chính xác và tiện ích. Những biện pháp hai chịu chức năng giống với các biện pháp của Hà Lan (1976) tỷ lệ chi trả trung bình và tuổi tác. Holland xác định thước đo tỷ lệ (p. 282) là kết quả nhận được trong một kỷ nguyên chia cho chiều dài của các thời kỳ. Thước đo độ chính xác của chúng tôi sau này tiền lệ ngoại trừ rằng nó theo dõi tần số tương đối của thưởng phạt chứ không phải là số tiền trung bình. Biện pháp tuổi của Hà Lan (p. 186) được định nghĩa là số lượng thời gian bước kể từ khi các quy tắc đã nhận được một kết quả tích cực. Biện pháp hữu ích của chúng tôi đánh giá một tương tựCác khía cạnh của các hoạt động ngoại trừ rằng nó theo dõi hiệu suất tổng thể hơn là tập trung độc quyền trên các quy tắc đặt khai thác. Booker (1988, p. 180) cũng sử dụng nhiều biện pháp hiệu quả để xác định phân phối phần thưởng.

Kết quả (Việt) 2:

Các khái niệm về sức mạnh quy tắc và quy tắc đặc đã đóng một vai trò quan trọng trong sự phát triển của hệ thống phân loại của Hà Lan. Trong nghiên cứu hiện nay, các biện pháp thay thế các quy tắc thể dục đã được kiểm tra trong một nỗ lực để giải quyết vấn đề chúng ta gặp phải với ứng dụng này. Với một số lựa chọn tham số của chúng tôi, hoạt động ổn định đã được quan sát trong một khoảng thời gian và sau đó là một sự suy giảm đột ngột xảy ra. Phân cấp mặc định hữu ích, mà đã được phát triển dần dần, xuất hiện để mất một hoặc hai nguyên tắc quan trọng, dường như chỉ vì lý do phức tạp. Những tổn thất gây ra một tai họa lớn, trong đó quy định khác, không còn được bảo vệ từ quá khái quát kiến thức của họ, bắt đầu thực hiện nhiều lỗi. Trong vòng một thời gian ngắn, một số lượng lớn các quy tắc thành công trước đó đã bị loại bỏ và hiệu suất của hệ thống giảm đáng kể. Chúng tôi tin rằng vấn đề này là kết quả của việc lựa chọn các thiết lập sai thông số cho hệ thống đấu thầu và phần thưởng. Về bản chất, hệ thống đấu thầu đặc sức mạnh có vẻ là rất nhạy cảm với các giá trị tham số và có thể thực hiện khá kém nếu những giá trị này không được thiết lập trong một phạm vi chính xác. Kinh nghiệm của chúng tôi với những khó khăn này cung cấp động lực để khám phá một hệ thống phân bổ phần thưởng khác. Các "chính xác ích" thủ tục (AU) tách các khái niệm về sức mạnh quy tắc thành hai biện pháp riêng biệt: độ chính xác và tiện ích. Hai biện pháp này rất giống chức năng (1976) các biện pháp tỷ lệ phần thưởng trung bình và độ tuổi của Hà Lan. Hà Lan được xác định biện pháp tỷ lệ (p. 282) như phần thưởng nhận được hơn một kỷ nguyên chia cho chiều dài của thời đại. Đo độ chính xác của chúng tôi sau tiền lệ này ngoại trừ việc nó theo dõi tần số tương đối của các phần thưởng chứ không phải là số tiền trung bình. Đo độ tuổi của Hà Lan (p. 186) được định nghĩa là số lượng các bước thời gian kể từ khi các quy tắc nhận được một phần thưởng tích cực. Biện pháp tiện ích của chúng tôi đánh giá tương tự như
các khía cạnh của hoạt động ngoại trừ việc nó theo dõi hiệu suất tổng thể hơn là tập trung hoàn toàn vào của quy tắc mới nhất khai thác. Booker (1988, p. 180) cũng sử dụng nhiều biện pháp thực hiện để xác định phân phối phần thưởng.