Figure 20.3 The URL frontier. URLs

Figure 20.3 The URL frontier. URLs extracted from already crawled pages flow in at the top of the figure. A crawl thread requesting a URL extracts it from the bottom of the figure. En route, a URL flows through one of several front queues that manage its priority for crawling, followed by one of several back queues that manage the crawler’s politeness.

Kết quả (Việt) 2:

Hình 20.3 biên giới URL. URL chiết xuất từ ​​đã được thu thập thông tin trang fl ow trong ở trên cùng của các Hình vẽ fi. Một chủ đề thu thập dữ liệu yêu cầu một URL trích xuất nó từ phía dưới của Hình vẽ fi. Trên đường đi, một URL fl OWS thông qua một trong những hàng đợi phía trước mà quản lý ưu tiên cho việc thu thập, tiếp theo là một trong những hàng đợi trở lại mà quản lý sự lịch sự của bánh xích.