Một tập tin robots.txt cho phép bạn hạn chế truy cập của trình thu thập công cụ tìm kiếm để ngăn cản họ truy cập trang hoặc thư mục cụ thể. Họ cũng chỉ các web crawler vào tập tin XML sitemap trang của bạn.
Chúng tôi đã kiểm tra canhovanhapho.com/robots.txt không tìm thấy một tập tin robots.txt. Sử dụng Google Search Console để gửi và kiểm tra tập tin robot.txt của bạn. Bạn cũng có thể kiểm tra các trang cá nhân để đảm bảo rằng Google không thu thập bất kỳ tập tin bị hạn chế.
đang được dịch, vui lòng đợi..
