Chỉ số Truy cập AI: 684 trang web hàng đầu được đo lường về quyền truy cập của trình thu thập dữ liệu AI
Bắt đầu từ đây
Crawl Readiness đã công bố ấn bản đầu tiên của Chỉ số Truy cập AI, đo lường vào ngày 1 tháng 11 năm 2026 cách 1.000 tên miền Tranco hàng đầu đối xử với trình thu thập dữ liệu AI; 684 trang web đã phản hồi. Trong số 684 trang web đó, 79,7% mở cửa cho cả tìm kiếm AI và huấn luyện AI, 8,8% cho phép tìm kiếm AI nhưng chặn huấn luyện, 3,8% có chọn lọc và 7,7% đóng cửa với AI. Chỉ số này cũng so sánh các khai báo trong robots.txt với hành vi thực tế của máy chủ: trong số 547 trang web được kiểm tra, 11,3% từ chối một trình thu thập dữ liệu mà robots.txt của họ cho phép, và trong số 124 trang web được kiểm tra, 63,7% phục vụ một trình thu thập dữ liệu mà robots.txt của họ chặn. Các tệp được công bố có giấy phép CC BY-NC 4.0, được tự do chia sẻ và điều chỉnh cho mục đích phi thương mại với ghi công; sử dụng thương mại, chẳng hạn như trong một sản phẩm hoặc một bộ dữ liệu để bán, cần có sự cho phép của Crawl Readiness. Các trang web ngoài mẫu có thể được kiểm tra theo cùng cách miễn phí, và một trang web trong mẫu có thể yêu cầu xóa hàng của mình khỏi các tệp được công bố.
Tạo từ các bài viết · cập nhật 20 giờ trước
Dòng thời gian bài viết
Theo các bài viết để thấy sự việc từ nhiều phía.
- Hacker News · AIChỉ số Tiếp cận AI: 684 trong số 1.000 tên máy chủ hàng đầu đối xử với trình thu thập AI như thế nào
Crawl Readiness đã công bố ấn bản đầu tiên của Chỉ số Tiếp cận AI, đo lường vào ngày 1 tháng 11 năm 2026 cách 1.000 tên máy chủ Tranco hàng đầu đối xử với trình thu thập AI, với 684 trang web phản hồi. 79,7% trong số 684 trang này mở cửa cho cả tìm kiếm AI và huấn luyện AI, 8,8% cho phép tìm kiếm AI nhưng chặn huấn luyện, 3,8% có tính chọn lọc và 7,7% đóng cửa với AI. Chỉ số này cũng so sánh robots.txt với hành vi máy chủ: 11,3% trong số 547 trang được kiểm tra từ chối một trình thu thập mà robots.txt của họ cho phép, và 63,7% trong số 124 trang được kiểm tra phục vụ một trình thu thập mà robots.txt của họ chặn.
Độ nóng của sự việc này
- Hiện tại, trong khoảng so sánh được
- 6
- Đỉnh, trong khoảng so sánh được
- 1019 tháng 11 07:00
- Thay đổi trong 24 giờ
- –
Xu hướng so sánh cùng một nhóm người tham gia trong những giờ được quan sát liên tục, nên khoảng của nó có thể hẹp hơn số độ nóng hiện tại. Rê chuột hoặc chạm vào biểu đồ để xem độ nóng theo giờ; các phím mũi tên di chuyển qua biểu đồ.