開發者推出免費的 AI 爬蟲存取檢查工具

一名開發者發布了 FloxoLab AI Crawler Access Checker，這是一款免費工具，用來測試 14 種 AI 爬蟲是否真的能讀取指定頁面。它依 RFC 9309 讀取 robots.txt，以各爬蟲的 user agent 重新請求該 URL，並將狀態碼與標頭和一般瀏覽器請求比對，為每種爬蟲回傳判定結果。 這款工具無需帳號，限制為每 10 分鐘 8 次檢查。它讀取最高 3 MB 的原始 HTML，不跟隨需要驗證的頁面；只檢查 80 與 443 埠，私人、本機與內部網路位址一律拒絕。據開發者表示，檢查依請求執行，報告只回傳到使用者的瀏覽器，不保留 URL 或結果的資料庫。

AI 依報導生成 · 9 小時前更新

還沒有足夠的連續觀測資料，暫不繪製趨勢。