伺服器日誌分析發現 AI 爬蟲的請求量超過搜尋引擎
熱點事件持續更新
伺服器日誌分析發現 AI 爬蟲的請求量超過搜尋引擎
1 篇報導1 個報導來源10 小時前更新
先了解這件事
AI 綜述
opensource-analytics.com 的一位作者分析了其網站近兩週的 nginx 日誌,發現 AI 爬蟲的請求量幾乎是所有搜尋引擎總和的三倍。作者僅在請求位址屬於該機器人背後的公司、並透過公開清單、DNS 或該公司註冊網路驗證後,才將該請求計為真實。 超過三分之一自稱「Googlebot」的請求是假的。五台租用的 Google Cloud 伺服器使用了 30 個機器人名稱發出 2,496 次請求,先讀取 robots.txt 和網站地圖,再探測密碼與金鑰檔案。沒有任何 AI 助理帶來任何一位訪客,而 Google 帶來了 108 位。
AI 依報導生成 · 10 小時前更新
最新進展11月17日 22:13
AI 爬蟲的請求量超過所有搜尋引擎的總和,而且三分之一的「Googlebot」是假的報導時間線
沿著報導,了解事件的不同側面。
11月17日
- Hacker News · AIAI 爬蟲的請求量超過所有搜尋引擎的總和,而且三分之一的「Googlebot」是假的
在不到兩週的 nginx 日誌中,AI 爬蟲發出的請求量幾乎是所有搜尋引擎總和的三倍,而且超過三分之一的「Googlebot」是假的。五台租用的 Google Cloud 伺服器使用了 30 個機器人名稱發出 2,496 次請求,它們先讀取 robots.txt 和網站地圖,然後探測密碼與金鑰檔案。沒有任何 AI 助理帶來任何訪客,而 Google 帶來了 108 位。
本事件熱度走勢
- 可比範圍當前
- 8
- 可比範圍峰值
- 1011月17日 23:00
- 近 24 小時變化
- –
02.557.510
11月18日02:0004:0006:0008:00
趨勢僅比較持續完整觀測到的相同主體,範圍可能小於當前熱度統計。移動指標或點擊圖表查看每小時熱度;鍵盤可用左右方向鍵切換。