開源開發者正以報復心態對抗 AI 爬蟲。這些爬蟲被視為互聯網上的「害蟲」,無視 Robots Exclusion Protocol 的 robot.txt 文件指引,肆意搜刮網站數據,尤以資源有限的免費開放源碼(FOSS)項目受害最深。開發者因而開發新工具應對,例如 Anubis 及 Nepenthes,務求阻擋或誤導這些不受控的機械人。
開發者以巧計反擊 AI 爬蟲
FOSS 開發者 Xe Iaso 因其 Git 伺服器屢遭 AmazonBot 攻擊,開發出 Anubis。此工具透過反向代理及工作量證明(proof-of-work)檢查,過濾機械人請求,僅允許人類瀏覽器通過。Anubis 於 2025 年 3 月 19 日上架 GitHub,短短數日已獲 2,000 個星星及 20 名貢獻者,反映問題普遍。
報復式防禦成新趨勢
除 Anubis 外,其他開發者亦採取報復策略。Nepenthes 將爬蟲困於虛假內容迷宮,浪費其資源;Cloudflare 則於上週推出 AI Labyrinth,同樣以無用內容誤導爬蟲。SourceHut 創辦人 Drew DeVault 指,Nepenthes 雖具「正義感」,但 Anubis 更有效解決其網站問題。有開發者甚至須封鎖整個國家 IP,例如巴西或中國,以減輕伺服器壓力。
隨 AI 爬蟲問題加劇,FOSS 社群料將開發更多創新工具應對。Cloudflare 等商業平台亦可能擴展防禦功能,助網站管理員對抗未經授權的數據搜刮。惟長遠而言,若 AI 業界不正視道德爭議,開發者與爬蟲間的「戰爭」恐難平息,反擊手段或愈趨激烈。
資料來源:Tech Crunch
相關文章:
【評測】Honor 400 Pro 開箱評測 AI 功能更實用好玩 + 機身設計依然漂亮 + 性價比超高抵玩之選 【評測】Honor 400 Pro 報價 + 現場快速評測 主攻 AI 鏡頭 + 效能不俗準旗艦 + 香港開售詳情公佈 【評測】MSI Vector 16 HX AI (2025) 詳細評測 定價超抵玩 + 效能強勁 + 外觀華麗電競機
分享到 :
最新影片
