開源開發者正以報復心態對抗 AI 爬蟲。這些爬蟲被視為互聯網上的「害蟲」，無視 Robots Exclusion Protocol 的 robot.txt 文件指引，肆意搜刮網站數據，尤以資源有限的免費開放源碼（FOSS）項目受害最深。開發者因而開發新工具應對，例如 Anubis 及 Nepenthes，務求阻擋或誤導這些不受控的機械人。
開發者以巧計反擊 AI 爬蟲
FOSS 開發者 Xe Iaso 因其 Git 伺服器屢遭 AmazonBot 攻擊，開發出 Anubis。此工具透過反向代理及工作量證明（proof-of-work）檢查，過濾機械人請求，僅允許人類瀏覽器通過。Anubis 於 2025 年 3 月 19 日上架 GitHub，短短數日已獲 2,000 個星星及 20 名貢獻者，反映問題普遍。
報復式防禦成新趨勢
除 Anubis 外，其他開發者亦採取報復策略。Nepenthes 將爬蟲困於虛假內容迷宮，浪費其資源；Cloudflare 則於上週推出 AI Labyrinth，同樣以無用內容誤導爬蟲。SourceHut 創辦人 Drew DeVault 指，Nepenthes 雖具「正義感」，但 Anubis 更有效解決其網站問題。有開發者甚至須封鎖整個國家 IP，例如巴西或中國，以減輕伺服器壓力。
隨 AI 爬蟲問題加劇，FOSS 社群料將開發更多創新工具應對。Cloudflare 等商業平台亦可能擴展防禦功能，助網站管理員對抗未經授權的數據搜刮。惟長遠而言，若 AI 業界不正視道德爭議，開發者與爬蟲間的「戰爭」恐難平息，反擊手段或愈趨激烈。
資料來源：Tech Crunch
