近來未經許可抓取網站內容訓練 AI 的問題爭議不斷，Cloudflare 最近就為客戶推出了一種阻止網絡爬蟲抓取網站內容用於訓練 AI 模型的新工具。
Cloudflare 表示，有見客戶對 AI 爬蟲機器人的厭惡，以及為內容創作者維護一個安全的互聯網，因此推出這個新的工具。Cloudflare 表示：「我們清楚聽到客戶不希望 AI 機器人存取他們的網站，特別是那些不誠實的機器人。為此，我們加入了一個全新的一鍵式功能來阻止所有 AI 機器人。」
目前雖然已有 robots.txt 檔案作為阻止爬蟲機器人的協定，但 Cloudflare 表示這種方法可能會被某些爬蟲工具被忽視，而其機器學習評分系統能夠識別偽裝的 AI 機器人，讓它們無法冒充真實的瀏覽器。
Cloudflare 表示，他們將會對工具持續調整以防止機器人成為漏網之魚，同時不斷改善他們的機器學習模型，以幫助保持互聯網成為內容創作者能夠蓬勃發展並完全控制其內容是否用於 AI 訓練。
來源：Cloudflare
