3 月 21 日消息，網(wǎng)絡(luò)服務(wù)商 Cloudflare 當(dāng)?shù)貢r(shí)間本月 19 日發(fā)布了一項(xiàng)名為 AI Labyrinth 的有趣功能：利用 AI 生成內(nèi)容以非禁止的方式干擾不遵守“禁止爬取”聲明的 AI 爬蟲和其它惡意內(nèi)容爬取機(jī)器人。

注：Labyrinth 一詞的含義即“迷宮”。

根據(jù) Cloudflare 的觀察，直接硬性禁止惡意爬蟲容易激起爬取和反爬兩方無休止的“軍備競(jìng)賽”，與其陷入一場(chǎng)漫長(zhǎng)的對(duì)抗中不如讓爬蟲“以為”得到了真實(shí)的內(nèi)容實(shí)際上卻一無所獲。

AI Labyrinth 的具體運(yùn)作方式是在頁面中設(shè)置人類使用者無法看到或點(diǎn)擊的隱藏鏈接，僅有惡意爬蟲才會(huì)注意到它們。而這些鏈接指向一系列由 AI 生成的頁面，爬蟲的時(shí)間和資源會(huì)浪費(fèi)在這些非真實(shí)網(wǎng)站中。

這一功能也意味僅有惡意 AI 爬蟲才會(huì)陷入到 AI Labyrinth 編織的內(nèi)容迷宮中，Cloudflare 能更好了解這些爬蟲的行為特征，從而為機(jī)器人識(shí)別提供數(shù)據(jù)基礎(chǔ)。

Cloudflare 表示 AI Labyrinth 向包括免費(fèi)客戶在內(nèi)的全部使用者提供。