Reddit 阻止所有搜索引擎訪問,僅允許 Google 爬取內容。

在 2024 年 2 月,廣泛報導指出 Reddit 與 Google 簽訂了一項協議。該合同允許 Google 在 Reddit 的內容上進行 AI 模型的訓練,據報導,這項交易的費用為每年 6000 萬美元。雖然最初該交易看似是一項 AI 訓練的許可協議,但現在似乎超出了合同的範疇。

根據 404 Media 的報導,由於 Google 與 Reddit 之間的 AI 許可協議,Google 成為唯一可以爬取 Reddit 新帖子和內容的搜索引擎。這一發展顯示出 Google 在搜索引擎領域的反競爭行為。Google 還向 Reddit 轉送了大量流量。像 Bing、DuckDuckGo、Mojeek 和 Qwant 等 Google Search 的替代品無法爬取新的和最近的 Reddit 帖子。

目前,Search Engine Land 已經向 Microsoft 確認,Reddit 確實在阻止其他搜索引擎的訪問,除了 Google。報導指出,Reddit 在 2024 年 7 月 1 日修改了其 “robots.txt” 文件,阻止許多搜索引擎和 AI 機器人爬取其內容。令人驚訝的是,Google 是唯一可以爬取 Reddit 內容的主要搜索引擎。

在 Bing 和 DuckDuckGo 上查找新的 Reddit 帖子時,發現它們只顯示一個月前的舊帖子。搜索引擎正在遵守 “robots.txt” 標準,並已停止爬取新的 Reddit 帖子。

這引發了對 Google 壟斷行為的幾個問題。Google 已經因其反壟斷行為受到美國司法部的調查。這一發展可能會使 Google 的情況變得更加嚴峻。

AI 內容聲明:本文由 AI 工具輔助撰寫初稿,經 TechRitual 編輯團隊審閱、修訂及事實查核後發佈。如有任何錯誤或需要更正,歡迎聯絡我們

📬 免費訂閱 TechRitual 科技精選

每 3 日由 AI 精選 5 篇最重要香港科技新聞,直送你信箱


此文章發佈於 TechRitual 香港
Henderson
Henderson 是 TechRitual Hong Kong 科技編輯,專注報導智能手機、消費電子產品、SIM 卡及流動通訊市場。自加入 TechRitual 以來,累計撰寫數千篇科技報導及產品評測,內容同步發佈至 SINA 及 Yahoo Tech 等主要平台。部分文章由 AI 工具輔助撰寫,經編輯團隊審閱及事實查核後發佈。