IT之家 7 月 25 日消息,今年 2 月,谷歌宣布與 Reddit 達成一項新協(xié)議,Reddit 數(shù)據(jù)將用于訓練谷歌的 AI 模型,并在谷歌搜索結果中著重顯示 Reddit 結果。彭博社報道稱,這筆交易的金額約為 6000 萬美元。從那時起,Reddit 在谷歌搜索中的展示次數(shù)也大幅增加。
而最新消息稱,Reddit 已禁止其他搜索引擎檢索其網(wǎng)站內(nèi)容。外媒 404 Media 最先報道了此行為,并指出 Reddit 已更新其 robots.txt 文件(IT之家注:網(wǎng)站與爬蟲的協(xié)議文件),阻止所有機器人抓取網(wǎng)站的任何內(nèi)容。
IT之家查詢 Reddit 網(wǎng)站的 robots.txt 文件獲悉,該平臺稱“Reddit 相信開放的互聯(lián)網(wǎng),但不相信濫用公共內(nèi)容。”其“Disallow”選項設置為“/”,也就是禁止檢索網(wǎng)站根目錄下的所有文件。
該文件在今年 6 月首次更新,Reddit 解釋說,這一更改是由于“抓取 Reddit 內(nèi)容的商業(yè)實體明顯增多并且內(nèi)容被濫用”。
Reddit 發(fā)言人 Tim Rathschmidt 在給 The Verge 的一份聲明中表示:“這與我們最近與谷歌的合作完全無關。我們一直在與多個搜索引擎進行討論,但無法與所有人達成協(xié)議,因為有些人無法或不愿意就他們使用 Reddit 內(nèi)容(包括他們對 AI 訓練的使用)作出可執(zhí)行的承諾。”