AI 侵蝕流量：Reddit 重新評估與谷歌合作，路透社等考慮屏蔽爬蟲

根據《華爾街日報》當地時間21日報導，隨著人工智慧搜尋技術逐步侵蝕傳統線上媒體的流量，越來越多內容提供者開始重新審視與Google（谷歌）的合作關係。這股趨勢不僅影響大型論壇平台，也波及傳統新聞媒體，促使業者思考如何應對自動化爬蟲對內容價值的衝擊。Reddit 在2024年曾與Google達成一份每年價值6000萬美元的內容授權協議，允許Google將其論壇內容用於訓練人工智慧模型。然而，隨著使用者習慣改變，越來越多網民直接透過AI搜尋工具獲取資訊，而非在Reddit論壇中手動翻找討論串，導致Reddit的流量成長放緩。

據了解，Reddit目前正在評估是否與Google續簽這份即將到期的合約，顯示平台方對AI搜尋帶來的流量變局感到憂心。類似的情況也發生在更傳統的媒體機構。路透社與《今日美國》已開始考慮阻止Google的內容爬取機器人，避免自家報導被AI系統無償抓取，進而削弱自身網站的訪客量。政治新聞媒體Politico的員工則曾討論設置註冊牆等反自動化流量措施，希望透過限制非人類存取來保護內容的獨特性。此外，《經濟學人》內部也持續積極討論退出AI搜尋結果的可能性，藉此維持付費訂閱模式的穩定性。面對這波浪潮，部分媒體嘗試採取與眾不同的策略。

《時代》雜誌正在測試一種新方法：在文章中隱藏普通讀者無法直接看見的廣告，但這些廣告內容能被人工智慧爬蟲機器人讀取。此舉的目的是讓AI系統在擷取內容時，一併將廣告資訊傳遞給投放方，從而在AI搜尋的環境中觸及潛在客戶，開創新的商業模式。這波媒體與AI搜尋之間的角力，反映出內容授權與流量分配的深層矛盾。過去，Google搜尋引擎為媒體帶來大量外部連結與訪客，雙方形成互利共生關係。但隨著生成式AI搜尋工具（如ChatGPT、Perplexity等）的崛起，使用者可以直接獲得答案，無需點擊原始網站，導致媒體的頁面瀏覽量大幅下滑。

Cloudflare先前曾發布報告指出，機器人請求流量已首次超越人類，凸顯自動化爬蟲對網路生態的影響日益加劇。Reddit的案例尤其具有代表性。作為全球最大的社群論壇之一，Reddit長期依賴使用者生成內容，並透過Google搜尋導流。然而，當Google本身也開始使用Reddit的內容來訓練AI模型時，平台反而可能因為AI搜尋的普及而失去原本的訪客。這種「以子之矛，攻子之盾」的矛盾，讓Reddit不得不重新評估合約的價值。對於傳統新聞媒體而言，問題更為嚴峻。

路透社與《今日美國》等機構每年投入大量人力產製原創報導，若這些內容被AI爬蟲無償抓取，並在AI搜尋結果中直接呈現，媒體將難以維持廣告收入與訂閱基礎。因此，部分媒體開始考慮採取技術手段，例如修改 robots.txt 檔案、設置驗證機制，或限制非人類使用者的存取頻率。Politico的註冊牆方案則屬於另一種防禦措施。透過要求訪客註冊或付費，媒體可以過濾掉大量機器人流量，同時也能掌握更多使用者數據。然而，這類措施也可能影響正常使用者的體驗，如何在保護內容與維持流量之間取得平衡，成為媒體業者的一大考驗。《經濟學人》的討論則顯示，有些媒體可能選擇徹底退出AI搜尋生態。

若AI搜尋無法提供《經濟學人》的內容，使用者在搜尋特定議題時將無法直接獲取該刊的分析，這可能迫使部分讀者轉向直接訂閱，但也可能讓媒體失去曝光機會。這項策略的風險與機會並存，需要精準評估。另一方面，《時代》雜誌的隱藏廣告實驗，則代表一種積極適應AI生態的嘗試。透過在內容中嵌入對人類讀者不可見、但對機器人可讀的廣告標記，媒體希望能在AI搜尋結果中仍然創造廣告價值。這種做法能否獲得廣告主認可，以及是否會引發使用者隱私爭議，仍有待觀察。整體而言，AI搜尋技術的快速發展正在重塑網路內容的價值鏈。媒體與平台之間的授權協議、爬蟲管理政策，以及商業模式創新，都將成為未來數年數位出版產業的核心議題。

Reddit的合約評估、路透社與《今日美國》的爬蟲封鎖，以及《時代》的隱藏廣告實驗，都只是這場變革中的幾個縮影。隨著AI搜尋滲透率持續提升，更多內容提供者將被迫重新思考，如何在機器人與人類讀者之間找到新的平衡點。