Cloudflare 9/15 封鎖 AI 爬蟲:出版業終於能向 OpenAI、Google 收錢了

Cloudflare 9/15 封鎖 AI 爬蟲:出版業終於能向 OpenAI、Google 收錢了

Cloudflare 9/15 封鎖 AI 爬蟲:出版業終於能向 OpenAI、Google 收錢了

免費時代結束:Cloudflare 給 AI 公司最後通牒

Cloudflare 週三丟出一項政策,直接改變 AI 產業的遊戲規則。從 2026 年 9 月 15 日 起,預設封鎖「混合用途」爬蟲——也就是那些一邊幫搜尋引擎索引、一邊順便抓去訓練 AI 的機器人。

簡單說:以前 AI 公司像去吃到飽餐廳,付搜尋的錢順便打包訓練資料。現在 Cloudflare 說,外帶請另外付費


為什麼這件事很重要?

現在的問題:同一隻爬蟲做兩件事

Google、OpenAI、Perplexity 這些公司,目前都用同一組爬蟲:

  • 表面說:「我來幫你的網站被搜尋到」
  • 實際做:順便把內容抓去訓練模型

出版業抗議很久了——我的新聞報導被你拿去訓練,然後你的 AI 摘要直接搶走我的流量,我還一毛錢拿不到?

Cloudflare 的解方:強制分開計價

新政策核心就三點:

項目舊做法新做法(9/15 起)
搜尋爬蟲免費進入照舊免費
AI 訓練爬蟲免費順便抓預設封鎖
有廣告的頁面全部開放AI 爬蟲 預設擋掉

想解鎖?AI 公司得跟出版商另外談授權、付錢。


這對台灣出版業意味著什麼

終於有籌碼談判了

過去台灣的新聞網站、雜誌、部落格主面對 OpenAI、Google,基本上是「被通知」而不是「談判」。現在 Cloudflare 幫你架好柵欄,對方想進來就得敲門。

誰會受影響

直接受益

  • 新聞媒體(聯合新聞網、自由時報等)
  • 內容農場轉型的優質部落格
  • 訂閱制出版商(如《報導者》《端傳媒》)

需要調整

  • 依賴 Google 搜尋流量的小站(要確認沒誤擋搜尋爬蟲)
  • 用 Cloudflare 免費版的個人部落格(功能可能有限制)

技術細節:這個「開關」怎麼運作

Cloudflare 會用 機器學習辨識爬蟲意圖,不是看對方說什麼,而是看行為模式:

  • 搜尋爬蟲:快速掃過、抓標題和摘要
  • AI 訓練爬蟲:深度抓取全文、停留時間長、行為像「在抄筆記」

發現是後者?直接 403 擋掉,除非出版商手動開門。


產業反應:有人歡呼,有人緊張

出版業:終於!News Corp、Axel Springer 這些早就在告 AI 公司的,現在多了籌碼。

AI 公司:成本要增加了。OpenAI 已經在付錢給美聯社、金融時報,現在名單會更長。

中小出版商:機會來了,但要學會用這個工具。Cloudflare 說會推出「授權儀表板」,讓你看到誰想進來、開價多少。


你現在可以做的事

如果你是內容創作者:

  1. 檢查你的 Cloudflare 設定 登入後台 → Security → Bots → 確認「AI Crawlers」分類已開啟

  2. 決定你的內容策略

    • 全封鎖:保護內容,但可能錯過授權收入
    • 開放特定 AI:談好價錢再開門
    • 維持現狀:繼續被免費使用
  3. 關注 9/15 後的「授權儀表板」 Cloudflare 說會讓出版商直接跟 AI 公司議價,像 Uber Eats 接單那樣


這只是開始

Cloudflare 這步棋,等於幫全球出版業架好談判桌。接下來要看:

  • AI 公司願意付多少?(目前行情:每年數百萬到數千萬美元)
  • 台灣出版商會不會團結議價?
  • 其他 CDN 會不會跟進?(Akamai、Fastly 壓力來了)

一個確定的是:免費抓資料的時代,正在倒數。


試試看吧:現在就打開你的 Cloudflare 後台,看看 Bots 設定頁面,為 9/15 預做準備。