今日(9 月 15 日),Cloudflare 正式更新咗全球嘅預設設定,對 AI 機械人嘅存取規則作出重大改動。如果你或者你嘅客戶有用 Cloudflare 做 CDN/防護,呢個改動有可能直接影響到 AI 搜尋引擎能否讀取你嘅網站內容——繼而影響你喺 ChatGPT、Google AI Overviews、Perplexity 等平台嘅被引用機會。
今次改咗啲咩?
Cloudflare 嘅新政策有幾個關鍵變化:
-
預設封鎖 AI Training + Agent crawlers — 喺有廣告嘅頁面上,Cloudflare 會預設封鎖被分類為「Training」(用嚟訓練模型)同「Agent」(代表用户即時操作嘅 bot)嘅 crawlers。Search(搜尋索引)類仍然允許,除非係混合用途。
-
混合用途 Crawler 都被封 — 呢個係最關鍵嘅改變。以前 Cloudflare 嘅「Block AI bots」設定會放行混合用途嘅 crawler(即係同時用嚟做搜尋索引同 AI 訓練嘅 bot)。但新政策下,呢啲混合用途 crawler 都會被封鎖。呢個直接影響到 Googlebot、Bingbot、Applebot——因為佢哋嘅爬取活動某程度上都會用於 AI 訓練用途。
-
新客戶/新網站自動套用 — 新加入 Cloudflare 嘅網站、現有客戶嘅新網站、同未修改過設定嘅免費客戶,都會自動套用呢啲新預設值。
對 GEO 同 AI 引用有咩影響?
GEO 嘅核心前提係:AI 引擎要能夠讀取你嘅內容,先至有可能引用你。如果 Cloudflare 幫你 block 咗 AI crawlers,咁無論你嘅內容寫得幾好、結構幾清晰,AI 引擎都唔會見到。
具體影響包括:
- OpenAI GPTBot 會被 block(如果佢被分類為 Training)
- Google AI Mode 嘅 crawler 都可能受影響——Google 用 AI Mode 查資料時,背後部分 crawler 可能同時用於搜尋同 AI 訓練
- Perplexity 嘅 crawler 亦有機會被擋
- 你嘅內容喺 AI 搜尋入面可能會突然消失,唔係因為你內容差,而係因為 infrastucture 設定問題
你可以點做?
好消息係:呢個改動係可以 opt out 嘅。如果你係主動使用 Cloudflare 嘅客戶,你可以登入 Cloudflare Dashboard → Security → Settings,去調整 AI bot 嘅存取政策。
建議你而家就做嘅檢查:
- 登入 Cloudflare 檢查設定 — 睇下你嘅 zone 有冇自動套用咗新嘅封鎖規則
- 確認 robots.txt — 確保你冇意外 block 咗有用嘅 AI crawlers(尤其係 GPTBot、Google-Extended、CCBot 等)
- 同 hosting/IT 團隊溝通 — 如果你地公司用緊 Cloudflare,確保負責嘅同事知道呢個改動,避免無意中 lockdown 咗 AI 引擎嘅存取
- 監控 AI 引用變化 — 如果你發現你嘅品牌喺 AI 答案入面嘅出現率突然下跌,呢個好可能係原因之一
總結
Cloudflare 呢個改動係對 GEO 生態系統一個好重要嘅提醒:AI 引擎要睇到你嘅內容,先至會引用你。 Infrastructure 層面嘅設定,同內容質素同等重要。對於香港企業嚟講,無論你係用 Cloudflare 定其他 CDN,而家都係一個好時機去審視你哋嘅網站係咪對 AI crawlers 開放——因為如果佢哋嚟唔到,你就算有最好嘅 GEO 策略都冇用。