跳到主要內容
返回部落格strategy

內容剪枝怎麼做:大型網站的 A/B/C 分層、四條紅線與重複內容合併

RedClaw Performance Team
RedClaw Performance Team
Date
Reading time
13 min read

太長不看版: 上萬篇的網站做內容剪枝,第一步是用 Search Console 16 個月的資料把文章分成三層:A 核心(近 90 天有點擊,或貢獻前 80% 流量)只准加強、不准動。B 有流量的維持。C 零曝光的再拆成「其他引擎或鏡像還有流量」和「哪裡都沒流量」兩種,只有後者的舊文才是候選。處理手段是按 ID 名單、只對 Google 加 noindex,不刪文章、不批量回 410。重複內容的合併依據是影片 hash 完全相同,標題相似不算:我們在一個 1 萬多篇的影音內容站按標籤配對抽查 50 組,真的同主題的只有約 6 組。剪枝本身不會帶來流量,它做的事是把抓取額度讓給值得排名的頁,報告裡要先講清楚。

內容剪枝怎麼做:大型網站的 A/B/C 分層、四條紅線與重複內容合併
內容剪枝怎麼做:大型網站的 A/B/C 分層、四條紅線與重複內容合併

剪枝在解決什麼問題,又不解決什麼

1 萬多篇的站裡有 9,528 篇 16 個月零曝光:內容剪枝解決的就是這類低價值網址佔走抓取額度的問題,它把抓取資源移到有價值的頁面,但不會直接讓點擊上升。

網址量一大,抓取額度就變成瓶頸。Google 在大型網站的抓取預算說明↗裡講得很直接:爬蟲花在低價值網址上的時間,就是沒花在重要網址上的時間。上萬篇的內容站,收錄率天生偏低,也不可能一頁一頁人工處理,所以要用規則分批決定哪些頁值得被抓、哪些頁該讓出位置。

我們接手的一個 1 萬多篇的影音內容站,Google 16 個月都沒給過任何展示的文章有 9,528 篇。換句話說,這個站大部分的頁面在 Google 眼裡等於不存在。這種比例的站,任何「再多發一點」的計畫都只是在加重同一個問題。

但剪枝的效果要講對。它的作用是把抓取資源從零價值頁移到有價值的頁,不會直接讓點擊上升。如果報告寫「剪枝後預計流量提升 X%」,那就是在承諾一個沒有證據的結果,日後流量沒動,整套做法會被一起否定。我們在報告裡固定寫的是:剪掉多少、讓出的頁是哪一層、接下來觀察哪幾個指標、觀察多久。

內容分三層:先分層,再決定怎麼處理
內容分三層:先分層,再決定怎麼處理

分層要用 16 個月資料,不用直覺

內容剪枝的分層要用 Search Console 最長的 16 個月資料,分成 A 核心、B 有流量、C 零曝光三層。

分層的依據是 Search Console 能拉到的最長區間,也就是 16 個月。只看 3 個月會把季節性內容誤判成死頁,只看「感覺沒人看」更危險,因為印象跟排名常常是兩件事。三層的定義如下:

層定義處理方式
A 核心近 90 天有點擊,或貢獻全站前 80% 流量保護清單:不改網址、不 noindex、不合併;只做加強(內鏈、內容)
B 有流量16 個月內有一定點擊維持,視情況優化
C 零曝光16 個月內 Google 從未展示再拆 C1/C2,見下一節

A 層的門檻刻意放寬成「或」:近 90 天有點擊的頁,哪怕只有一兩次,代表還有真人在找它。前 80% 流量的頁就算最近安靜,也是站的骨幹。兩個條件任一成立就進保護清單。保護清單的意思是連「順手整理一下網址」都不准,網址一變,累積的訊號就要重新來過。

看流量要看絕對值,不要只看比例。搜尋結果頁跌 50% 可能只少 500 次點擊,文章頁跌 10% 卻可能少 2 萬次。分層也是同樣的道理:A 層的篇數可能很少,但它扛的是整個站的流量,任何會碰到它的動作都要先過一遍名單。

C 層還要再拆一次

「Google 零曝光」不等於「沒有人看」。這類大型內容站通常不只靠 Google,Yandex、Bing、百度各有份量,鏡像網域上也可能有使用者。所以 C 層要再拆:

  • C1:Google 零曝光,但在其他搜尋引擎或鏡像網域有流量 → 不動。
  • C2 舊文:哪裡都沒有流量,而且已經上線一段時間 → 候選「只對 Google noindex」。
  • C2 新文:哪裡都沒有流量,但剛上線不久 → 先觀察,還在被評估的頁不適合下判斷。

前面那個 1 萬多篇的站,C 層 9,528 篇拆完是 C1 4,977 篇、C2 舊文 3,105 篇、C2 新文 1,350 篇。如果沒有拆,直接對 9,528 篇動手,超過一半其實在別的引擎有人看的頁會一起被處理掉。真正進入候選的只有三千多篇,約是 C 層的三分之一。

C 層抽查還有另一個發現:大約一半是「已收錄,但沒有任何曝光」。也就是說它們的問題是收錄了卻排不上去,不是 Google 不知道這些頁。這會影響手段的選擇:沒收錄的頁補 sitemap 或內鏈可能有用,已收錄零曝光的頁再怎麼送索引也不會變。

剪枝的四條紅線

內容剪枝有四條紅線:不刪文章、不整批 noindex、不碰 A 層名單、不承諾剪枝會帶來流量。

這四條是我們在大型站上不會跨過的線,每一條都對應一種很難回頭的後果。

一、不刪文章,不批量回 410/404。 大批錯誤頁本身就是負面訊號。一次讓幾千個網址變成 404,爬蟲看到的是一個突然壞掉一大塊的站,而且刪掉的頁裡只要有一頁其實還在排名,你就是親手把那份流量送進錯誤頁。刪掉之後要復原,等於重新發一次文。

二、不整批加 noindex。 要做就按 ID 名單,而且只對 Google。整批套用的規則(例如「某分類全部 noindex」)一定會掃到 A 層或 C1 的頁,下一節會講為什麼範圍還要限縮到 Google。

三、A 層名單上的頁一律不碰。 不改網址、不合併、不 noindex。剪枝的任何批次在執行前,都要先跟 A 層名單做一次比對,命中就剔除。

四、不承諾剪枝會帶來流量。 這條寫在報告第一段。剪枝讓出的是抓取額度,額度被拿去抓哪些頁、那些頁能不能排上去,是另外的問題。

為什麼只對 Google noindex,而不是整批加 meta robots

內容剪枝只對 Google 加 noindex,因為一般 noindex 會連鏡像站的 Yandex、百度流量一起弄掉。

這個做法是被踩過的坑逼出來的。同一個影音內容站有鏡像網域,主站和鏡像共用同一個後台。在主站加的 meta 標籤,會同時出現在鏡像上。如果 C 層直接加 <meta name="robots" content="noindex">,鏡像那邊的 Yandex、百度流量會一起掉,而那些流量正是 C1 的來源。

解法是把指令只給 Google 的爬蟲:

<meta name="googlebot" content="noindex, follow">

Google 的 robots meta 標籤文件↗說明了 googlebot 這個名稱只作用在 Google 的爬蟲上。Bing、Yandex、百度讀的是 robots 或各自的名稱,不受影響。Yandex 那邊的規則可以對照它的 meta robots 說明↗。保留 follow 是為了讓頁面上的連結繼續傳遞,這些舊文常常連著 A 層的頁。

還要留意一件事:noindex 和 robots.txt 封鎖不能同時用在同一批頁上。爬蟲要能抓到頁面,才讀得到 noindex。robots.txt 和 meta robots 的分工可以參考我們整理的 robots.txt 與索引控制指南。

坦白講,「只對 Google noindex」對抓取額度的實際效果,我們目前還沒有驗證完,要等那個站的 C2 舊文名單實施之後持續追蹤才知道。在資料出來之前,我們不會把它寫成已知有效的做法。

影片 hash 相同,才算重複內容

重複內容只有在影片 hash 完全相同時才能合併。標題、標籤或上傳帳號相似,只能當作去查證的線索。

大型影音內容站最常見的誤判,是看標題相似就合併。我們在同一個站按標籤配對抽查了 50 組「看起來重複」的文章,真的是同一個主題的只有約 6 組。其他的長這樣:

  • 不同日期的榜單,標題幾乎一樣,內容是不同週期。
  • 同一支長片切出的不同段落,標題只差段落編號。
  • 換了細節的不同影片,標題沿用同一個模板。

合併的依據因此是影片 hash 完全相同,也就是檔案本身一樣。標題、標籤、上傳帳號相似,都只能當作「去查」的線索,不能當作「去合併」的依據。文字型的站也是同一個道理:要有內容層級的證據,不能只靠標題。

確認重複之後的處理:

  1. 來源頁 301 到目標頁,目標選主網址,不是排序頁或篩選頁。用 302 不行,302 告訴搜尋引擎這是暫時的,訊號不會合併。
  2. 來源頁從 sitemap、列表頁、相關推薦全部移除,不要讓站內還有連結指到 301。
  3. 連載系列不合併。每一集各自有搜尋需求,改成上一集/下一集互連。
  4. 從源頭擋:運營在發布前先查重,比事後合併便宜得多。

Google 在合併重複網址的說明↗裡把 301、canonical、sitemap 都列為訊號,其中 301 是最強的一種。我們在已確認重複的頁上用 301,canonical 留給「兩頁都需要存在、但只想讓一頁被排名」的情況。sitemap 只放回 200、可索引的網址,這部分的細節在 sitemap 完整指南。

權重集中:把讓出來的額度導回 A 層

剪枝讓出抓取額度後,要幫 A 層補同主題內鏈,並在首頁與分類頁只放 A 層標籤的入口,額度才不會被平均分掉。

剪枝只做了一半。讓出抓取額度之後,要讓爬蟲和使用者更容易走到 A 層,否則省下的額度只是被平均分給剩下的頁。

我們的做法是兩件事。第一件是幫 A 層補內鏈:從同主題的文章連過去,配對方式是看兩篇文章是否共用同一個人物或事件標籤。相關推薦也改成「同標籤優先」,不再是隨機或純按時間。第二件是在首頁和分類頁加一個「熱門標籤」入口,入口裡只放 A 層的標籤。

「只放 A 層」這個限制很重要。首頁的連結是全站最有份量的,把它分給零曝光的標籤,等於把最好的位置讓給最不需要的頁。內鏈怎麼分配、多少才算過多,在我們的 SEO 作業系統裡有一套固定的檢查方式。

做完之後怎麼判斷、怎麼寫報告

剪枝報告要先寫資料變化再寫判斷,原因分成四級標示,所有狀態都用 curl 打正式站確認,不以延遲的報表為準。

剪枝的報告最容易犯的錯是先寫結論。我們的順序固定:數據變化、變化範圍、具體頁面、具體關鍵詞、頁面現況,最後才是判斷。原因分成四級寫:已確認(有技術、資料或頁面證據)、高概率(多個維度互相印證)、待驗證(只有相關性)、已排除(查過可以排除)。「演算法波動」這種沒有證據的說法不寫。

狀態一律以線上為準。noindex 有沒有真的出現在頁面上、301 是不是 301 而不是 302、sitemap 是否已移除,都用 curl 直接打正式站確認。Search Console、Bing、Yandex 的報表有幾天到幾週的延遲,拿來推斷「現在」一定會誤判。這和我們在 24 個網站的驗收橫斷面裡得到的結論一致:腳本或報表說綠燈,不代表線上真的是綠的。

如果只有一個搜尋引擎出現異常,就只做那個引擎的專項,不要因此動全站的剪枝規則。另外,「暫不調整」是有效的方案,前提是寫清楚為什麼不改、觀察什麼、觀察多久、什麼條件出現才動手。C2 新文那 1,350 篇就屬於這一類:先觀察,不動手。Bing 的網站管理員指南↗對低品質與重複內容的態度和 Google 相近,若 Bing 流量對你的站有份量,觀察指標也要把它放進去。

如果你的站也是上萬篇、收錄率偏低,想先知道 A/B/C 各有多少篇,這類分層盤點我們在 SEO 建站與代營運服務裡會先做一次,各方案的範圍寫在價格頁。

這篇是大型網站 SEO 指南的其中一章,六個工作面的全貌和接手第一週的處理順序都整理在那裡。

常見問題

內容剪枝一定要刪文章嗎?

不用,而且大型站不建議刪。大批 404/410 本身就是負面訊號,刪掉之後若發現其中有頁還在排名,也救不回來。我們的做法是按 ID 名單、只對 Google 加 noindex,頁面對使用者和其他搜尋引擎照常存在。

為什麼分層要用 16 個月,不用 3 個月?

16 個月是 Search Console 能拉到的最長區間。短區間會把季節性或週期性的內容判成零曝光,誤剪掉每年固定會回來的頁。

Google 零曝光的頁就可以直接處理嗎?

要先拆。我們的例子裡,9,528 篇 Google 零曝光的文章,有 4,977 篇在其他搜尋引擎或鏡像網域有流量。直接處理會把這部分流量一起拿掉。真正進候選的是哪裡都沒流量的舊文。

標題很像的文章算重複內容嗎?

不一定。我們按標籤配對抽查 50 組看起來重複的文章,只有約 6 組真的同主題。影音站的合併依據是影片 hash 完全相同,文字站也要有內容層級的證據,標題相似只能當作調查線索。

剪枝之後多久會看到流量變化?

剪枝本身不直接帶來流量,它讓出的是抓取額度。能不能轉成流量,要看讓出的額度有沒有導向 A 層、A 層頁面本身夠不夠好。所以報告裡寫的是觀察指標和觀察期,不寫預估的流量增幅。你的剪枝報告裡,寫的是觀察期還是流量預估?


了解我們的廣告策略與投放服務 →

讓你的廣告預算發揮最大效益

從帳號養成到數據追蹤,一站式搞定。

  • 專屬客戶經理,即時優化投放策略
  • 完整追蹤架構,每一分錢花得明明白白
  • 跨平台投放經驗,Meta / Google / TikTok

免費獲取您的廣告健檢報告

讓我們的專家分析您的廣告帳戶,找出浪費預算的關鍵問題。

100% 免費48 小時內回覆無綁約

訂閱電子報

每週一封,投放實戰、產業趨勢、工具教學。不灌水,純乾貨。

我們不會分享你的 Email。隨時可以取消訂閱。