篩選與參數(Facet)控管
電商爬取預算的頭號殺手
篩選參數像自助餐的排列組合——三種主菜四種配菜兩種飲料,機器會把 24 種組合每一盤都端出來拍照存檔。
03為什麼是現在學
Facet(顏色×尺寸×價格×排序…)能瞬間製造出百萬級網址,吃光爬取預算、灌爆索引——電商技術 SEO 的頭號戰場。
04白話理解(對客戶簡報可直接引用)
篩選與排序參數產生的網址要分級管理:①有搜尋需求的組合(如「紅色 洋裝」)→ 做成靜態化、可收錄的頁 ②純功能性組合(排序、價格區間)→ canonical 指回主列表+robots 擋爬 ③無限組合(多選疊加)→ 一律擋。原則:讓爬蟲只看到你想賣的組合。
05工具箱
- ▸GSC 網址參數與爬取統計 — 看爬蟲實際在哪些參數上空轉
- ▸日誌檔分析 — 參數黑洞的鐵證
06怎麼做 · SOP 3 步(每步標產出物)
- 1盤點全部篩選參數與組合規模→ 參數清單
- 2分級:可收錄/收斂/封鎖→ 參數處理規則表
- 3實作 canonical+robots 規則並用日誌驗證爬蟲行為改變→ 驗證報告
07場景應用(實戰經驗)
- ◆中型電商 8 萬商品、GSC 顯示已發現 400 萬網址——九成五是 facet 組合。清完之後爬取預算回到新品上,收錄速度肉眼可見變快。
08⚠️ 常見誤區
- ✕把有真實搜尋量的組合也一起擋掉——先查關鍵字,再決定哪些組合是資產。
口訣
「組合無限,預算有限;想被看到的組合自己挑。」
10里程碑 · 完成標準(可驗證)
- ☐參數規則表存在
- ☐爬蟲空轉量下降(日誌佐證)
- ☐有價值組合已靜態化
學習者勾自己的進度;顧問勾客戶專案的交付——同一份標準,兩種用法。
12檢核方式與依據出處
程式自動判定:輸入網址,掃描引擎自己爬、自己打 API、自己判定。
依據等級決定計分權重(🟢×3/🔵×2/⚠️×1)——權重量的是「依據有多硬」, 不是「我們覺得多重要」。查無權威文件的判準,誠實標「業界慣例」。