商店 robots.txtRobots 與網站地圖

網路商店的 robots.txt 規則:篩選、搜尋與購物車頁面

通常 15 分鐘內完成含修改次數品質檢查
方案
付款保障詳細資訊
  • 方案內的修改免費。
  • 若您在交付後 3 天內未回應,成果將自動驗收。

付款時款項會先保留,在您驗收後才會撥付。

網路商店的 robots.txt 規則:篩選、搜尋與購物車頁面

成果範例

標準版方案範例

robots.txt and sitemap: an online clothing store

Client: an online clothing store with filters and site search. Task: stop search engines from crawling thousands of filter and cart pages, and point them to the sitemap.

User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /account
Disallow: /search
Disallow: /*?sort=
Disallow: /*?color=
Disallow: /*&size=
Allow: /collections/

Sitemap: https://example.com/sitemap.xml

Sitemap plan:

FileWhat it listsPages
sitemap.xmlindex of the files below
sitemap-collections.xmlcategories64
sitemap-products-1.xmlproducts1–5,000
sitemap-products-2.xmlproducts5,001–8,300
sitemap-pages.xmlabout, delivery, returns, blog41

Why: filter pages repeat category content and waste crawling. Products out of stock for more than 90 days come out of the sitemap but keep their page.

客戶與所有細節皆為虛構。

關於此服務

網路商店會產生無止盡可被爬取的網址:篩選組合、排序方式、站內搜尋結果、購物車、結帳、帳號與比較頁面,而且每個平台的命名方式都不同。封鎖得太少會把爬取資源浪費在垃圾頁面上,封鎖得太多則會讓商品或用來呈現它們的 CSS 看不到。我們閱讀您目前的 robots.txt 與商店的網址模式,撰寫附註解、逐一對應每種模式的新檔案,並說明哪些應改用 noindex 或標準網址處理。

包含內容

  • 您會收到一份為您的商店準備好的 robots.txt,每種網址模式都有附註解的規則,另附規則封鎖與允許的範例網址清單,以及需要 noindex 或標準網址而非封鎖的模式說明。
  • 網址模式篩選、排序、搜尋、購物車與帳號
  • 附註解的檔案每條規則都在檔案中說明
  • 保持開放商品、CSS、JS 與選定的篩選頁面
  • 封鎖或 noindex何時封鎖是錯誤的工具
  • 測試範例可在 robots.txt 測試工具中檢查的網址

服務流程

  1. 1
    模式您寄來商店與網址範例
  2. 2
    規則我們撰寫並註解檔案
  3. 3
    檢查提供檔案與測試網址

需要您提供的資料

商店連結、您的平台、商店中的篩選、排序與搜尋網址範例,以及您想維持可被索引的篩選頁面,例如品牌或顏色頁面。

我們會詢問您:

  • 商店使用哪個平台?
  • 哪些篩選頁面應保留在搜尋結果中?
  • 請貼上商店中的幾個篩選、排序與搜尋網址

比較方案

方案基本版核心規則US$10標準版完整商店規則US$20進階版多商店規則US$39
交付期限1 天2 天4 天
修改次數122
涵蓋的網址模式最多 8 種最多 20 種最多 40 種
附註解的 robots.txt有有有
測試網址清單有有有
訂購 基本版訂購 標準版訂購 進階版

付款保障

下單時付款,但只有在驗收成果後,款項才會撥付。

  • 固定價格付款後,方案價格不會變動。
  • 款項先行保留付款時,金額只會先保留,在您驗收後才會撥付給服務。
  • 交付前檢查每份成果在交到您手上之前都會經過品質檢查,您也可以在驗收前於訂單頁面查看成果。
  • 免費修改在需求說明範圍內,可依方案允許的次數提出修改。
  • 3 天後自動驗收若您在交付後 3 天內未驗收也未提出修改,成果將自動驗收。若您在交付後於訂單聊天室留言,訂單會暫停自動驗收;我們回覆後,可能會重新起算 3 天,並會在聊天室中告知。
  • 重新製作或全額退款若成果不符合您的需求說明且修改後仍未改善,或製作時間超過交付期限的兩倍,請在訂單聊天室留言:我們將重新製作,或全額退還款項。
運作方式 →

常見問題

我可以在 Shopify 上編輯 robots.txt 嗎?

可以,透過 robots.txt.liquid 範本。若您的商店使用 Shopify,我們會以該形式撰寫規則。

封鎖頁面就能讓它從 Google 消失嗎?

不能。如果其他頁面連到被封鎖的網址,它仍可能出現在搜尋結果中。必須消失的頁面需要使用 noindex,且在消失之前必須維持可被爬取。

你們會上傳檔案嗎?

不會,我們不登入您的商店或伺服器。請由您或您的開發人員替換檔案並測試。

沒有找到您要的答案?

方案