一、什麼是網路爬蟲?

網路爬蟲也叫網路蜘蛛(spider),簡單來說,是一種瀏覽世界上各種網站的機器人。目的一般為編纂網路索引。我們所在做的SEO優化換句話說也就是能夠讓網路爬蟲能更加清晰的讀取網頁的內容,使使用者在網路上搜尋時,更容易找到您的網店。

二、為何會遇到遭到robots.txt封鎖的情形?

robots.txt 為EasyStore所加入的語法來封鎖Google的網路爬蟲,目的是為了能夠避免爬蟲擷取某些特定的頁面,來避免搜尋時顯示不必要的頁面,同時,為了能夠維護資訊的安全,避免爬蟲自行增加訂單或註冊帳號,因此並不會影響任何SEO唷!


目前EasyStore所設置的Robot txt. 會影響到以下幾種頁面
-購物車
-結帳流程
-付款頁面
-個人資料
-聯繫我們
-幫助中心

Did this answer your question?