一、設置404頁面就是告訴蜘蛛，這個頁面的連接是死鏈接，這樣蜘蛛子在爬到這個地方的時候就會在走到別的地方進行連接。如果沒有設置404頁面，當蜘蛛爬行到那個有錯誤的地方，蜘蛛就會覺得你的網站欺騙了它，這樣會對你的網站帶來不好的影響。
二、網站地圖對蜘蛛爬行有很大的影響，一般蜘蛛爬行就是把網站地圖當做一個路線來爬行，這樣蜘蛛就很容易的爬行網站了，而且爬行的時間也是相當的少的。所以個人網站里一定要安裝地圖插件這樣有助于百度的抓取。
三、導入連接，一般在網站中的導入的連接要越多越好，在導入連接的時候要求要有好的連接質量，然后在將導入的高質量的連接越多越好。
四、導出連接，導出連接太多，會讓你的蜘蛛覺得不能夠全部的瀏覽你的網頁，這樣對你網站的頁面收錄會有很大的影響，這樣對網站的優化有很多的影響。
二、網站地圖對蜘蛛爬行有很大的影響，一般蜘蛛爬行就是把網站地圖當做一個路線來爬行，這樣蜘蛛就很容易的爬行網站了，而且爬行的時間也是相當的少的。所以個人網站里一定要安裝地圖插件這樣有助于百度的抓取。
三、導入連接，一般在網站中的導入的連接要越多越好，在導入連接的時候要求要有好的連接質量，然后在將導入的高質量的連接越多越好。
四、導出連接，導出連接太多，會讓你的蜘蛛覺得不能夠全部的瀏覽你的網頁，這樣對你網站的頁面收錄會有很大的影響，這樣對網站的優化有很多的影響。
