1.過多的內容顯示在圖片和腳本上
　　蜘蛛爬蟲不是如我們一樣可以眼觀六路，耳聽八方。他們就是一些虛擬的工具，只能簡單的辯解以文本和腳本為基礎的內容，而一些優(yōu)秀圖片、動畫是無法被評估的。這也是一些網(wǎng)站網(wǎng)絡提高VI設計而絞盡腦汁設計一大堆高質量的圖片，到頭來卻無濟于事，白忙活一場。
　　而最簡單的解決方案就是轉換內容形式為一種可識別的載體。同時借助一些搜索引擎模擬器觀察爬蟲到你網(wǎng)站時的反映，如果有過多的內容丟失，或一些信息被屏蔽，那傳遞的信息就是我們需要重新設置向導來引導。
　　2. 復雜導航 VS 簡單導航
　　許多網(wǎng)站設計師一開始頭痛的就是向導的設置太復雜，因為爬蟲是在內容和連接間瀏覽的緣故。如果搜索引擎過于復雜，那爬蟲就會經(jīng)過層層的點擊、連接篩選而到你所指向的內容。說句諷刺的話，或許你是在和爬蟲的耐性打賭，在和用戶較勁，很明白是雞蛋碰石頭的對抗，后果不言而喻。
　　最直接的解決方案就是設計一個簡單的導航結構，確保用戶在兩只三步就可獲得自己期望的。 可以在主導航條下面設置子挑選條件，或者是增加一些內部連接。
　　3. 不連貫的連接操作
　　在建立連接的同時，我們必須小心的思考如何命名他們，搜索引擎是不可能和我們一樣有判斷的標準，爬蟲更多的是以URLs為評判標準，有時兩段不同的連接代碼卻同時指向一片內容，這是爬蟲可能開始迷糊了，雖然我們明白其中的邏輯。但考慮到寄人籬下的緣故，我們還必須讓爬蟲也明白。
　　為了避免指示信息的錯誤，我們必須有連貫的連接。如果你的網(wǎng)站有這樣類似的疏忽，就使用301跳轉重新定義新的內容，讓爬蟲明白你的連接代碼。深圳網(wǎng)站建設就選深圳俊網(wǎng)天下網(wǎng)絡技術。
　　4. 錯誤的重定向
　　當它涉及到301重定向，就是簡單的在你網(wǎng)站間網(wǎng)頁的轉換。你是否需要重命名他們，或者將這個網(wǎng)站內容引導到一個新的地點保證你能準確的指向那個方向。如果導引錯誤將會減少你千辛萬苦設計的導入鏈接的效果，還可能導致搜索引擎排名的降低。我們應該認真的思考這個問題，在此我也不再累贅。
　　5. 錯誤的站內地圖
　　如果想提高站內結構的準入門檻，建立一個簡單的站內地圖無疑會事倍功半，這個功能會讓爬蟲更有傾向性的瀏覽你的網(wǎng)站網(wǎng)頁，但是要確保指示準確