爬蟲設計是否合理將直接影響它訪問Web的效率，影響搜索數(shù)據(jù)庫的質量，另外在設計爬蟲時還必須考慮它對網(wǎng)絡和被訪問站點的影響，因為爬蟲一般都運行在速度快，帶寬高的主機上，如果它快速訪問一個速度較慢的目標站點，可能導致該站點出現(xiàn)阻塞。
網(wǎng)站結構診斷，就是分析網(wǎng)站的主要骨架，看是否清晰，是否具有良好的客戶體驗能否給客戶很好的地圖作用，不會迷路？是否能引導客戶按照自己的設想路徑去訪問網(wǎng)站， 網(wǎng)站結構診斷需要首先把網(wǎng)站結構抽象剝離出來，再分析。
網(wǎng)站的總體規(guī)劃必須有一個主題。不要抓住你的眉毛和胡須?？纯慈藗儾ё咚麄儭＿^了一會兒，這又很受歡迎了。結果，網(wǎng)站的位置不準確并且難以與用戶保持聯(lián)系。網(wǎng)站頁面設計是否符合當前主流設計風格或自身風格。
第一，查看域名信息。通過工具查詢。查看的域名信息包括whois信息，pr，alexa排名等等。url的使用是否合理等。第二，看網(wǎng)站結構框架、樣式表、js的使用等等。這個就是要查看網(wǎng)站的代碼優(yōu)化的如何，采用div+CSS用的如何。
（1）網(wǎng)站導航合理：并沒有嚴格的客觀評價標準，從對用戶獲取信息的方便性、合理性等方面考察網(wǎng)站導航設計的專業(yè)水平。主要依靠專業(yè)人員的專業(yè)知識和經(jīng)驗進行分析判斷。
(1)服務器選址是否合理？ 首先看服務器的位置。比如公司面對的是國內客戶，那么服務器就要放在國內，而不是海外，因為服務器的地域不同會影響我們的網(wǎng)站排名。同一個關鍵詞放在國內服務器和海外服務器會產(chǎn)生不同的排名效果。
有三種類型的鏈接路徑：絕對路徑（例如 http：＼＼www。adobe。com／support／dreamweaver／contents.html）。文檔相對路徑（例如 dreamweaver／contents.html）。站點根目錄相對路徑（例如／support／dreamweaver／contents.html）。
一種是絕對URL的超鏈接。URL（Uniform Resource Locator）就是統(tǒng)一資源定位符，簡單地講就是網(wǎng)絡上的一個站點、網(wǎng)頁的完整路徑。第二種是相對URL的超鏈接。
絕對路徑：指目錄下的絕對位置，直接到達目標位置，通常是從盤符開始的路徑。C：\C\C.txt C盤下C文件夾下的名字叫C的文本文檔 相對路徑：指由這個文件所在的路徑引起的跟其它文件（或文件夾）的路徑關系。
然后第二步就是打開瀏覽的網(wǎng)頁，點擊你想查看url的網(wǎng)頁信息 最后網(wǎng)站地址欄就是對于的url地址路徑信息，點擊調出，這樣即可將瀏覽器的url調出來。
也可以使用搜外6系統(tǒng)進行網(wǎng)站URL路徑設置，可以省略3-6環(huán)節(jié)。
想要知道網(wǎng)站的URL路徑如何設置，就必須要了解URL路徑分類有哪些？網(wǎng)站技術人員一般會通過調用圖片、CSS以及JS代碼來對網(wǎng)站進行設計。而這種調用模式一般分為兩種，一種是相對路徑，另一種是絕對路徑。
當URL路徑的參數(shù)超過3個以上的選擇靜態(tài)路徑 很多人都認為靜態(tài)路徑就是好的，所以網(wǎng)站的URL都要靜態(tài)化，非也。并不是每個網(wǎng)站都應該設置偽靜態(tài)，也不是所有的動態(tài)路徑是利于優(yōu)化。
網(wǎng)站url路徑設置話設置兩個層級就好，還有就是不要有特殊符號，最好是用搜外6系統(tǒng)設置，這樣url層級比較標準。
偽靜態(tài)路徑它所指的就是把一個動態(tài)的URL路徑通過技術手段，變成靜態(tài)的URL路徑，通過url重寫生成的文件路徑。網(wǎng)站URL路徑集權所謂的網(wǎng)站URL路徑的優(yōu)化“集權”，就是指統(tǒng)一網(wǎng)站URL路徑使其集中權重。
1、絕對路徑和相對路徑怎么寫：絕對路徑絕對路徑其實就是我們日常會見到的完整文件路徑。舉例來說，如果我們要引用桌面圖片文件夾下的這個圖片。
2、HTML相對路徑(Relative Path)同一個目錄的文件引用如果源文件和引用文件在同一個目錄里，直接寫引用文件名即可。我們現(xiàn)在建一個源文件info.html，在info.html里要引用index.html文件作為超鏈接。
3、絕對路徑指的是文件或目錄的真實路徑，表示方法一般是硬盤路徑或帶http開頭的路徑，如C：/website/web/index.htm 相對路徑 ./表示方法，表示當前所在路徑。
4、也就是網(wǎng)頁文件在http協(xié)議下的url路徑或者是硬盤上網(wǎng)頁完整的路徑。例如：http：//：/www/html/images/logo.jpg一般來說網(wǎng)站內文件引用和鏈接使用相對地址，網(wǎng)站外文件引用和鏈接使用絕對地址。
5、想要知道網(wǎng)站的URL路徑如何設置，就必須要了解URL路徑分類有哪些？網(wǎng)站技術人員一般會通過調用圖片、CSS以及JS代碼來對網(wǎng)站進行設計。而這種調用模式一般分為兩種，一種是相對路徑，另一種是絕對路徑。
6、絕對路徑 絕對路徑給出要鏈接的目標文檔的完整URL，而且包括訪問該文檔所使用的協(xié)議，對于網(wǎng)頁通常使用http：//。例如，http：//localhost/ajax/chap02/page2-1html就是一個絕對路徑。
1、內部鏈接的設置可以通過鏈接文本設置和圖片鏈接設置兩種方式實現(xiàn)。鏈接文本設置：在文本編輯器中選中相關文本，點擊插入鏈接按鈕，在彈出的鏈接設置窗口中設置鏈接地址即可。圖片鏈接設置：在圖片屬性設置中設置超鏈接地址即可。
2、網(wǎng)站內鏈首先要提的那就是網(wǎng)站地圖了，網(wǎng)站地圖分為2種常見形式，sitemap.html和sitemap.xml格式。
3、第控制分頁 如果文章的字數(shù)非常多，那么我們就要考慮到分頁了，也就是小說網(wǎng)站的展示，文章一般控制在200-300字最好，有助于用戶體驗，也適合蜘蛛抓取。
4、網(wǎng)站內鏈建設的作用 控制成本 你直接就可以在自己的站上進行部署，不像外部鏈接的不可控性比較大，需要長期的積累才有辦法實現(xiàn)穩(wěn)定的SEO效果。
相對路徑是相對某個文件夾下的單獨調用，而絕對路徑是指固定的某個文件夾下的調用。絕對路徑調用起來與相對路徑相比更加單一，也更加穩(wěn)定，如果不單獨修改這一路經(jīng)下的資料，是絕對無法更改和使用該路徑下的內容。
性質不同：相對路徑就是以當前文件為基準進行一級級目錄指向被引用的資源文件。絕對路徑是指文件在硬盤上真正存在的路徑。存取方式不同：絕對路徑是指可以從這個路徑上查找文件夾，不管是從外部或內部存取。
相對路徑的優(yōu)缺點和絕對路徑幾乎相反。優(yōu)點：容易移動內容，可以整個目錄移動。測試方法比較靈活，就是我所說的本機測試時比較方便。缺點：內容頁面換了位置時，鏈接容易失效。容易被人大面積采集抄襲。
相對路徑是指相對于你所要使用的文件與將要使用的文件的相對位置，比如說你和你同學在一個寢室，那么他的相對路徑就是和你再一個地方，反之就是絕對路徑，也就是文件所在的完整的路徑。
