爬蟲設(shè)計是否合理將直接影響它訪問Web的效率，影響搜索數(shù)據(jù)庫的質(zhì)量，另外在設(shè)計爬蟲時還必須考慮它對網(wǎng)絡(luò)和被訪問站點的影響，因為爬蟲一般都運行在速度快，帶寬高的主機上，如果它快速訪問一個速度較慢的目標(biāo)站點，可能導(dǎo)致該站點出現(xiàn)阻塞。
網(wǎng)站結(jié)構(gòu)診斷，就是分析網(wǎng)站的主要骨架，看是否清晰，是否具有良好的客戶體驗?zāi)芊窠o客戶很好的地圖作用，不會迷路？是否能引導(dǎo)客戶按照自己的設(shè)想路徑去訪問網(wǎng)站， 網(wǎng)站結(jié)構(gòu)診斷需要首先把網(wǎng)站結(jié)構(gòu)抽象剝離出來，再分析。
網(wǎng)站的總體規(guī)劃必須有一個主題。不要抓住你的眉毛和胡須?？纯慈藗儾ё咚麄?。過了一會兒，這又很受歡迎了。結(jié)果，網(wǎng)站的位置不準(zhǔn)確并且難以與用戶保持聯(lián)系。網(wǎng)站頁面設(shè)計是否符合當(dāng)前主流設(shè)計風(fēng)格或自身風(fēng)格。
第一，查看域名信息。通過工具查詢。查看的域名信息包括whois信息，pr，alexa排名等等。url的使用是否合理等。第二，看網(wǎng)站結(jié)構(gòu)框架、樣式表、js的使用等等。這個就是要查看網(wǎng)站的代碼優(yōu)化的如何，采用div+CSS用的如何。
（1）網(wǎng)站導(dǎo)航合理：并沒有嚴(yán)格的客觀評價標(biāo)準(zhǔn)，從對用戶獲取信息的方便性、合理性等方面考察網(wǎng)站導(dǎo)航設(shè)計的專業(yè)水平。主要依靠專業(yè)人員的專業(yè)知識和經(jīng)驗進行分析判斷。
(1)服務(wù)器選址是否合理？ 首先看服務(wù)器的位置。比如公司面對的是國內(nèi)客戶，那么服務(wù)器就要放在國內(nèi)，而不是海外，因為服務(wù)器的地域不同會影響我們的網(wǎng)站排名。同一個關(guān)鍵詞放在國內(nèi)服務(wù)器和海外服務(wù)器會產(chǎn)生不同的排名效果。
有三種類型的鏈接路徑：絕對路徑（例如 http：＼＼www。adobe。com／support／dreamweaver／contents.html）。文檔相對路徑（例如 dreamweaver／contents.html）。站點根目錄相對路徑（例如／support／dreamweaver／contents.html）。
一種是絕對URL的超鏈接。URL（Uniform Resource Locator）就是統(tǒng)一資源定位符，簡單地講就是網(wǎng)絡(luò)上的一個站點、網(wǎng)頁的完整路徑。第二種是相對URL的超鏈接。
絕對路徑：指目錄下的絕對位置，直接到達目標(biāo)位置，通常是從盤符開始的路徑。C：\C\C.txt C盤下C文件夾下的名字叫C的文本文檔 相對路徑：指由這個文件所在的路徑引起的跟其它文件（或文件夾）的路徑關(guān)系。
然后第二步就是打開瀏覽的網(wǎng)頁，點擊你想查看url的網(wǎng)頁信息 最后網(wǎng)站地址欄就是對于的url地址路徑信息，點擊調(diào)出，這樣即可將瀏覽器的url調(diào)出來。
也可以使用搜外6系統(tǒng)進行網(wǎng)站URL路徑設(shè)置，可以省略3-6環(huán)節(jié)。
想要知道網(wǎng)站的URL路徑如何設(shè)置，就必須要了解URL路徑分類有哪些？網(wǎng)站技術(shù)人員一般會通過調(diào)用圖片、CSS以及JS代碼來對網(wǎng)站進行設(shè)計。而這種調(diào)用模式一般分為兩種，一種是相對路徑，另一種是絕對路徑。
當(dāng)URL路徑的參數(shù)超過3個以上的選擇靜態(tài)路徑 很多人都認(rèn)為靜態(tài)路徑就是好的，所以網(wǎng)站的URL都要靜態(tài)化，非也。并不是每個網(wǎng)站都應(yīng)該設(shè)置偽靜態(tài)，也不是所有的動態(tài)路徑是利于優(yōu)化。
網(wǎng)站url路徑設(shè)置話設(shè)置兩個層級就好，還有就是不要有特殊符號，最好是用搜外6系統(tǒng)設(shè)置，這樣url層級比較標(biāo)準(zhǔn)。
偽靜態(tài)路徑它所指的就是把一個動態(tài)的URL路徑通過技術(shù)手段，變成靜態(tài)的URL路徑，通過url重寫生成的文件路徑。網(wǎng)站URL路徑集權(quán)所謂的網(wǎng)站URL路徑的優(yōu)化“集權(quán)”，就是指統(tǒng)一網(wǎng)站URL路徑使其集中權(quán)重。
1、絕對路徑和相對路徑怎么寫：絕對路徑絕對路徑其實就是我們?nèi)粘姷降耐暾募窂?。舉例來說，如果我們要引用桌面圖片文件夾下的這個圖片。
2、HTML相對路徑(Relative Path)同一個目錄的文件引用如果源文件和引用文件在同一個目錄里，直接寫引用文件名即可。我們現(xiàn)在建一個源文件info.html，在info.html里要引用index.html文件作為超鏈接。
3、絕對路徑指的是文件或目錄的真實路徑，表示方法一般是硬盤路徑或帶http開頭的路徑，如C：/website/web/index.htm 相對路徑 ./表示方法，表示當(dāng)前所在路徑。
4、也就是網(wǎng)頁文件在http協(xié)議下的url路徑或者是硬盤上網(wǎng)頁完整的路徑。例如：http：//：/www/html/images/logo.jpg一般來說網(wǎng)站內(nèi)文件引用和鏈接使用相對地址，網(wǎng)站外文件引用和鏈接使用絕對地址。
5、想要知道網(wǎng)站的URL路徑如何設(shè)置，就必須要了解URL路徑分類有哪些？網(wǎng)站技術(shù)人員一般會通過調(diào)用圖片、CSS以及JS代碼來對網(wǎng)站進行設(shè)計。而這種調(diào)用模式一般分為兩種，一種是相對路徑，另一種是絕對路徑。
6、絕對路徑 絕對路徑給出要鏈接的目標(biāo)文檔的完整URL，而且包括訪問該文檔所使用的協(xié)議，對于網(wǎng)頁通常使用http：//。例如，http：//localhost/ajax/chap02/page2-1html就是一個絕對路徑。
1、內(nèi)部鏈接的設(shè)置可以通過鏈接文本設(shè)置和圖片鏈接設(shè)置兩種方式實現(xiàn)。鏈接文本設(shè)置：在文本編輯器中選中相關(guān)文本，點擊插入鏈接按鈕，在彈出的鏈接設(shè)置窗口中設(shè)置鏈接地址即可。圖片鏈接設(shè)置：在圖片屬性設(shè)置中設(shè)置超鏈接地址即可。
2、網(wǎng)站內(nèi)鏈?zhǔn)紫纫岬哪蔷褪蔷W(wǎng)站地圖了，網(wǎng)站地圖分為2種常見形式，sitemap.html和sitemap.xml格式。
3、第控制分頁 如果文章的字?jǐn)?shù)非常多，那么我們就要考慮到分頁了，也就是小說網(wǎng)站的展示，文章一般控制在200-300字最好，有助于用戶體驗，也適合蜘蛛抓取。
4、網(wǎng)站內(nèi)鏈建設(shè)的作用 控制成本 你直接就可以在自己的站上進行部署，不像外部鏈接的不可控性比較大，需要長期的積累才有辦法實現(xiàn)穩(wěn)定的SEO效果。
相對路徑是相對某個文件夾下的單獨調(diào)用，而絕對路徑是指固定的某個文件夾下的調(diào)用。絕對路徑調(diào)用起來與相對路徑相比更加單一，也更加穩(wěn)定，如果不單獨修改這一路經(jīng)下的資料，是絕對無法更改和使用該路徑下的內(nèi)容。
性質(zhì)不同：相對路徑就是以當(dāng)前文件為基準(zhǔn)進行一級級目錄指向被引用的資源文件。絕對路徑是指文件在硬盤上真正存在的路徑。存取方式不同：絕對路徑是指可以從這個路徑上查找文件夾，不管是從外部或內(nèi)部存取。
相對路徑的優(yōu)缺點和絕對路徑幾乎相反。優(yōu)點：容易移動內(nèi)容，可以整個目錄移動。測試方法比較靈活，就是我所說的本機測試時比較方便。缺點：內(nèi)容頁面換了位置時，鏈接容易失效。容易被人大面積采集抄襲。
相對路徑是指相對于你所要使用的文件與將要使用的文件的相對位置，比如說你和你同學(xué)在一個寢室，那么他的相對路徑就是和你再一個地方，反之就是絕對路徑，也就是文件所在的完整的路徑。
