其實(shí)PLESK面板是一款專業(yè)主機(jī)管理軟件,不但容易操作,同時(shí)還可以最小的宕機(jī)時(shí)間,如今很多虛擬主機(jī)都會(huì)采用這一種面板,并且此面板為站長管理主機(jī)賬號(hào)提供了極大的方便。
一、獲取網(wǎng)站目錄的抓取信息
當(dāng)蜘蛛到你的網(wǎng)站上爬行收錄內(nèi)容時(shí),你的網(wǎng)站日志會(huì)對(duì)蜘蛛的行為會(huì)進(jìn)行自動(dòng)的記錄,因此只要你去分析網(wǎng)站的日志,你就會(huì)發(fā)現(xiàn)蜘蛛到你的網(wǎng)站上爬取了那些目錄,另外也可以知道蜘蛛是否到那些不會(huì)提升網(wǎng)站權(quán)重的目錄(例如:圖標(biāo)目錄,下載目錄,留言目錄,廣告頁面)上進(jìn)行了爬行。另外對(duì)于網(wǎng)站的數(shù)據(jù)庫,后臺(tái)目錄也完全不需要被蜘蛛爬行,如果任由蜘蛛爬行,也是一種安全隱患。另外一方面,搜索引擎對(duì)于不同的站點(diǎn)都有著抓取配額,無用目錄,更不要占用這樣的配額,以免減少有效配額的抓取量。還有就是能夠有效的規(guī)避百度認(rèn)為網(wǎng)站是垃圾網(wǎng)站的風(fēng)險(xiǎn)。
二、分析網(wǎng)站內(nèi)容抓取情況
頁面是否被蜘蛛抓取是我們分析網(wǎng)站的一個(gè)重要內(nèi)容,而通過網(wǎng)站日志我們可以非常容易的分析出來很多對(duì)我們有幫助的信息。比如我們的網(wǎng)站上是否有垃圾頁面被抓取,多重url鏈接的抓取,哪些頁面經(jīng)常被抓取,哪些是抓取頻率更高的高價(jià)值的頁面,這樣我們就可以把我們想要優(yōu)化但是抓取頻率低的頁面適當(dāng)?shù)脑黾悠毓舛?;要?duì)一些垃圾頁面進(jìn)行屏蔽,防范因?yàn)槔撁姹蛔ト∵^多導(dǎo)致網(wǎng)站被降權(quán);還可以分析出高質(zhì)量的內(nèi)容頁,并且多撰寫這樣的內(nèi)容,從而吸引蜘蛛前來抓取,抓取越多權(quán)重就會(huì)越高。
三、分析網(wǎng)站狀態(tài)碼信息
狀態(tài)碼分為兩種,一種是蜘蛛狀態(tài)碼,另一種是用戶狀態(tài)碼,通過蜘蛛狀態(tài)碼可以準(zhǔn)確的查看到網(wǎng)站是否存在抓取問題。例如:404代表的是錯(cuò)誤頁,301、302代表的是重定向,還有一些:504、500、等狀態(tài)碼,值得說的是:除去200狀態(tài)碼,出現(xiàn)其他的狀態(tài)碼都是應(yīng)當(dāng)值得注意的,當(dāng)然,如果只是個(gè)別幾條則無需理會(huì)。但是如果數(shù)量一旦偏多,網(wǎng)站則出現(xiàn)問題了。