一级毛片丰满**出奶水-亚洲欧洲自拍偷拍-亚州**色毛片免费观看-中文字幕永久天天综合-欧美日韩1卡2卡3卡免费高清中文精品字幕-最新上传免费网友自拍视频

百度蜘蛛在IIS日志下留 200 0 64 的終極解答 糾正網(wǎng)上的謬論

發(fā)布時間:2013-04-25 瀏覽:3350

撰寫本文的出發(fā)點:由于最近項目改版,需要用到新的域名。于是每天開始對蜘蛛及用戶的訪問日志進行分析,以并發(fā)現(xiàn)不正常的請求及站內錯誤。廢話不多講,直奔主題。

0015.jpg

步驟:

NO1、改版后服務器環(huán)境搭好,優(yōu)化好各項配置參數(shù)并測試好對外開放新域名。

NO2、1-2天百度收錄、谷歌收錄。(注:在權重極高的首頁掛了一下)

NO3、10天了,百度還只收錄首頁,內頁動也不動。 GOOGLE已經好幾萬了。

NO4、觀察日志LOG,GOOGLE 全是 200 0 0 狀態(tài)碼,百度 200 0 64 全是這些狀態(tài)碼

NO5、搜索大量資料分析這些狀態(tài)碼。其中的資料主要來自A5和CHINAZ,發(fā)現(xiàn)一些根本不懂的人也在亂講,導致搜出來的內容并不科學占了主導意思。

網(wǎng)絡上的主要意思大概有下面幾個觀點,本人一一作出解答。

1、K站的表現(xiàn),這一說法主要來自被K過站的站長,然后在散播說,只要留下200 0 64 就表示百度要K你了。

 答:錯誤,這只能說是一種偽科學。你有啥證據(jù)?百度官方說了嗎。我們站在科學的角度分析:200 0代表連接成功,大家都明白。后面的64 查詢MSDN后得到是網(wǎng)絡不可用。本人開發(fā)C++ 3年,C# 4年的經驗判斷,出現(xiàn)這一現(xiàn)象,主要是因為網(wǎng)絡被重置,或者TCP通訊時哪一方主動被斷開。 因為本人所從事的工作也經常是網(wǎng)絡開發(fā)。只要一方不正常斷開,另一方會導致異常,程序就要去做相應的異常處理,IIS也是個程序,百度蜘蛛也是個程序。那么雙方都會去處理這個異常。其中IIS日志就會記錄200 0 64。 本人觀察正常的瀏覽器也會產生200 0 64 碼,原因也是如此。只要瀏覽器在DEBUG時然后中斷連接,日志就會產生這種狀態(tài)碼。

   再說,我一個新域名,也沒有啥優(yōu)化過度,做個啥的弊,被K啥。

2、網(wǎng)絡廣為流傳的代表64位操作系統(tǒng)。

   答:狗屎,滾蛋。中國的互聯(lián)網(wǎng)正是因為有了你們這些人,才會有那么多的垃圾彈窗。

3、GZIP優(yōu)化后,導致這一情況產生。

  答:本人著重針對這一點進行分析,GZIP的原理不說了,為什么做也不說了。那么GOOGLE,和市面上大多數(shù)瀏覽器也是支持GZIP的,百度的蜘蛛也是支持GZIP的。這一點可以從百度的官方得到認可,百度官方的搜索引擎優(yōu)化指南也提倡這一做法。本人的服務器已經開啟GZIP,得到的狀態(tài)碼大多數(shù)如下:

2013-03-23 00:11:18 W3SVC766747422 113.10.187.98 GET http://http://www.yeencms.com/r_1 80 - 123.125.71.98 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 64

2013-03-23 00:18:26 W3SVC766747422 113.10.187.98 GET http://www.yeencms.com/sf/r_3- 80 - 220.181.108.181 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 64

2013-03-23 01:37:23 W3SVC766747422 113.10.187.98 GET http://www.yeencms.com/sf/r_2 80 - 123.125.71.56 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 64

 

于是本人關閉GZIP進行跟蹤觀察,第二天發(fā)現(xiàn)的日志如下:

2013-03-24 01:46:05 W3SVC766747422 113.10.187.98 GET http://www.yeencms.com/r_6 80 - 220.181.108.165 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 0

2013-03-24 01:46:08 W3SVC766747422 113.10.187.98 GET http://www.yeencms.com/r_4 80 - 123.125.71.16 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 0

2013-03-24 01:38:54 W3SVC766747422 113.10.187.98 GET http://www.yeencms.com/r_5 80 - 123.125.71.114 Mozilla/5.0+(compatible;+Baiduspider/2.0;++http://www.baidu.com/search/spider.html) 200 0 0

為什么會這樣子呢?我的分析如下:

1、百度在請求頁面內容的時候,得到GZIP加密串,然后進行解密。這一過程沒有及時的將剩余的資源讀取完畢就干自己的事了。導致服務方出現(xiàn)異常,所以產生了網(wǎng)絡被重置,網(wǎng)絡名不可用的日志。 GOOGLE這一方面做的非常好,完全按照流程辦事。 其實這也是沒有關系的。因為百度已經得到了自己想要的內容。

2、百度在請求頁面內容的時候,得到GZIP加密串,解密失敗。哈哈。這說不過去吧。。。。這正是廣大站長最擔心的,百度也沒有解釋。我認為這點倒不致于。

3、有些人說,我沒有啟用GZIP為什么也會有200 0 64 ,因為蜘蛛在抓你的內容的時候,你的內容沒有發(fā)生變化,它只判斷內容流的前部分就直接關閉這次通訊。導致你的服務器程序出現(xiàn)網(wǎng)絡不可用或者網(wǎng)絡名不存在,也就是64。其實百度這么做是為了提高抓取效率。

通過本人的分析,推薦大家關閉GZIP先。其實也就是個心理有個放心。什么網(wǎng)上所謂的K站前兆,64位系統(tǒng)都是沒有證據(jù)的,不必理會。

另,根據(jù)本人的親測,百度確實有個新站考察期,時間為,1周-2月不等。

 

 

相關推薦

  • 企業(yè)在做網(wǎng)站時需要準備哪些網(wǎng)站資料?

    一般做網(wǎng)站肯定是要花費一定的費用的。比如前期的購買域名,空間,虛擬主機等費用。不管是讓自己公司人做還是找網(wǎng)站公司來做,網(wǎng)站后期都需要進行SEO優(yōu)化,所以一般小型企業(yè)網(wǎng)站還是交給網(wǎng)站建設公司來做。一、企業(yè)網(wǎng)站名稱和域名的選擇做網(wǎng)站首頁先確定企業(yè) [更多]

    更新于2016-05-09 瀏覽 9384 次
  • 網(wǎng)站建設中404錯誤頁面的應用

    一般網(wǎng)站出現(xiàn)404錯誤原因有如下兩個方面1、用戶輸入了錯誤的鏈接2、鏈接先前存在但是后來做了修改,比如刪除了文章等等導致用戶輸入的鏈接不存在有與之相連的網(wǎng)頁所以訪問出現(xiàn)錯誤!出現(xiàn)“無法找到該頁”對于搜索引擎蜘蛛不是友好的界面,最好這個頁面站長自 [更多]

    更新于2016-05-09 瀏覽 7938 次
  • 低價建站是不是質量沒有保障?

    很多朋友來找全福網(wǎng)絡公司建站都會有個疑問,為什么用yeencms建站這么便宜?這么便宜的價格,是不是質量不好?今天我們就討論下到底低價建站有沒有保障呢?網(wǎng)站的價格嚴格來說有三部分組成:1、建站硬性成本,包括虛擬空間/服務器費用、域名費用2、銷售、開發(fā) [更多]

    更新于2016-05-09 瀏覽 8909 次
  • 互聯(lián)網(wǎng)創(chuàng)業(yè)趕早不趕晚 趕晚不如趕巧?

    汽車之家秦致在此前的創(chuàng)業(yè)經驗文章說道,入行趕早不趕晚。​在他看來,中國龐大的消費市場里,盤踞著千千萬萬個行業(yè)。選擇行業(yè)的時候,一定要把握好行業(yè)變化的周期。舉個簡單的例子,08年中國乘用車市場份額位居世界第一,中國互聯(lián)網(wǎng)市場也位列前世界之 [更多]

    更新于2013-05-16 瀏覽 8184 次
  • 草根站長創(chuàng)業(yè)的六個難題

    近日,看到一篇名為《草根個人站長看創(chuàng)業(yè)與投資》的文章感受頗深,草根站長一直掙扎于IT的邊緣化,處于IT的最低層,同樣也為大多數(shù)IT人所不齒,靠賺廣告聯(lián)盟那幾刀,建一些垃圾站群,倒騰一些垃圾流量,整個一個互聯(lián)網(wǎng)“垃圾”。筆者在一個質量還算比較高的站 [更多]

    更新于2013-05-16 瀏覽 7909 次
  • 為何我是個失敗的站長?四個網(wǎng)站的失敗經歷

    如果不是A5版主的身份,也許我早已經離開站長這個圈子了,感謝A5讓我繼續(xù)堅守在站長行業(yè)!接觸這個行業(yè)久了,見多了太多成功的例子,真的很羨慕那些成功的站長,可羨慕的同時自己又在反思自己,為什么別人都能獲得成功,而自己作為一名“老站長”反倒是現(xiàn)在一 [更多]

    更新于2013-05-16 瀏覽 7203 次
一级毛片丰满**出奶水-亚洲欧洲自拍偷拍-亚州**色毛片免费观看-中文字幕永久天天综合-欧美日韩1卡2卡3卡免费高清中文精品字幕-最新上传免费网友自拍视频