亚洲国产精品成人无码区,公天天吃我奶躁我的比视频,亚洲国产欧美视频亚洲国产精品一区二区成人片不卡,天天躁日日躁狠狠躁视频2021,起视碰看97视频在线少妇久久久久久人妻无码, 芒果乱码一线二线三线新区 ,亚洲熟妇无码AⅤ不卡在线播放,人妻少妇乱子伦无码专区

400-800-9385
網(wǎng)站建設(shè)資訊詳細(xì)

詳談方維站長工具如何解決抓取谷歌結(jié)果返回403錯誤問題

發(fā)表日期:2012-10-24 00:00:00   作者來源:方維網(wǎng)絡(luò)   瀏覽:6542   標(biāo)簽:方維站長工具    谷歌    
    方維站長工具能查詢網(wǎng)站各大搜索引擎收錄數(shù)量和百度權(quán)重、百度相關(guān)域、百度快照、百度近日收錄、網(wǎng)站歷史查詢、網(wǎng)站升級查詢等。但是在抓取谷歌網(wǎng)頁結(jié)果的時候,返回403錯誤問題,同樣的地址,用瀏覽器打開時顯示正常的搜索結(jié)果頁面,但用程序抓取就出現(xiàn)403錯誤頁面,里面講的是判斷訪問對象是機(jī)器,可見谷歌對程序或軟件抓取結(jié)果已經(jīng)做了相關(guān)的措施,因為谷歌+1算法已經(jīng)生效,防止機(jī)器抓取可以防止機(jī)器點(diǎn)擊。所以,方維站長工具一直因為這個原因無法抓取谷歌收錄、谷歌排名數(shù)據(jù)。

    一直以來,我都在網(wǎng)上尋找問題的答案,因為我看有些站長工具能夠抓取,所以問題一定有解決的方法,我開始懷疑是路徑不對,不過我發(fā)覺也只有這個路徑,于是我把目標(biāo)指向了抓取網(wǎng)頁的程序,采用其他方法,沒想到,讓我驚奇的結(jié)果出來了。用Microsoft.XMLHTTP對象獲取就可以抓取到正常結(jié)果,我以前是用MSXML2.SERVERXMLHTTP.3.0對象來抓取的。代碼如下。

Function getHTTPPage(url,charcode)
    dim objXML
    'set objXML=createobject("MSXML2.SERVERXMLHTTP.3.0")  '調(diào)用XMLHTTP組件,測試空間是否支持XMLHTTP
    set objXML=createobject("Microsoft.XMLHTTP")
 objXML.open "GET",url,false 'false表示以同步的方式獲取網(wǎng)頁代碼,了解什么是同步?什么是異步?
    objXML.send() '發(fā)送
    getHTTPPage=bBytesToBstr(objXML.responseBody,charcode)'返回信息,同時用函數(shù)定義編碼
    set objXML=nothing'關(guān)閉
End Function


Function bBytesToBstr(body,charcode)
    dim objstream
    set objstream = CreateObject("adodb.stream") '//調(diào)用adodb.stream組件
    objstream.Type = 1
    objstream.Mode =3
    objstream.Open
    objstream.Write body
    objstream.Position = 0
    objstream.Type = 2
    objstream.Charset = charcode '轉(zhuǎn)換原來默認(rèn)的UTF-8編碼轉(zhuǎn)換成GB2312編碼,否則直接用XMLHTTP調(diào)用有中文字符的網(wǎng)頁得到的將是亂碼
    bBytesToBstr = objstream.ReadText
    objstream.Close
    set objstream = nothing
end Function

通過使用這個抓取函數(shù),谷歌的收錄數(shù)據(jù)、排名數(shù)據(jù)都可以正常獲取了,從而解決了這個BUG。

方維站長工具正在一步步完善,而且源代碼全部開源,只希望保留版權(quán)信息。

如沒特殊注明,文章均為方維網(wǎng)絡(luò)原創(chuàng),轉(zhuǎn)載請注明來自http://www.oulysa.com/news/1717.html
相關(guān)網(wǎng)站設(shè)計案例
夫の目の前人妻中文字幕| 2021年最新偷拍视频一区| 欧美黑人性暴力猛交喷水| 日本不卡一区二区三区| 日本免费一区二区三区高清视频| 榴莲视频官方入口网站下载| 亚洲国产精品97久久无色无码| 国产一级a毛一级a看免费视频| 99热在线观看激情五月开心婷婷深爱| 国产精品揄拍一区二区久久| 精品无码AV一区二区三区不卡| 东北老富婆高潮大叫对白HD| 纯肉无码h肉动漫在线观看| 中文字幕一区二区三区久久| 无码精品人妻一区二区三区漫画| 午夜亚洲国产理论片中文飘花 | 精品.18岁末年禁止欢观看在线a 日本一区二区在线看| 国产一区二区精品九九| 97国产精品视频免费观看| 97欧美精品激情在线观看最新| 欧美性群另类交| 国产经典无码在线免费看| 少妇愉情理伦片丰满丰满午夜| 久久夜色撩人精品国产小说| 欧美日韩精品高清一区二区| 国产一二中文字幕91影院日韩欧美+| 久久久久99精品成人片直播| 日韩精品内射视频免费观看| 免费人成自慰网站| 日韩在线中文字幕制服丝袜| 精品日本一区二区三区在线观看| 激情偷乱人伦视频在线观看| 日本在线中文字幕第一视频| 亚亚欧精品黄色视频在线观看| 久久久久久黃色網站免費 | 日韩不卡手机视频在线观看| 2019中文字幕在线| 久久福利无码一区二区三区| 国产伦精品一区二区三区妓女| 偷国产乱人伦偷精品视频,无码网站| 国产激情高中生呻吟视频|