快捷導(dǎo)航

Python實(shí)現(xiàn)獲取網(wǎng)站PR及百度權(quán)重

更新時(shí)間：2015年01月21日 11:56:01 投稿：junjie

這篇文章主要介紹了Python實(shí)現(xiàn)獲取網(wǎng)站PR及百度權(quán)重,本文使用傳參的方式請(qǐng)求站長(zhǎng)工具和谷歌工具獲取PR值和百度權(quán)重,需要的朋友可以參考下

上一次我用requests庫(kù)寫(xiě)的一個(gè)抓取頁(yè)面中鏈接的簡(jiǎn)單代碼，延伸一下，我們還可以利用它來(lái)獲取我們網(wǎng)站的PR以及百度權(quán)重。原理差不多。最后我們甚至可以寫(xiě)一個(gè)循環(huán)批量查詢網(wǎng)站的相關(guān)信息。

先說(shuō)說(shuō)GooglePR，全稱PageRank。它是Google官方給出的評(píng)定一個(gè)網(wǎng)站SEO的評(píng)級(jí)，這個(gè)大家應(yīng)該不陌生。既然是官方給出的，當(dāng)然有一個(gè)官方的接口去獲取它。我們這里就利用官方的接口獲取谷歌PR。

復(fù)制代碼代碼如下:

GPR_HASH_SEED ="Mining PageRank is AGAINST GOOGLE'S TERMS OF SERVICE. Y\
es, I'm talking to you, scammer."

def google_hash(value):
    magic = 0x1020345
    for i in xrange(len(value)):
        magic ^= ord(GPR_HASH_SEED[i % len(GPR_HASH_SEED)]) ^ ord(value[i])
        magic = (magic >> 23 | magic << 9) & 0xFFFFFFFF
    return "8%08x" % (magic)

def getPR(www):
    try:
        url = 'http://toolbarqueries.google.com/tbr?' \
        'client=navclient-auto&ch=%s&features=Rank&q=info:%s' % (google_hash(www) , www)
        response = requests.get(url)
        rex = re.search(r'(.*?:.*?:)(\d+)',response.text)
        return rex.group(2)
    except :
        return None

使用方法：傳入域名，返回PR值

google_hash這個(gè)函數(shù)只是個(gè)算法，算出一個(gè)域名類似hash值的一個(gè)東西并返回?？梢圆蝗ス芩窃趺磳?shí)現(xiàn)的，我們主要看getPR這個(gè)函數(shù)。我們google官方給出的接口是這個(gè)：http://toolbarqueries.google.com/tbr?client=navclient-auto&ch={HASH}&features=Rank&q=info:{域名}

{HASH}這里我們就使用google_hash()這個(gè)函數(shù)，傳入域名，返回它對(duì)應(yīng)的HASH值。比如我們離別歌的域名www.leavesongs.com，它的谷歌HASH是8b1e6ad00，于是構(gòu)造出來(lái)的咨詢網(wǎng)址是：http://toolbarqueries.google.com/tbr?client=navclient-auto&ch=8b1e6ad00&features=Rank&q=info:www.leavesongs.com

訪問(wèn)它，得到Rank_1:1:0。第二個(gè)引號(hào)后面的數(shù)字是PR，因?yàn)槲业恼臼菦](méi)有PR的，所以PR為0.

于是，我們使用requests.get()來(lái)訪問(wèn)我們這個(gè)構(gòu)造好的URL，然后獲得類似Rank_1:1:0這樣的結(jié)果，最后通過(guò)正則或其他方式得到PR值0。

以上是getPR這個(gè)函數(shù)的執(zhí)行過(guò)程。再看獲取百度權(quán)重的過(guò)程。

百度權(quán)重并不是百度官方給的一個(gè)標(biāo)準(zhǔn)，是一些第三方網(wǎng)站計(jì)算的一個(gè)值，所以并沒(méi)有像PR一樣的接口。所以我們就需要抓取這些第三方網(wǎng)站中的信息了。下面是獲取百度權(quán)重的函數(shù):

復(fù)制代碼代碼如下:

def getBR(www):

    try:

        url = 'http://mytool.chinaz.com/baidusort.aspx?host=%s&sortType=0' % ( www , )

        response = requests.get(url)

        data = response.text

        rex = re.search(r'(<div class="siteinfo">.+?<font.+?>)(\d*?)(</font>)',data,re.I)

        return rex.group(2)

    except :

        return None

使用方法也是傳入域名，返回權(quán)重值。

我抓取的是站長(zhǎng)工具的一個(gè)權(quán)重咨詢的頁(yè)面：http://mytool.chinaz.com/baidusort.aspx?host={域名}&sortType=0

我的正則就是它：(<div class="siteinfo">.+?<font.+?>)(\d*?)(</font>)，大家可以自己查看源代碼看一下，就知道正則怎么寫(xiě)了。

好了，我們來(lái)批量獲取一下這些網(wǎng)站的PR和權(quán)重：