欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

python爬蟲(chóng)_自動(dòng)獲取seebug的poc實(shí)例

 更新時(shí)間:2017年08月05日 08:40:04   投稿:jingxian  
下面小編就為大家?guī)?lái)一篇python爬蟲(chóng)_自動(dòng)獲取seebug的poc實(shí)例。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧

簡(jiǎn)單的寫(xiě)了一個(gè)爬取www.seebug.org上poc的小玩意兒~

首先我們進(jìn)行一定的抓包分析

我們遇到的第一個(gè)問(wèn)題就是seebug需要登錄才能進(jìn)行下載,這個(gè)很好處理,只需要抓取返回值200的頁(yè)面,將我們的headers信息復(fù)制下來(lái)就行了

(這里我就不放上我的headers信息了,不過(guò)headers里需要修改和注意的內(nèi)容會(huì)在下文講清楚)

headers = {
 'Host':******,
 'Connection':'close',
 'Accept':******,
 'User-Agent':******,
 'Referer':'https://www.seebug.org/vuldb/ssvid-',
 'Accept-Language':'zh-CN,zh;q=0.8',
 'Cookie':***********
}

由上所知,我們的中點(diǎn)就是referer這一項(xiàng),是我們后面要進(jìn)行修改的

那么怎么去修改這個(gè)呢?

我先進(jìn)行點(diǎn)擊下載鏈接抓包發(fā)現(xiàn),seebug的poc下載鏈接特別的整齊:

'https://www.seebug.org/vuldb/downloadPoc/xxxxx',

后面只需要加上一個(gè)五位數(shù)就行,而且五位數(shù)是連號(hào)的哦!

這就一目了然,我更改了五位數(shù)再次進(jìn)行請(qǐng)求時(shí)發(fā)現(xiàn),并沒(méi)有返回美麗的200狀態(tài)碼,瞄了一眼header,發(fā)現(xiàn)了referer這一項(xiàng):

'Referer':'https://www.seebug.org/vuldb/ssvid-xxxxx'

也就是說(shuō)referer這一項(xiàng)的五位數(shù)字也要隨之變化,這樣我們的get請(qǐng)求頭部就完成了

接下來(lái)是線程的問(wèn)題

使用了queue和threading進(jìn)行多線程處理,發(fā)現(xiàn)我們不能圖快,不然會(huì)被反爬蟲(chóng)發(fā)現(xiàn)

于是導(dǎo)入time增加time.sleep(1),能有一秒的休眠就行了,線程數(shù)給了2個(gè)(這樣看來(lái)好像線程的意義并不大,不過(guò)也就這么寫(xiě)啦)

# coding=utf-8

import requests
import threading
import Queueimport time 

headers = {
   ******
  }
url_download = 'https://www.seebug.org/vuldb/downloadPoc/'

class SeeBugPoc(threading.Thread):
 def __init__(self,queue):
  threading.Thread.__init__(self)
  self._queue = queue

 def run(self):
  while not self._queue.empty():
   url_download = self._queue.get_nowait()
   self.download_file(url_download)


 def download_file(self,url_download):
  r = requests.get(url = url_download,headers = headers)
  print r.status_code
  name = url_download.split('/')[-1]
  print name 
  if r.status_code == 200:
   f = open('E:/poc/'+name+'.txt','w')
   f.write(r.content)
   f.close()
   print 'it ok!'
  else:
   print 'what fuck !'
  time.sleep(1)
'''
 def get_html(self,url):

  r = requests.get(url = url,headers = headers)
  print r.status_code
  print time.time()
'''


def main():
 queue = Queue.Queue()
 for i in range(93000,93236):
  headers['Referer'] = 'https://www.seebug.org/vuldb/ssvid-'+str(i)
  queue.put('https://www.seebug.org/vuldb/downloadPoc/'+str(i))


  #queue用來(lái)存放設(shè)計(jì)好的url,將他們放入一個(gè)隊(duì)列中,以便后面取用

 threads = []
 thread_count = 2
 for i in range(thread_count):
  threads.append(SeeBugPoc(queue))

 for i in threads:
  i.start()

 for i in threads:
  i.join()

if __name__ == '__main__':
 main()

代碼如上

控制下載的range()中的兩個(gè)五位數(shù),大家只要去seebug庫(kù)中找一找想要掃描的庫(kù)的開(kāi)頭和結(jié)尾編碼的五位數(shù)就行了(也就是他們的編號(hào))

關(guān)于返回的狀態(tài)碼,如果項(xiàng)目不提供poc下載、poc下載不存在、poc需要兌換幣才能下載,就不能夠返回正常的200啦(非正常:404/403/521等)

當(dāng)然,如果一直出現(xiàn)521,可以考慮刷新網(wǎng)頁(yè)重新獲取header并修改代碼

最后進(jìn)行一個(gè)狀態(tài)碼的判斷,并且將200的文件寫(xiě)出來(lái)就好了
 

  表示慚愧感覺(jué)自己寫(xiě)的很簡(jiǎn)單

  如果大家發(fā)現(xiàn)錯(cuò)誤或者有疑惑可以留言討論哦

以上這篇python爬蟲(chóng)_自動(dòng)獲取seebug的poc實(shí)例就是小編分享給大家的全部?jī)?nèi)容了,希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。

相關(guān)文章

  • Python中pytest命令行實(shí)現(xiàn)環(huán)境切換

    Python中pytest命令行實(shí)現(xiàn)環(huán)境切換

    在自動(dòng)化測(cè)試過(guò)程中經(jīng)常需要在不同的環(huán)境下進(jìn)行測(cè)試驗(yàn)證,所以寫(xiě)自動(dòng)化測(cè)試代碼時(shí)需要考慮不同環(huán)境切換的情況,本文主要介紹了Python中pytest命令行實(shí)現(xiàn)環(huán)境切換,感興趣的可以了解一下
    2023-07-07
  • Pandas 重塑(stack)和軸向旋轉(zhuǎn)(pivot)的實(shí)現(xiàn)

    Pandas 重塑(stack)和軸向旋轉(zhuǎn)(pivot)的實(shí)現(xiàn)

    這篇文章主要介紹了Pandas 重塑(stack)和軸向旋轉(zhuǎn)(pivot)的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2019-07-07
  • Python中匹配模糊的字符串問(wèn)題分析

    Python中匹配模糊的字符串問(wèn)題分析

    這篇文章主要介紹了Python中匹配模糊的字符串的過(guò)程,我們將學(xué)習(xí)如何使用process 模塊,該模塊允許我們?cè)谀:址壿嫷膸椭掠行У仄ヅ浠蛱崛∽址?需要的朋友可以參考下
    2023-09-09
  • 使用Python實(shí)現(xiàn)Oracle數(shù)據(jù)庫(kù)自動(dòng)巡檢程序

    使用Python實(shí)現(xiàn)Oracle數(shù)據(jù)庫(kù)自動(dòng)巡檢程序

    這篇文章主要為大家詳細(xì)介紹了如何創(chuàng)建一個(gè)Oracle數(shù)據(jù)庫(kù)自動(dòng)巡檢程序,以確保數(shù)據(jù)庫(kù)的順暢運(yùn)行,感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下
    2024-01-01
  • 將自己的Python包發(fā)布到PyPI上的教程詳解

    將自己的Python包發(fā)布到PyPI上的教程詳解

    在Python中我們經(jīng)常使用pip來(lái)安裝第三方Python軟件包,其實(shí)我們每個(gè)人都可以免費(fèi)地將自己寫(xiě)的Python包發(fā)布到PyPI上,本文小編就來(lái)教教大家如何將自己的Python包發(fā)布到PyPI上吧
    2023-09-09
  • python一行輸入多值的實(shí)現(xiàn)詳解

    python一行輸入多值的實(shí)現(xiàn)詳解

    開(kāi)發(fā)人員通常想要用戶(hù)在一行中輸入多個(gè)值或者輸入。在python中有兩種方式讓用戶(hù)在一行中輸入多個(gè)值或者輸入,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2022-09-09
  • Python?selenium?webdriver?基本使用代碼分享

    Python?selenium?webdriver?基本使用代碼分享

    這篇文章主要介紹了Python?selenium?webdriver?基本使用,本文僅僅簡(jiǎn)單介紹了selenium的使用常用代碼分享,需要的朋友可以參考下
    2022-11-11
  • Python可變集合和不可變集合的構(gòu)造方法大全

    Python可變集合和不可變集合的構(gòu)造方法大全

    Python集合分為變集合和不可變集合兩種,本文就詳細(xì)的來(lái)介紹一下這兩種集合的使用,文中通過(guò)示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2021-12-12
  • python實(shí)現(xiàn)將列表中各個(gè)值快速賦值給多個(gè)變量

    python實(shí)現(xiàn)將列表中各個(gè)值快速賦值給多個(gè)變量

    這篇文章主要介紹了python實(shí)現(xiàn)將列表中各個(gè)值快速賦值給多個(gè)變量,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
    2020-04-04
  • python入門(mén)之語(yǔ)句(if語(yǔ)句、while語(yǔ)句、for語(yǔ)句)

    python入門(mén)之語(yǔ)句(if語(yǔ)句、while語(yǔ)句、for語(yǔ)句)

    這篇文章主要介紹了python入門(mén)之語(yǔ)句,主要包括if語(yǔ)句、while語(yǔ)句、for語(yǔ)句的使用,需要的朋友可以參考下
    2015-01-01

最新評(píng)論