Python使用pyppeteer進(jìn)行網(wǎng)頁截圖并發(fā)送機(jī)器人實(shí)例
Pyppeteer是對(duì)Puppeteer的一個(gè)Python封裝,常用在爬蟲方面,最近使用它做網(wǎng)頁巡檢報(bào)告的截圖,記錄一下
腳本截圖
使用pyppeteer其實(shí)和我們自己開瀏覽器的邏輯差不多,同時(shí)要結(jié)合async一起使用,首先要通過lauch函數(shù)啟動(dòng)一個(gè)瀏覽器,啟動(dòng)瀏覽器的時(shí)候可以設(shè)置啟動(dòng)參數(shù),其中包括使用的代理服務(wù)器:
browser = await launch(args=["--no-sandbox", "--proxy-server=http://10.1.1.1:8443"])
啟動(dòng)瀏覽器后我們要開一個(gè)新的標(biāo)簽頁來訪問網(wǎng)頁,goto就是用來訪問對(duì)應(yīng)的網(wǎng)頁的:
page = await browser.newPage() await page.goto(url)
現(xiàn)在我們就開始訪問對(duì)應(yīng)的網(wǎng)頁了,根據(jù)經(jīng)驗(yàn)我們都知道有的網(wǎng)頁剛開啟的時(shí)候不是完全渲染完的,所以可以添加一個(gè)asyncio.sleep(10)來等待十秒鐘:
await asyncio.sleep(10)
如果需要運(yùn)行一些js腳本語句,可以通過evaluate執(zhí)行:
dimensions = await page.evaluate('''() => {
return {
width: document.documentElement.scrollWidth,
height: document.documentElement.scrollHeight,
}
}''')
然后可以使用字典訪問對(duì)應(yīng)的數(shù)據(jù):
dimensions['height']
接下來就是截圖的操作了,甚至可以同時(shí)截成pdf,完整代碼如下:
async def main():
browser = await launch(args=["--no-sandbox", "--proxy-server=http://10.1.1.1:8443"])
# 新建選項(xiàng)卡
page = await browser.newPage()
await page.goto(url)
await asyncio.sleep(10)
dimensions = await page.evaluate('''() => {
return {
width: document.documentElement.scrollWidth,
height: document.documentElement.scrollHeight,
}
}''')
await page.setViewport({'width': 1920, 'height': dimensions['height']})
await page.screenshot({'path': "test.png", "clip": {"x": 300, "y": 10, "width": 1320, "height": dimensions['height']}})
await page.pdf({'path': file, 'width': 1920, 'height': dimensions['height']})
await browser.close()
發(fā)送到機(jī)器人
截圖和pdf都生成了,現(xiàn)在都可以發(fā)送給企業(yè)微信機(jī)器人了
發(fā)送圖片
def post_img_to_robot(page):
with open(page, 'rb') as file:
data = file.read()
encodestr = base64.b64encode(data)
image_data = str(encodestr, 'utf-8')
with open(page, 'rb') as file:
md = hashlib.md5()
md.update(file.read())
image_md5 = md.hexdigest()
data = {
"msgtype": "image",
"image": {
"base64": image_data,
"md5": image_md5
}
}
headers = {'content-type': 'application/json;charset=utf-8'}
body = json.dumps(data)
requests.post(qy_ex, data=body, headers=headers)
發(fā)送PDF
發(fā)送PDF按照教程需要先調(diào)用upload_media接口,然后在發(fā)送圖片的時(shí)候把media_id作為參數(shù)傳入
def post_file_to_robot(file):
parsed_url = urlparse(qy_ex)
param = parse_qs(parsed_url.query)
webHookKey = param["key"][0]
upload_url = f'https://qyapi.weixin.qq.com/cgi-bin/webhook/upload_media?key={webHookKey}&type=file'
headers = {
"Accept": "application/json, text/plain, */*", "Accept-Encoding": "gzip, deflate",
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.100 Safari/537.36"
}
data = {'file': open(file, 'rb')}
req = requests.post(url=upload_url, files=data, headers=headers).json()
media_id = req["media_id"]
data = {
"msgtype": "file",
"file": {"media_id": media_id}
}
requests.post(url=qy_ex, json=data)
發(fā)送效果如下:

總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
Python Web靜態(tài)服務(wù)器非堵塞模式實(shí)現(xiàn)方法示例
這篇文章主要介紹了Python Web靜態(tài)服務(wù)器非堵塞模式實(shí)現(xiàn)方法,結(jié)合實(shí)例形式分析了Python單進(jìn)程非堵塞模式實(shí)現(xiàn)的Web靜態(tài)服務(wù)器相關(guān)操作技巧,需要的朋友可以參考下2019-11-11
torch.utils.data.DataLoader與迭代器轉(zhuǎn)換操作
這篇文章主要介紹了torch.utils.data.DataLoader與迭代器轉(zhuǎn)換操作,文章內(nèi)容接受非常詳細(xì),對(duì)正在學(xué)習(xí)或工作的你有一定的幫助,需要的朋友可以參考一下2022-02-02
使用Tensorflow?hub完成目標(biāo)檢測過程詳解
這篇文章主要為大家介紹了使用Tensorflow?hub完成目標(biāo)檢測過程詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-04-04
python中kmeans聚類實(shí)現(xiàn)代碼
這篇文章主要為大家詳細(xì)介紹了python中kmeans聚類的實(shí)現(xiàn)代碼,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-02-02
Python實(shí)現(xiàn)圖像尺寸和格式轉(zhuǎn)換處理的示例詳解
這篇文章主要為大家詳細(xì)介紹了如何利用Python實(shí)現(xiàn)圖像尺寸獲取和格式轉(zhuǎn)換處理的功能,文中的示例代碼講解詳細(xì),感興趣的可以了解一下2023-04-04
pytorch的Backward過程用時(shí)太長問題及解決
這篇文章主要介紹了pytorch的Backward過程用時(shí)太長問題及解決方案,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-02-02

