正則爬取京東商品信息并打包成.exe可執(zhí)行程序
本文爬取內(nèi)容,輸入要搜索的關(guān)鍵字可自動爬取京東網(wǎng)站上相關(guān)商品的店鋪名稱,商品名稱,價格,爬取100頁(共100頁)
代碼如下;
import requests import re # 請求頭 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36' } def get_all(url,key): for page in range(1,200,2): params = { 'keyword':key, 'enc':'utf-8', 'page':page } num = int((int(page)+1)/2) try: response = requests.get(url=url,params=params,headers=headers) # 轉(zhuǎn)碼 content = response.text.encode(response.encoding).decode(response.apparent_encoding) data_all = re.findall('<div class="p-price">.*?<i>(.*?)</i>.*?<div class="p-name p-name-type-2">.*?title="(.*?)"' '.*?<div class="p-shop".*?title="(.*?)"',content,re.S) for i in data_all: with open(key + '.txt', 'a+', encoding='utf-8') as f: f.write('店鋪名稱:' + i[2]+'\n'+'商品名稱:'+i[1]+'\n'+'價格:'+i[0]+'\n\n') print('第'+str(num)+'頁'+'數(shù)據(jù)下載中....') except Exception as e: print(e) if __name__ == '__main__': print('輸入要搜索的內(nèi)容,獲取京東商城里面的商品名稱,店鋪名稱,商品價格') key = input('輸入搜索內(nèi)容:') url = 'https://search.jd.com/Search?' get_all(url,key)
打包成.exe可執(zhí)行文件。
需要用到pyinstaller包pip下載;
pip install pyinstaller
在線制作一個.ico圖標,用來當程序圖片,把圖標和程序放在同一個文件夾下,
在.py文件目錄下打開命令行窗口,執(zhí)行打包命令;
E:\練習(xí)\最后階段\0808\jd1>pyinstaller -F -i dog.ico jd.py
出現(xiàn)successfully表示打包成功;
27525 INFO: Building EXE from EXE-00.toc completed successfully.
可執(zhí)行程序在當前文件夾下的dist文件夾下;
運行效果;
可同時執(zhí)行多個程序;
輸出結(jié)果;
done。
總結(jié)
以上所述是小編給大家介紹的正則爬取京東商品信息并打包成.exe可執(zhí)行程序,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
如果你覺得本文對你有幫助,歡迎轉(zhuǎn)載,煩請注明出處,謝謝!
- python正則表達式爬取貓眼電影top100
- python爬蟲 正則表達式使用技巧及爬取個人博客的實例講解
- C語言正則表達式詳解 regcomp() regexec() regfree()用法詳解
- 正則表達式中test、exec、match的區(qū)別介紹及括號的用法
- 全面解析JS字符串和正則表達式中的match、replace、exec等函數(shù)
- js正則表達式test()和exec()用法實例
- js正則表達式中test,exec,match方法的區(qū)別說明
- js正則函數(shù)match、exec、test、search、replace、split使用介紹集合
- js的正則test,match,exec詳細解析
相關(guān)文章
JS 正則表達式(學(xué)習(xí)筆記2)匹配網(wǎng)址url參數(shù)
呵呵,剛學(xué)習(xí)正則表達式,今天幫一個美女解決了個問題。感到很高興。先貼下今天都學(xué)了什么吧。不然忘記了。2010-05-05.NET正則基礎(chǔ)之.NET正則類及方法應(yīng)用
初學(xué)正則時,對于Regex類不熟悉,遇到問題不知道該用哪種方法解決,本文結(jié)合一些正則應(yīng)用的典型應(yīng)用場景,介紹一下Regex類的基本應(yīng)用。這里重點進行.NET類的介紹,對于正則的運用,不做深入探討2023-05-05正則表達式實現(xiàn)字符串每4位后自動加空格效果(兩種方法)
本文通過兩種方法給大家介紹了正則表達式實現(xiàn)字符串每4位后自動加空格效果,需要的朋友可以參考下2018-09-09Further Study of Rugular Expresions
regular expressions(正則表達式,以下用re稱呼)對小弟來說一直都是神密的地帶,看到一些網(wǎng)絡(luò)上的大大,簡單用re就決解了 某些文字的問題2008-09-09學(xué)會Python正則表達式,就看這20個例子(腳本之家修正版)
這篇文章主要介紹了學(xué)會Python正則表達式,就看這20個例子,需要的朋友可以參考下2020-03-03