快捷導(dǎo)航

教你如何使用Python selenium

更新時(shí)間：2021年06月06日 10:39:19 作者：布小禪

今天教大家如何使用Python selenium,本文會(huì)以藝龍旅游網(wǎng)為對(duì)象,進(jìn)行selenium的學(xué)習(xí),目的：爬取藝龍網(wǎng)中南陽(yáng)市唐河縣的酒店信息,包括：名字,電話,標(biāo)間價(jià)格,地址,介紹,圖片,需要的朋友可以參考下

一、了解selenium

Selenium是一個(gè)用于測(cè)試網(wǎng)站的自動(dòng)化測(cè)試工具，支持各種瀏覽器包括Chrome、Firefox、Safar等瀏覽器（需要下載驅(qū)動(dòng)），之前是用來(lái)做測(cè)試網(wǎng)站的，后來(lái)發(fā)現(xiàn)也可以用來(lái)爬取數(shù)據(jù)（估計(jì)開(kāi)發(fā)者都沒(méi)想到他開(kāi)發(fā)的selenium被別人廣泛適用于爬蟲(chóng)領(lǐng)域——笑）。

二、selenium的下載

1.我這里是使用的Chrom瀏覽器！注意不要忽視這個(gè)地方

2.python中selenium庫(kù)的下載（pycharm系列）

由于我用的pycharm的虛擬環(huán)境，所以我只需要在pycharm的終端下載第三方庫(kù)就行了，簡(jiǎn)單，方便，pycharm真是個(gè)好用的東西——O(∩_∩)O~

打開(kāi)pycharm
打開(kāi)pycharm的終端
輸入pip install selenium -i https://pypi.doubanio.com/simple (這是使用國(guó)內(nèi)鏡像網(wǎng)站下載selenium，下載速度較快)
等待片刻，結(jié)束
pip list ——查看自己下載的第三方庫(kù)，檢查是否成功

3.python中selenium庫(kù)的下載（cmd系列）

win+R輸入cmd
打開(kāi)cmd
輸入pip install selenium -i https://pypi.doubanio.com/simple (這是使用國(guó)內(nèi)鏡像網(wǎng)站下載selenium，下載速度較快)
等待片刻，結(jié)束
pip list ——查看自己下載的第三方庫(kù)，檢查是否成功

4.selenium驅(qū)動(dòng)的下載（官網(wǎng)都是英文，看不懂）

打開(kāi)你的Chrom瀏覽器查看你是什么版本的（幫助->about chrom），查看版本號(hào)
點(diǎn)擊右邊這個(gè)藍(lán)色的小可愛(ài)，沒(méi)錯(cuò)我是小可愛(ài) ，找到與你的chrom瀏覽器版本相匹配的（沒(méi)有匹配的，相近的也可以，win都是32位的），下載
沒(méi)了，沒(méi)錯(cuò)，你沒(méi)看錯(cuò)，真的沒(méi)了

5.selenium的環(huán)境配置，沒(méi)錯(cuò)又是這個(gè)煩人的環(huán)境配置真想給他一腳

想必，這個(gè)時(shí)候已經(jīng)下載好了吧
下載好以后，很簡(jiǎn)單，解壓，然后——看3
最好（但是不是必要）創(chuàng)建一個(gè)文件夾放你解壓出來(lái)的geckodriver，然后復(fù)制你這個(gè)文件當(dāng)前的路徑（ctrl + c）
打開(kāi)環(huán)境變量（此電腦->右鍵->屬性->高級(jí)系統(tǒng)配置->環(huán)境變量），在系統(tǒng)變量找到path，新建，ctrl + v
完事

6.打開(kāi)你的pycharm，新建一個(gè)py文件去寫(xiě)出以下代碼

from selenium import webdriver
import time
# 導(dǎo)入時(shí)間包和selenium包
huohu = webdriver.Chrome()
# 創(chuàng)建一個(gè)chome的selenium對(duì)象
huohu.get("http://www.elong.com/")
# 打開(kāi)網(wǎng)站
huohu.quit()
# 退出

寫(xiě)好后，運(yùn)行
好，報(bào)錯(cuò)了，對(duì)，報(bào)錯(cuò)了，可能你們不會(huì)報(bào)錯(cuò)，反正我報(bào)錯(cuò)了

報(bào)錯(cuò)信息是：selenium.common.exceptions.WebDriverException: Message: ‘chromedriver' executable needs to be in PATH.

意思是，你需要吧chromdriver放到路徑，我照著做了，可是呢，還是這個(gè)報(bào)錯(cuò)！

這是什么情況？？明明我是按照教程來(lái)的啊

著急的我去群里請(qǐng)求大佬，大佬們直接無(wú)視我——::>_<::

然后又去找它——>腳本之家，左翻翻，右找找，終于找到了解決方案：

將chromdriver放在python解釋器的位置，我照著做了之后，就成功了。。。

好家伙，上面教程不是說(shuō)隨便放的嗎？…

哎，人與人之間最基本的信任都沒(méi)有了

三、selenium的基本使用

from selenium import webdriver
# 導(dǎo)包
driver = webdriver.Chrome()
# 創(chuàng)建一個(gè)瀏覽器對(duì)象
driver.get("https://m.elong.com/")
# 訪問(wèn)藝龍網(wǎng)
driver.quit()
# 關(guān)閉瀏覽器，也可以不關(guān)閉，但是最好關(guān)閉，養(yǎng)成一個(gè)打開(kāi)后不忘記關(guān)閉的好習(xí)慣

然后我們就會(huì)發(fā)現(xiàn)，瀏覽器界面一閃而過(guò)（為什么？因?yàn)轫?yè)面渲染完成后，就直接退出了），那么如何才能讓我們能夠觀察到呢？有請(qǐng)我們的time模塊，讓它睡會(huì)兒，就能觀察到了
這樣改

from selenium import webdriver
import time
# 導(dǎo)包
driver = webdriver.Chrome()
driver.get("https://m.elong.com/")
time.sleep(5)
# 頁(yè)面渲染完成后讓它睡5s，這樣就能觀察到了
driver.quit()

OK，看到，代碼替我們打開(kāi)了這個(gè)網(wǎng)址，并且展示了5s后關(guān)閉了

四、結(jié)語(yǔ)

好了，相信大家已經(jīng)學(xué)會(huì)如何使用筷子了，那么讓我們?nèi)?dòng)用我們的筷子去把這個(gè)網(wǎng)站抓下來(lái)吧——笑，玩?zhèn)€老梗
今天的筆記就到這里了（主要是不想寫(xiě)了，一天當(dāng)然不可能只學(xué)會(huì)點(diǎn)這玩意），拜拜

到此這篇關(guān)于教你如何使用Python selenium的文章就介紹到這了,更多相關(guān)Python selenium內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: