python和php哪個更適合寫爬蟲
python和PHP相比較，python適合做爬蟲。原因如下
抓取網(wǎng)頁本身的接口
相比與其他靜態(tài)編程語言，如java，c#，C++，python抓取網(wǎng)頁文檔的接口更簡潔；相比其他動態(tài)腳本語言，如perl，shell，python的urllib2包提供了較為完整的訪問網(wǎng)頁文檔的API。（當(dāng)然ruby也是很好的選擇）
此外，抓取網(wǎng)頁有時候需要模擬瀏覽器的行為，很多網(wǎng)站對于生硬的爬蟲抓取都是封殺的。這是我們需要模擬user agent的行為構(gòu)造合適的請求，譬如模擬用戶登陸、模擬session/cookie的存儲和設(shè)置。在python里都有非常優(yōu)秀的第三方包幫你搞定，如Requests，mechanize
網(wǎng)頁抓取后的處理
抓取的網(wǎng)頁通常需要處理，比如過濾html標(biāo)簽，提取文本等。python的beautifulsoap提供了簡潔的文檔處理功能，能用極短的代碼完成大部分文檔的處理。
其實以上功能很多語言和工具都能做，但是用python能夠干得最快，最干凈。Life is short， u need python.
py用在linux上很強大，語言挺簡單的。
NO.1 快速開發(fā)（唯一能和python比開發(fā)效率的語言只有rudy）語言簡潔，沒那么多技巧，所以讀起來很清楚容易。
NO.2跨平臺（由于python的開源，他比java更能體現(xiàn)”一次編寫到處運行”
NO.3解釋性（ 無須編譯，直接運行／調(diào)試代碼）
NO.4構(gòu)架選擇太多（GUI構(gòu)架方面 主要的就有 wxPython, tkInter, PyGtk, PyQt 。
PHP 腳本主要用于以下三個領(lǐng)域：
服務(wù)端腳本。這是 PHP 最傳統(tǒng)，也是最主要的目標(biāo)領(lǐng)域。開展這項工作需要具備以下三點：PHP 解析器（CGI 或者服務(wù)器模塊）、web
服務(wù)器和 web 瀏覽器。需要在運行 web 服務(wù)器時，安裝并配置 PHP，然后，可以用 web 瀏覽器來訪問 PHP 程序的輸出，即瀏覽服務(wù)
端的 PHP 頁面。如果只是實驗 PHP 編程，所有的這些都可以運行在自己家里的電腦中。請查閱安裝一章以獲取更多信息。命令行腳本。
可以編寫一段 PHP 腳本，并且不需要任何服務(wù)器或者瀏覽器來運行它。通過這種方式，僅僅只需要 PHP 解析器來執(zhí)行。這種用法對于依
賴 cron（Unix 或者 Linux 環(huán)境）或者 Task Scheduler（Windows 環(huán)境）的日常運行的腳本來說是理想的選擇。這些腳本也可以用來處
理簡單的文本。請參閱 PHP 的命令行模式以獲取更多信息。編寫桌面應(yīng)用程序。對于有著圖形界面的桌面應(yīng)用程序來說，PHP 或許不是
一種最好的語言，但是如果用戶非常精通 PHP，并且希望在客戶端應(yīng)用程序中使用 PHP 的一些高級特性，可以利用 PHP-GTK 來編寫這
些程序。用這種方法，還可以編寫跨平臺的應(yīng)用程序。PHP-GTK 是 PHP 的一個擴展，在通常發(fā)布的 PHP 包中并不包含它。
網(wǎng)友觀點擴展：
我用 PHP Node.js Python 寫過抓取腳本，簡單談一下吧。
首先PHP。先說優(yōu)勢：網(wǎng)上抓取和解析html的框架一抓一大把，各種工具直接拿來用就行了，比較省心。缺點：首先速度/效率很成問題，有一次下載電影海報的時候，由于是crontab定期執(zhí)行，也沒做優(yōu)化，開的php進程太多，直接把內(nèi)存撐爆了。然后語法方面也很拖沓，各種關(guān)鍵字 符號 太多，不夠簡潔，給人一種沒有認(rèn)真設(shè)計過的感覺，寫起來很麻煩。
Node.js。優(yōu)點是效率、效率還是效率，由于網(wǎng)絡(luò)是異步的，所以基本如同幾百個進程并發(fā)一樣強大，內(nèi)存和CPU占用非常小，如果沒有對抓取來的數(shù)據(jù)進行復(fù)雜的運算加工，那么系統(tǒng)的瓶頸基本就在帶寬和寫入MySQL等數(shù)據(jù)庫的I/O速度。當(dāng)然，優(yōu)點的反面也是缺點，異步網(wǎng)絡(luò)代表你需要callback，這時候如果業(yè)務(wù)需求是線性了，比如必須等待上一個頁面抓取完成后，拿到數(shù)據(jù)，才能進行下一個頁面的抓取，甚至多層的依賴關(guān)系，那就會出現(xiàn)可怕的多層callback！基本這時候，代碼結(jié)構(gòu)和邏輯就會一團亂麻。當(dāng)然可以用Step等流程控制工具解決這些問題。
最后說Python。如果你對效率沒有極端的要求，那么推薦用Python！首先，Python的語法很簡潔，同樣的語句，可以少敲很多次鍵盤。然后，Python非常適合做數(shù)據(jù)的處理，比如函數(shù)參數(shù)的打包解包，列表解析，矩陣處理，非常方便。
到此這篇關(guān)于python和php哪個更適合寫爬蟲的文章就介紹到這了,更多相關(guān)php和python哪個適合做爬蟲內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要介紹了python操作xml文件示例,需要的朋友可以參考下2014-04-04
最近在學(xué)習(xí)用docker部署Django項目,經(jīng)過百折不撓的鼓搗,終于將項目部署成功,下面這篇文章主要給大家介紹了關(guān)于云原生Docker部署Django和mysql項目的相關(guān)資料,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2022-12-12
這篇文章主要介紹了Python中optparser庫用法實例詳解，介紹了optparser的引入，初始化等相關(guān)內(nèi)容，小編覺得還是挺不錯的，具有一定借鑒價值，需要的朋友可以參考下2018-01-01
這篇文章主要為大家介紹了Python線程同步，具有一定的參考價值，感興趣的小伙伴們可以參考一下，希望能夠給你帶來幫助2021-12-12
這篇文章主要介紹了python中幾種自動微分庫解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2019-08-08
這篇文章主要介紹了利用Python多線程制作的圖片下載器的相關(guān)代碼，文中展示的示例代碼講解詳細(xì)，對我們學(xué)習(xí)Python有一定幫助，需要的可以參考一下2022-03-03
Python中collections.Counter()的具體使用
本文主要介紹了Python中collections.Counter()的具體使用，文中通過示例代碼介紹的非常詳細(xì)，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-07-07
python GUI庫圖形界面開發(fā)之PyQt5多線程中信號與槽的詳細(xì)使用方法與實例
這篇文章主要介紹了python GUI庫圖形界面開發(fā)之PyQt5多線程中信號與槽的詳細(xì)使用方法與實例,需要的朋友可以參考下2020-03-03
Python生成可執(zhí)行文件.exe操作完整流程記錄
.exe是文件擴展名,帶有.exe擴展名的文件名按下Enter鍵就可運行,這篇文章主要給大家介紹了關(guān)于Python生成可執(zhí)行文件.exe操作完整流程的相關(guān)資料,文中通過代碼介紹的非常詳細(xì),需要的朋友可以參考下2024-05-05
這篇文章主要介紹了python各種excel寫入方式的速度對比，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-11-11