Linux中的curl命令詳解
語(yǔ)法
# curl [option] [url]
常見(jiàn)參數(shù):
-A/--user-agent <string> 設(shè)置用戶代理發(fā)送給服務(wù)器 -b/--cookie <name=string/file> cookie字符串或文件讀取位置 -c/--cookie-jar <file> 操作結(jié)束后把cookie寫(xiě)入到這個(gè)文件中 -C/--continue-at <offset> 斷點(diǎn)續(xù)轉(zhuǎn) -D/--dump-header <file> 把header信息寫(xiě)入到該文件中 -e/--referer 來(lái)源網(wǎng)址 -f/--fail 連接失敗時(shí)不顯示http錯(cuò)誤 -o/--output 把輸出寫(xiě)到該文件中 -O/--remote-name 把輸出寫(xiě)到該文件中,保留遠(yuǎn)程文件的文件名 -r/--range <range> 檢索來(lái)自HTTP/1.1或FTP服務(wù)器字節(jié)范圍 -s/--silent 靜音模式。不輸出任何東西 -T/--upload-file <file> 上傳文件 -u/--user <user[:password]> 設(shè)置服務(wù)器的用戶和密碼 -w/--write-out [format] 什么輸出完成后 -x/--proxy <host[:port]> 在給定的端口上使用HTTP代理 -#/--progress-bar 進(jìn)度條顯示當(dāng)前的傳送狀態(tài)
例子:
1、基本用法
# curl http://www.linux.com
執(zhí)行后,www.linux.com 的html就會(huì)顯示在屏幕上了
Ps:由于安裝linux的時(shí)候很多時(shí)候是沒(méi)有安裝桌面的,也意味著沒(méi)有瀏覽器,因此這個(gè)方法也經(jīng)常用于測(cè)試一臺(tái)服務(wù)器是否可以到達(dá)一個(gè)網(wǎng)站
2、保存訪問(wèn)的網(wǎng)頁(yè)
2.1:使用linux的重定向功能保存
# curl http://www.linux.com >> linux.html
2.2:可以使用curl的內(nèi)置option:-o(小寫(xiě))保存網(wǎng)頁(yè)
$ curl -o linux.html http://www.linux.com
執(zhí)行完成后會(huì)顯示如下界面,顯示100%則表示保存成功
% Total % Received % Xferd Average Speed Time Time Time Current Dload Upload Total Spent Left Speed 100 79684 0 79684 0 0 3437k 0 --:--:-- --:--:-- --:--:-- 7781k
2.3:可以使用curl的內(nèi)置option:-O(大寫(xiě))保存網(wǎng)頁(yè)中的文件
要注意這里后面的url要具體到某個(gè)文件,不然抓不下來(lái)
# curl -O http://www.linux.com/hello.sh
3、測(cè)試網(wǎng)頁(yè)返回值
# curl -o /dev/null -s -w %{http_code} www.linux.com
Ps:在腳本中,這是很常見(jiàn)的測(cè)試網(wǎng)站是否正常的用法
4、指定proxy服務(wù)器以及其端口
很多時(shí)候上網(wǎng)需要用到代理服務(wù)器(比如是使用代理服務(wù)器上網(wǎng)或者因?yàn)槭褂胏url別人網(wǎng)站而被別人屏蔽IP地址的時(shí)候),幸運(yùn)的是curl通過(guò)使用內(nèi)置option:-x來(lái)支持設(shè)置代理
# curl -x 192.168.100.100:1080 http://www.linux.com
5、cookie
有些網(wǎng)站是使用cookie來(lái)記錄session信息。對(duì)于chrome這樣的瀏覽器,可以輕易處理cookie信息,但在curl中只要增加相關(guān)參數(shù)也是可以很容易的處理cookie
5.1:保存http的response里面的cookie信息。內(nèi)置option:-c(小寫(xiě))
# curl -c cookiec.txt http://www.linux.com
執(zhí)行后cookie信息就被存到了cookiec.txt里面了
5.2:保存http的response里面的header信息。內(nèi)置option: -D
# curl -D cookied.txt http://www.linux.com
執(zhí)行后cookie信息就被存到了cookied.txt里面了
注意: -c(小寫(xiě))產(chǎn)生的cookie和-D里面的cookie是不一樣的。
5.3:使用cookie
很多網(wǎng)站都是通過(guò)監(jiān)視你的cookie信息來(lái)判斷你是否按規(guī)矩訪問(wèn)他們的網(wǎng)站的,因此我們需要使用保存的cookie信息。內(nèi)置option: -b
# curl -b cookiec.txt http://www.linux.com
6、模仿瀏覽器
有些網(wǎng)站需要使用特定的瀏覽器去訪問(wèn)他們,有些還需要使用某些特定的版本。curl內(nèi)置option:-A可以讓我們指定瀏覽器去訪問(wèn)網(wǎng)站
# curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" http://www.linux.com
這樣服務(wù)器端就會(huì)認(rèn)為是使用IE8.0去訪問(wèn)的
7、偽造referer(盜鏈)
很多服務(wù)器會(huì)檢查http訪問(wèn)的referer從而來(lái)控制訪問(wèn)。比如:你是先訪問(wèn)首頁(yè),然后再訪問(wèn)首頁(yè)中的郵箱頁(yè)面,這里訪問(wèn)郵箱的referer地址就是訪問(wèn)首頁(yè)成功后的頁(yè)面地址,如果服務(wù)器發(fā)現(xiàn)對(duì)郵箱頁(yè)面訪問(wèn)的referer地址不是首頁(yè)的地址,就斷定那是個(gè)盜連了
curl中內(nèi)置option:-e可以讓我們?cè)O(shè)定referer
# curl -e "www.linux.com" http://mail.linux.com
這樣就會(huì)讓服務(wù)器其以為你是從www.linux.com點(diǎn)擊某個(gè)鏈接過(guò)來(lái)的
8、下載文件
8.1:利用curl下載文件。
#使用內(nèi)置option:-o(小寫(xiě))
# curl -o dodo1.jpg http:www.linux.com/dodo1.JPG
#使用內(nèi)置option:-O(大寫(xiě))
# curl -O http://www.linux.com/dodo1.JPG
這樣就會(huì)以服務(wù)器上的名稱保存文件到本地
8.2:循環(huán)下載
有時(shí)候下載圖片可以能是前面的部分名稱是一樣的,就最后的尾椎名不一樣
# curl -O http://www.linux.com/dodo[1-5].JPG
這樣就會(huì)把dodo1,dodo2,dodo3,dodo4,dodo5全部保存下來(lái)
8.3:下載重命名
# curl -O http://www.linux.com/{hello,bb}/dodo[1-5].JPG
由于下載的hello與bb中的文件名都是dodo1,dodo2,dodo3,dodo4,dodo5。因此第二次下載的會(huì)把第一次下載的覆蓋,這樣就需要對(duì)文件進(jìn)行重命名。
# curl -o #1_#2.JPG http://www.linux.com/{hello,bb}/dodo[1-5].JPG
這樣在hello/dodo1.JPG的文件下載下來(lái)就會(huì)變成hello_dodo1.JPG,其他文件依此類推,從而有效的避免了文件被覆蓋
8.4:分塊下載
有時(shí)候下載的東西會(huì)比較大,這個(gè)時(shí)候我們可以分段下載。使用內(nèi)置option:-r
# curl -r 0-100 -o dodo1_part1.JPG http://www.linux.com/dodo1.JPG # curl -r 100-200 -o dodo1_part2.JPG http://www.linux.com/dodo1.JPG # curl -r 200- -o dodo1_part3.JPG http://www.linux.com/dodo1.JPG # cat dodo1_part* > dodo1.JPG
這樣就可以查看dodo1.JPG的內(nèi)容了
8.5:通過(guò)ftp下載文件
curl可以通過(guò)ftp下載文件,curl提供兩種從ftp中下載的語(yǔ)法
# curl -O -u 用戶名:密碼 ftp://www.linux.com/dodo1.JPG # curl -O ftp://用戶名:密碼@www.linux.com/dodo1.JPG
8.6:顯示下載進(jìn)度條
# curl -# -O http://www.linux.com/dodo1.JPG
8.7:不會(huì)顯示下載進(jìn)度信息
# curl -s -O http://www.linux.com/dodo1.JPG
9、斷點(diǎn)續(xù)傳
在windows中,我們可以使用迅雷這樣的軟件進(jìn)行斷點(diǎn)續(xù)傳。curl可以通過(guò)內(nèi)置option:-C同樣可以達(dá)到相同的效果
如果在下載dodo1.JPG的過(guò)程中突然掉線了,可以使用以下的方式續(xù)傳
# curl -C -O http://www.linux.com/dodo1.JPG
10、上傳文件
curl不僅僅可以下載文件,還可以上傳文件。通過(guò)內(nèi)置option:-T來(lái)實(shí)現(xiàn)
# curl -T dodo1.JPG -u 用戶名:密碼 ftp://www.linux.com/img/
這樣就向ftp服務(wù)器上傳了文件dodo1.JPG
11、顯示抓取錯(cuò)誤
# curl -f http://www.linux.com/error
其他參數(shù)(此處翻譯為轉(zhuǎn)載):
-a/--append 上傳文件時(shí),附加到目標(biāo)文件 --anyauth 可以使用“任何”身份驗(yàn)證方法 --basic 使用HTTP基本驗(yàn)證 -B/--use-ascii 使用ASCII文本傳輸 -d/--data <data> HTTP POST方式傳送數(shù)據(jù) --data-ascii <data> 以ascii的方式post數(shù)據(jù) --data-binary <data> 以二進(jìn)制的方式post數(shù)據(jù) --negotiate 使用HTTP身份驗(yàn)證 --digest 使用數(shù)字身份驗(yàn)證 --disable-eprt 禁止使用EPRT或LPRT --disable-epsv 禁止使用EPSV --egd-file <file> 為隨機(jī)數(shù)據(jù)(SSL)設(shè)置EGD socket路徑 --tcp-nodelay 使用TCP_NODELAY選項(xiàng) -E/--cert <cert[:passwd]> 客戶端證書(shū)文件和密碼 (SSL) --cert-type <type> 證書(shū)文件類型 (DER/PEM/ENG) (SSL) --key <key> 私鑰文件名 (SSL) --key-type <type> 私鑰文件類型 (DER/PEM/ENG) (SSL) --pass <pass> 私鑰密碼 (SSL) --engine <eng> 加密引擎使用 (SSL). "--engine list" for list --cacert <file> CA證書(shū) (SSL) --capath <directory> CA目 (made using c_rehash) to verify peer against (SSL) --ciphers <list> SSL密碼 --compressed 要求返回是壓縮的形勢(shì) (using deflate or gzip) --connect-timeout <seconds> 設(shè)置最大請(qǐng)求時(shí)間 --create-dirs 建立本地目錄的目錄層次結(jié)構(gòu) --crlf 上傳是把LF轉(zhuǎn)變成CRLF --ftp-create-dirs 如果遠(yuǎn)程目錄不存在,創(chuàng)建遠(yuǎn)程目錄 --ftp-method [multicwd/nocwd/singlecwd] 控制CWD的使用 --ftp-pasv 使用 PASV/EPSV 代替端口 --ftp-skip-pasv-ip 使用PASV的時(shí)候,忽略該IP地址 --ftp-ssl 嘗試用 SSL/TLS 來(lái)進(jìn)行ftp數(shù)據(jù)傳輸 --ftp-ssl-reqd 要求用 SSL/TLS 來(lái)進(jìn)行ftp數(shù)據(jù)傳輸 -F/--form <name=content> 模擬http表單提交數(shù)據(jù) -form-string <name=string> 模擬http表單提交數(shù)據(jù) -g/--globoff 禁用網(wǎng)址序列和范圍使用{}和[] -G/--get 以get的方式來(lái)發(fā)送數(shù)據(jù) -h/--help 幫助 -H/--header <line> 自定義頭信息傳遞給服務(wù)器 --ignore-content-length 忽略的HTTP頭信息的長(zhǎng)度 -i/--include 輸出時(shí)包括protocol頭信息 -I/--head 只顯示文檔信息 -j/--junk-session-cookies 讀取文件時(shí)忽略session cookie --interface <interface> 使用指定網(wǎng)絡(luò)接口/地址 --krb4 <level> 使用指定安全級(jí)別的krb4 -k/--insecure 允許不使用證書(shū)到SSL站點(diǎn) -K/--config 指定的配置文件讀取 -l/--list-only 列出ftp目錄下的文件名稱 --limit-rate <rate> 設(shè)置傳輸速度 --local-port<NUM> 強(qiáng)制使用本地端口號(hào) -m/--max-time <seconds> 設(shè)置最大傳輸時(shí)間 --max-redirs <num> 設(shè)置最大讀取的目錄數(shù) --max-filesize <bytes> 設(shè)置最大下載的文件總量 -M/--manual 顯示全手動(dòng) -n/--netrc 從netrc文件中讀取用戶名和密碼 --netrc-optional 使用 .netrc 或者 URL來(lái)覆蓋-n --ntlm 使用 HTTP NTLM 身份驗(yàn)證 -N/--no-buffer 禁用緩沖輸出 -p/--proxytunnel 使用HTTP代理 --proxy-anyauth 選擇任一代理身份驗(yàn)證方法 --proxy-basic 在代理上使用基本身份驗(yàn)證 --proxy-digest 在代理上使用數(shù)字身份驗(yàn)證 --proxy-ntlm 在代理上使用ntlm身份驗(yàn)證 -P/--ftp-port <address> 使用端口地址,而不是使用PASV -Q/--quote <cmd> 文件傳輸前,發(fā)送命令到服務(wù)器 --range-file 讀?。⊿SL)的隨機(jī)文件 -R/--remote-time 在本地生成文件時(shí),保留遠(yuǎn)程文件時(shí)間 --retry <num> 傳輸出現(xiàn)問(wèn)題時(shí),重試的次數(shù) --retry-delay <seconds> 傳輸出現(xiàn)問(wèn)題時(shí),設(shè)置重試間隔時(shí)間 --retry-max-time <seconds> 傳輸出現(xiàn)問(wèn)題時(shí),設(shè)置最大重試時(shí)間 -S/--show-error 顯示錯(cuò)誤 --socks4 <host[:port]> 用socks4代理給定主機(jī)和端口 --socks5 <host[:port]> 用socks5代理給定主機(jī)和端口 -t/--telnet-option <OPT=val> Telnet選項(xiàng)設(shè)置 --trace <file> 對(duì)指定文件進(jìn)行debug --trace-ascii <file> Like --跟蹤但沒(méi)有hex輸出 --trace-time 跟蹤/詳細(xì)輸出時(shí),添加時(shí)間戳 --url <URL> Spet URL to work with -U/--proxy-user <user[:password]> 設(shè)置代理用戶名和密碼 -V/--version 顯示版本信息 -X/--request <command> 指定什么命令 -y/--speed-time 放棄限速所要的時(shí)間。默認(rèn)為30 -Y/--speed-limit 停止傳輸速度的限制,速度時(shí)間'秒 -z/--time-cond 傳送時(shí)間設(shè)置 -0/--http1.0 使用HTTP 1.0 -1/--tlsv1 使用TLSv1(SSL) -2/--sslv2 使用SSLv2的(SSL) -3/--sslv3 使用的SSLv3(SSL) --3p-quote like -Q for the source URL for 3rd party transfer --3p-url 使用url,進(jìn)行第三方傳送 --3p-user 使用用戶名和密碼,進(jìn)行第三方傳送 -4/--ipv4 使用IP4 -6/--ipv6 使用IP6
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作帶來(lái)一定的幫助,如果有疑問(wèn)大家可以留言交流。
- Linux 中 CURL常用命令詳解
- linux命令行下使用curl命令查看自己機(jī)器的外網(wǎng)ip
- linux下為php添加curl擴(kuò)展的方法
- Linux下命令行cURL的10種常見(jiàn)用法示例
- linux curl命令詳解及實(shí)例分享
- Linux中curl命令和wget命令的使用介紹與比較
- linux shell中curl 發(fā)送post請(qǐng)求json格式問(wèn)題的處理方法
- Linux下模擬http的get/post請(qǐng)求(curl or wget)詳解
- Linux Shell中curl和wget使用代理IP的方法教程
- Linux curl表單登錄或提交與cookie使用詳解
相關(guān)文章
CentOS 7.2下安裝部署郵件服務(wù)器(Postfix)的步驟詳解
Postfix 是一種電子郵件服務(wù)器,下面這篇文章主要給大家介紹了在CentOS 7.2下安裝部署郵件服務(wù)器(Postfix)的步驟全過(guò)程,文中介紹的非常詳細(xì),需要的朋友可以參考借鑒,下面來(lái)一起看看吧。2017-05-05Linux 下安裝 memcached 及 memcacheq的方法
這篇文章主要介紹了Linux 下安裝 memcached 及 memcacheq的方法,需要的朋友可以參考下2017-03-03LNMP下安裝Pureftpd開(kāi)啟FTP服務(wù)以及修改FTP端口的方法
這篇文章主要介紹了LNMP下安裝Pureftpd開(kāi)啟FTP服務(wù)以及修改FTP端口的方法,需要的朋友可以參考下2016-09-09Ubuntu Server 18.04.5 LTS服務(wù)器版安裝配置圖解教程
Ubuntu分為桌面版(desktop)和服務(wù)器版(Server),下面為大家介紹服務(wù)器版本Ubuntu Server 18.04.5 LTS的詳細(xì)安裝過(guò)程,需要的朋友可以參考下2021-01-01