curl簡介
curl是一個(gè)利用URL語法在命令行下工作的文件傳輸工具,1997年首次發(fā)行。它支持文件上傳和下載,所以是綜合傳輸工具,但按傳統(tǒng),習(xí)慣稱curl為下載工具。curl還包含了用于程序開發(fā)的libcurl。
curl支持的通信協(xié)議有FTP、FTPS、HTTP、HTTPS、TFTP、SFTP、Gopher、SCP、Telnet、DICT、FILE、LDAP、LDAPS、IMAP、POP3、SMTP和RTSP。
curl還支持SSL認(rèn)證、HTTP POST、HTTP PUT、FTP上傳, HTTP form based upload、proxies、HTTP/2、cookies、用戶名+密碼認(rèn)證(Basic, Plain, Digest, CRAM-MD5, NTLM, Negotiate and Kerberos)、file transfer resume、proxy tunneling。
curl 是常用的Linux命令行工具,用來請(qǐng)求 Web 服務(wù)器。它的名字就是客戶端(client)的 URL 工具的意思。
它的功能非常強(qiáng)大,命令行參數(shù)多達(dá)幾十種。如果熟練的話,完全可以取代 Postman 這一類的圖形界面工具。
今天阿湯博客介紹它的主要命令行參數(shù),作為日常的參考,方便查閱。
語法:
# curl [option]
常見參數(shù):
-A/--user-agent <string> 設(shè)置用戶代理發(fā)送給服務(wù)器 -b/--cookie <name=string/file> cookie字符串或文件讀取位置 -c/--cookie-jar <file> 操作結(jié)束后把cookie寫入到這個(gè)文件中 -C/--continue-at <offset> 斷點(diǎn)續(xù)轉(zhuǎn) -D/--dump-header <file> 把header信息寫入到該文件中 -e/--referer 來源網(wǎng)址 -f/--fail 連接失敗時(shí)不顯示http錯(cuò)誤 -o/--output 把輸出寫到該文件中 -O/--remote-name 把輸出寫到該文件中,保留遠(yuǎn)程文件的文件名 -r/--range <range> 檢索來自HTTP/1.1或FTP服務(wù)器字節(jié)范圍 -s/--silent 靜音模式。不輸出任何東西 -T/--upload-file <file> 上傳文件 -u/--user <user[:password]> 設(shè)置服務(wù)器的用戶和密碼 -w/--write-out [format] 什么輸出完成后 -x/--proxy <host[:port]> 在給定的端口上使用HTTP代理 -#/--progress-bar 進(jìn)度條顯示當(dāng)前的傳送狀態(tài)
不帶有任何參數(shù)時(shí),curl 就是發(fā)出 GET 請(qǐng)求。
$ curl http://www.zhongjima.net
上面命令向www.zhongjima.net發(fā)出 GET 請(qǐng)求,服務(wù)器返回的內(nèi)容會(huì)在命令行輸出。
-A
-A參數(shù)指定客戶端的用戶代理標(biāo)頭,即User-Agent。curl 的默認(rèn)用戶代理字符串是curl/[version]。
$ curl -A 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.100 Safari/537.36' https://google.com
上面命令將User-Agent改成 Chrome 瀏覽器。
$ curl -A '' http://www.zhongjima.net
上面命令會(huì)移除User-Agent標(biāo)頭。
也可以通過-H參數(shù)直接指定標(biāo)頭,更改User-Agent。
$ curl -H 'User-Agent: php/1.0' http://www.zhongjima.net
-b
-b參數(shù)用來向服務(wù)器發(fā)送 Cookie。
$ curl -b 'foo=bar' http://www.zhongjima.net
上面命令會(huì)生成一個(gè)標(biāo)頭Cookie: foo=bar,向服務(wù)器發(fā)送一個(gè)名為foo、值為bar的 Cookie。
$ curl -b 'foo1=bar;foo2=bar2' http://www.zhongjima.net
上面命令發(fā)送兩個(gè) Cookie。
$ curl -b cookies.txt http://www.zhongjima.net
上面命令讀取本地文件cookies.txt,里面是服務(wù)器設(shè)置的 Cookie(參見-c參數(shù)),將其發(fā)送到服務(wù)器。
-c
-c參數(shù)將服務(wù)器設(shè)置的 Cookie 寫入一個(gè)文件。
$ curl -c cookies.txt http://www.zhongjima.net
上面命令將服務(wù)器的 HTTP 回應(yīng)所設(shè)置 Cookie 寫入文本文件cookies.txt。
-d
-d參數(shù)用于發(fā)送 POST 請(qǐng)求的數(shù)據(jù)體。
$ curl -d'login=emma&password=123'-X POST https://google.com/login
# 或者
$ curl -d 'login=emma' -d 'password=123' -X POST https://google.com/login
使用-d參數(shù)以后,HTTP 請(qǐng)求會(huì)自動(dòng)加上標(biāo)頭Content-Type : application/x-www-form-urlencoded。并且會(huì)自動(dòng)將請(qǐng)求轉(zhuǎn)為 POST 方法,因此可以省略-X POST。
-d參數(shù)可以讀取本地文本文件的數(shù)據(jù),向服務(wù)器發(fā)送。
$ curl -d '@data.txt' https://google.com/login
上面命令讀取data.txt文件的內(nèi)容,作為數(shù)據(jù)體向服務(wù)器發(fā)送。
--data-urlencode
--data-urlencode參數(shù)等同于-d,發(fā)送 POST 請(qǐng)求的數(shù)據(jù)體,區(qū)別在于會(huì)自動(dòng)將發(fā)送的數(shù)據(jù)進(jìn)行 URL 編碼。
$ curl --data-urlencode 'comment=hello world' https://google.com/login
上面代碼中,發(fā)送的數(shù)據(jù)hello world之間有一個(gè)空格,需要進(jìn)行 URL 編碼。
-e
-e參數(shù)用來設(shè)置 HTTP 的標(biāo)頭Referer,表示請(qǐng)求的來源。
$ curl -e 'https://google.com?q=example' https://www.example.com
上面命令將Referer標(biāo)頭設(shè)為https://google.com?q=example。
-H參數(shù)可以通過直接添加標(biāo)頭Referer,達(dá)到同樣效果。
curl -H 'Referer: https://google.com?q=example' https://www.example.com
-F
-F參數(shù)用來向服務(wù)器上傳二進(jìn)制文件。
$ curl -F 'file=@photo.png' https://google.com/profile
上面命令會(huì)給 HTTP 請(qǐng)求加上標(biāo)頭Content-Type: multipart/form-data,然后將文件photo.png作為file字段上傳。
-F參數(shù)可以指定 MIME 類型。
$ curl -F 'file=@photo.png;type=image/png' https://google.com/profile
上面命令指定 MIME 類型為image/png,否則 curl 會(huì)把 MIME 類型設(shè)為application/octet-stream。
-F參數(shù)也可以指定文件名。
$ curl -F 'file=@photo.png;filename=me.png' https://google.com/profile
上面命令中,原始文件名為photo.png,但是服務(wù)器接收到的文件名為me.png。
-G
-G參數(shù)用來構(gòu)造 URL 的查詢字符串。
$ curl -G -d 'q=kitties' -d 'count=20' https://google.com/search
上面命令會(huì)發(fā)出一個(gè) GET 請(qǐng)求,實(shí)際請(qǐng)求的 URL 為https://google.com/search?q=kitties&count=20。如果省略--G,會(huì)發(fā)出一個(gè) POST 請(qǐng)求。
如果數(shù)據(jù)需要 URL 編碼,可以結(jié)合--data--urlencode參數(shù)。
$ curl -G --data-urlencode 'comment=hello world' https://www.example.com
-H
-H參數(shù)添加 HTTP 請(qǐng)求的標(biāo)頭。
$ curl -H 'Accept-Language: en-US' https://google.com
上面命令添加 HTTP 標(biāo)頭Accept-Language: en-US。
$ curl -H 'Accept-Language: en-US' -H 'Secret-Message: xyzzy' https://google.com
上面命令添加兩個(gè) HTTP 標(biāo)頭。
$ curl -d '{"login": "emma", "pass": "123"}' -H 'Content-Type: application/json' https://google.com/login
上面命令添加 HTTP 請(qǐng)求的標(biāo)頭是Content-Type: application/json,然后用-d參數(shù)發(fā)送 JSON 數(shù)據(jù)。
-i
-i參數(shù)打印出服務(wù)器回應(yīng)的 HTTP 標(biāo)頭。
$ curl -i http://www.zhongjima.net
上面命令收到服務(wù)器回應(yīng)后,先輸出服務(wù)器回應(yīng)的標(biāo)頭,然后空一行,再輸出網(wǎng)頁的源碼。
-I
-I參數(shù)向服務(wù)器發(fā)出 HEAD 請(qǐng)求,然會(huì)將服務(wù)器返回的 HTTP 標(biāo)頭打印出來。
$ curl -I http://www.zhongjima.net
上面命令輸出服務(wù)器對(duì) HEAD 請(qǐng)求的回應(yīng)。
--head參數(shù)等同于-I。
$ curl --head https://www.example.com
-k
-k參數(shù)指定跳過 SSL 檢測(cè)。
$ curl -k https://www.example.com
上面命令不會(huì)檢查服務(wù)器的 SSL 證書是否正確。
-L
-L參數(shù)會(huì)讓 HTTP 請(qǐng)求跟隨服務(wù)器的重定向。curl 默認(rèn)不跟隨重定向。
$ curl -L -d 'tweet=hi' https://api.twitter.com/tweet
--limit-rate
--limit-rate用來限制 HTTP 請(qǐng)求和回應(yīng)的帶寬,模擬慢網(wǎng)速的環(huán)境。
$ curl --limit-rate 200k https://google.com
上面命令將帶寬限制在每秒 200K 字節(jié)。
-o
-o參數(shù)將服務(wù)器的回應(yīng)保存成文件,等同于wget命令。
$ curl -o example.html https://www.example.com
上面命令將www.example.com保存成example.html。
-O
-O參數(shù)將服務(wù)器回應(yīng)保存成文件,并將 URL 的最后部分當(dāng)作文件名。
$ curl -O https://www.example.com/foo/bar.html
上面命令將服務(wù)器回應(yīng)保存成文件,文件名為bar.html。
-s
-s參數(shù)將不輸出錯(cuò)誤和進(jìn)度信息。
$ curl -s https://www.example.com
上面命令一旦發(fā)生錯(cuò)誤,不會(huì)顯示錯(cuò)誤信息。不發(fā)生錯(cuò)誤的話,會(huì)正常顯示運(yùn)行結(jié)果。
如果想讓 curl 不產(chǎn)生任何輸出,可以使用下面的命令。
$ curl -s -o /dev/null https://google.com
-S
-S參數(shù)指定只輸出錯(cuò)誤信息,通常與-s一起使用。
$ curl -S -s -o /dev/null https://google.com
上面命令沒有任何輸出,除非發(fā)生錯(cuò)誤。
-u
-u參數(shù)用來設(shè)置服務(wù)器認(rèn)證的用戶名和密碼。
$ curl -u 'bob:12345' https://google.com/login
上面命令設(shè)置用戶名為bob,密碼為12345,然后將其轉(zhuǎn)為 HTTP 標(biāo)頭Authorization: Basic Ym9iOjEyMzQ1。
curl 能夠識(shí)別 URL 里面的用戶名和密碼。
$ curl https://bob:12345@google.com/login
上面命令能夠識(shí)別 URL 里面的用戶名和密碼,將其轉(zhuǎn)為上個(gè)例子里面的 HTTP 標(biāo)頭。
$ curl -u 'bob' https://google.com/login
上面命令只設(shè)置了用戶名,執(zhí)行后,curl 會(huì)提示用戶輸入密碼。
-v
-v參數(shù)輸出通信的整個(gè)過程,用于調(diào)試。
$ curl -v https://www.example.com
--trace參數(shù)也可以用于調(diào)試,還會(huì)輸出原始的二進(jìn)制數(shù)據(jù)。
$ curl --trace - https://www.example.com
-x
-x參數(shù)指定 HTTP 請(qǐng)求的代理。
$ curl -x socks5://james:cats@myproxy.com:8080 https://www.example.com
上面命令指定 HTTP 請(qǐng)求通過myproxy.com:8080的 socks5 代理發(fā)出。
如果沒有指定代理協(xié)議,默認(rèn)為 HTTP。
$ curl -x james:cats@myproxy.com:8080 https://www.example.com
上面命令中,請(qǐng)求的代理使用 HTTP 協(xié)議。
-X
-X參數(shù)指定 HTTP 請(qǐng)求的方法。
$ curl -X POST https://www.example.com
上面命令對(duì)https://www.example.com發(fā)出 POST 請(qǐng)求。