jq命令對(duì)JSON進(jìn)行過(guò)濾遍歷結(jié)構(gòu)轉(zhuǎn)換等操作實(shí)例
引言
jq是一個(gè)靈活的輕量級(jí)命令行JSON處理器，你可以使用jq命令對(duì)JSON進(jìn)行過(guò)濾、遍歷或者結(jié)構(gòu)轉(zhuǎn)換等操作
項(xiàng)目主頁(yè)位于：
https://stedolan.github.io/jq/
你也可以在線體驗(yàn)：
官方文檔參考：
https://stedolan.github.io/jq/manual/#Basicfilters
下面來(lái)讓我們快速入門(mén)一下吧
基礎(chǔ)
$ jq -h jq - commandline JSON processor [version 1.6] Usage: jq [options] <jq filter> [file...] jq [options] --args <jq filter> [strings...] jq [options] --jsonargs <jq filter> [JSON_TEXTS...]
常見(jiàn)的用法是jq [options] <jq filter> [file...]，例如
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo'
{
"bar": {
"baz": 123
}
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo.bar'
{"baz":123}
其中-c 為options，'.foo' 即為filter，兩者都會(huì)在下文介紹
參數(shù)[options]
?? -r output raw strings, not JSON texts
字符串默認(rèn)帶引號(hào)，使用-r可以移除字符串的引號(hào)
$ echo '{"foo": "bar"}' | jq '.foo'
"bar"
$ echo '{"foo": "bar"}' | jq -r '.foo'
bar
?? -c compact instead of pretty-printed output
jq默認(rèn)輸出格式化之后的json，如果希望能在一行輸出使用 -c
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo | .bar'
{
"baz": 123
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo | .bar'
{"baz":123}
過(guò)濾器<jq filter>
?? . 輸出原始的 JSON 數(shù)據(jù)
因?yàn)閖q默認(rèn)是格式化的，所以這個(gè)filter可以當(dāng)作格式化
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.'
{
"foo": {
"bar": {
"baz": 123
}
}
}
鏈接符
先看下連接符，具體filter的含義下面會(huì)介紹。兩個(gè)連接符都是用來(lái)組合不同filter來(lái)完成特定功能的
?? , 使用多個(gè) filter
需要注意的是使用,每一個(gè)filter產(chǎn)生的輸出都是一行
$ echo '{"user":"stedolan", "projects": ["jq", "wikiflow"]}' | jq '.user, .projects[]'
"stedolan"
"jq"
"wikiflow"
?? | 管道
jq '.a.b.c' 、 jq '.a | .b | .c' jq '.a' | jq '.b' | jq '.c'是一樣的
如果第一個(gè)filter產(chǎn)生多個(gè)結(jié)果，那么下一個(gè)filter會(huì)對(duì)每一個(gè)結(jié)果都執(zhí)行。因此.[] | .foo 取出數(shù)組中的每一個(gè)"foo"
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[] | .name'
"JSON"
"XML"
對(duì)象操作
?? .foo, .foo.bar 獲取對(duì)象key的值
'.foo'代表獲取foo這個(gè)key
'.foo.bar' 代表獲取foo對(duì)象中的bar，它和上文介紹的 .foo|.bar相同
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo'
{
"bar": {
"baz": 123
}
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo.bar'
{
"baz": 123
}
?? 如果對(duì)象的key包含特殊字符或者以數(shù)字開(kāi)頭，使用'.foo'會(huì)報(bào)錯(cuò)。此時(shí)需要使用雙引號(hào)包裹: ."foo$"、."1foo"
$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq '.1foo'
jq: error: syntax error, unexpected IDENT, expecting $end (Unix shell quoting issues?) at <top-level>, line 1:
.1foo
jq: 1 compile error
$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq '."1foo"'
{
"bar": {
"baz": 123
}
}
??當(dāng)取值不是對(duì)象時(shí)jq默認(rèn)會(huì)報(bào)錯(cuò)，如果想忽略報(bào)錯(cuò)可以使用 .foo?
$ echo '[1,2,3]' | jq '.foo' jq: error (at <stdin>:1): Cannot index array with string "foo" $ echo '[1,2,3]' | jq '.foo?'
數(shù)組操作
?? .[2] 數(shù)組索引
數(shù)組索引也是從0開(kāi)始，同時(shí)支持負(fù)數(shù)
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[0]'
{
"name": "JSON",
"good": true
}
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[-2]'
{
"name": "JSON",
"good": true
}
?? .[10:15] 數(shù)組切片
.[10:15] 包含從從0開(kāi)始10（含）到15（不含）號(hào)元素，如果沒(méi)有值則默認(rèn)到頭/尾
$ echo '["a","b","c","d","e"]' | jq '.[1:3]' [ "b", "c" ] $ echo '["a","b","c","d","e"]' | jq '.[1:]' [ "b", "c", "d", "e" ]
數(shù)組/對(duì)象
?? .[] 遍歷
對(duì)于數(shù)組來(lái)說(shuō)，會(huì)返回?cái)?shù)組中的所有元素
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[]'
{
"name": "JSON",
"good": true
}
{
"name": "XML",
"good": false
}
對(duì)于對(duì)象來(lái)說(shuō)，會(huì)返回對(duì)象中的所有值
$ echo '{"a":1,"b":[1,2]}' | jq '.[]'
1
[
1,
2
]
結(jié)合上文提到管道，可以取出數(shù)組中的每一個(gè)field
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[] | .name'
"JSON"
"XML"
與shell結(jié)合的常見(jiàn)操作
?? 同時(shí)將json中的多個(gè)值賦值到多個(gè)變量
首先利用, 來(lái)同時(shí)解析多個(gè)json字段
其次用echo把多行輸出轉(zhuǎn)換成單行輸出
最后利用read讀取到多個(gè)變量里
$ read json xml <<< $(echo $(echo '{"foo":"JSON","bar":"XML"}' | jq -c '.foo, .bar')) && \
echo "json:$json,xml:$xml"
json:"JSON",xml:"XML"
?? 把多個(gè)json字段輸出到一行
上面使用echo是一種方式，還有一種更通用，尤其是處理數(shù)組時(shí)更方便的方式
利用@tsv處理，注意輸入需要是數(shù)組
# 不加處理
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | .name, .good'
JSON
true
XML
false
# 利用@tsv處理，注意輸入需要是數(shù)組
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | [.name, .good] | @tsv'
JSON true
XML false
# 還可以輸出csv格式的
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | [.name, .good] | @csv'
"JSON",true
"XML",false
?? 遍歷數(shù)組
對(duì)數(shù)組中的每一個(gè)元素進(jìn)行處理
$ echo '["a","b","c","d","e f"]' | jq -c '.[]' | while read i; do echo "val=${i}"; done
val="a"
val="b"
val="c"
val="d"
val="e f"
總結(jié)
以上主要介紹了用jq提取jso，更多關(guān)于jq命令操作JSON的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章！
相關(guān)文章
find命令用來(lái)在指定目錄下查找文件，本文給大家整理了關(guān)于find命令的相關(guān)知識(shí)，感興趣的朋友跟隨小編一起看看吧2022-12-12
linux?中sed命令實(shí)現(xiàn)刪除文件的任意列(操作代碼)
這篇文章主要介紹了linux中sed命令實(shí)現(xiàn)刪除文件的任意列,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2023-06-06
shell腳本讀取命令行參數(shù)的實(shí)現(xiàn)
本文主要介紹了shell腳本讀取命令行參數(shù)的實(shí)現(xiàn)，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-07-07
shell腳本編程之case語(yǔ)句學(xué)習(xí)筆記
這篇文章主要介紹了shell腳本編程之case語(yǔ)句學(xué)習(xí)筆記,本文代碼中包含注釋來(lái)說(shuō)明case語(yǔ)句的使用,需要的朋友可以參考下2014-09-09
這篇文章主要為大家詳細(xì)介紹了如何使用AWK在shell中生成日歷小程序，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2019-07-07
為了可以自動(dòng)把網(wǎng)站上的css、js以及圖片等靜態(tài)資源放在又拍云存儲(chǔ)上，訪問(wèn)速度明顯提高不少，下面簡(jiǎn)單介紹下實(shí)現(xiàn)步驟，需要的朋友可以參考下2013-11-11
本文介紹Shell腳本實(shí)用的六個(gè)技巧示例：使用Shell腳本實(shí)現(xiàn)自動(dòng)化備份、使用Shell腳本實(shí)現(xiàn)定時(shí)任務(wù)、使用Shell腳本實(shí)現(xiàn)遠(yuǎn)程登錄服務(wù)器、使用Shell腳本自動(dòng)化部署應(yīng)用、使用Shell腳本實(shí)現(xiàn)快速部署開(kāi)發(fā)環(huán)境、使用Shell腳本實(shí)現(xiàn)快速檢查服務(wù)器性能2023-11-11
這篇文章介紹了一些在Shell腳本中常用的特殊位置變量,如$n, $0, $#等,并詳細(xì)解釋了它們的功能和用法,感興趣的朋友跟隨小編一起看看吧2025-01-01
Shell腳本實(shí)現(xiàn)分析apache日志中ip所在的地區(qū)
這篇文章主要介紹了Shell腳本實(shí)現(xiàn)分析apache日志中ip所在的地區(qū),本文使用了一款nali工具實(shí)現(xiàn),需要的朋友可以參考下2014-12-12
這篇文章主要介紹了Shell獲取文件的文件名和擴(kuò)展名的例子,簡(jiǎn)明版的代碼實(shí)例,看了就懂,需要的朋友可以參考下2014-06-06