jq命令對(duì)JSON進(jìn)行過濾遍歷結(jié)構(gòu)轉(zhuǎn)換等操作實(shí)例
引言
jq是一個(gè)靈活的輕量級(jí)命令行JSON處理器，你可以使用jq命令對(duì)JSON進(jìn)行過濾、遍歷或者結(jié)構(gòu)轉(zhuǎn)換等操作
項(xiàng)目主頁(yè)位于：
https://stedolan.github.io/jq/
你也可以在線體驗(yàn)：
官方文檔參考：
https://stedolan.github.io/jq/manual/#Basicfilters
下面來(lái)讓我們快速入門一下吧
基礎(chǔ)
$ jq -h jq - commandline JSON processor [version 1.6] Usage: jq [options] <jq filter> [file...] jq [options] --args <jq filter> [strings...] jq [options] --jsonargs <jq filter> [JSON_TEXTS...]
常見的用法是jq [options] <jq filter> [file...]，例如
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo'
{
"bar": {
"baz": 123
}
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo.bar'
{"baz":123}
其中-c 為options，'.foo' 即為filter，兩者都會(huì)在下文介紹
參數(shù)[options]
?? -r output raw strings, not JSON texts
字符串默認(rèn)帶引號(hào)，使用-r可以移除字符串的引號(hào)
$ echo '{"foo": "bar"}' | jq '.foo'
"bar"
$ echo '{"foo": "bar"}' | jq -r '.foo'
bar
?? -c compact instead of pretty-printed output
jq默認(rèn)輸出格式化之后的json，如果希望能在一行輸出使用 -c
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo | .bar'
{
"baz": 123
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo | .bar'
{"baz":123}
過濾器<jq filter>
?? . 輸出原始的 JSON 數(shù)據(jù)
因?yàn)閖q默認(rèn)是格式化的，所以這個(gè)filter可以當(dāng)作格式化
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.'
{
"foo": {
"bar": {
"baz": 123
}
}
}
鏈接符
先看下連接符，具體filter的含義下面會(huì)介紹。兩個(gè)連接符都是用來(lái)組合不同filter來(lái)完成特定功能的
?? , 使用多個(gè) filter
需要注意的是使用,每一個(gè)filter產(chǎn)生的輸出都是一行
$ echo '{"user":"stedolan", "projects": ["jq", "wikiflow"]}' | jq '.user, .projects[]'
"stedolan"
"jq"
"wikiflow"
?? | 管道
jq '.a.b.c' 、 jq '.a | .b | .c' jq '.a' | jq '.b' | jq '.c'是一樣的
如果第一個(gè)filter產(chǎn)生多個(gè)結(jié)果，那么下一個(gè)filter會(huì)對(duì)每一個(gè)結(jié)果都執(zhí)行。因此.[] | .foo 取出數(shù)組中的每一個(gè)"foo"
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[] | .name'
"JSON"
"XML"
對(duì)象操作
?? .foo, .foo.bar 獲取對(duì)象key的值
'.foo'代表獲取foo這個(gè)key
'.foo.bar' 代表獲取foo對(duì)象中的bar，它和上文介紹的 .foo|.bar相同
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo'
{
"bar": {
"baz": 123
}
}
$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo.bar'
{
"baz": 123
}
?? 如果對(duì)象的key包含特殊字符或者以數(shù)字開頭，使用'.foo'會(huì)報(bào)錯(cuò)。此時(shí)需要使用雙引號(hào)包裹: ."foo$"、."1foo"
$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq '.1foo'
jq: error: syntax error, unexpected IDENT, expecting $end (Unix shell quoting issues?) at <top-level>, line 1:
.1foo
jq: 1 compile error
$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq '."1foo"'
{
"bar": {
"baz": 123
}
}
??當(dāng)取值不是對(duì)象時(shí)jq默認(rèn)會(huì)報(bào)錯(cuò)，如果想忽略報(bào)錯(cuò)可以使用 .foo?
$ echo '[1,2,3]' | jq '.foo' jq: error (at <stdin>:1): Cannot index array with string "foo" $ echo '[1,2,3]' | jq '.foo?'
數(shù)組操作
?? .[2] 數(shù)組索引
數(shù)組索引也是從0開始，同時(shí)支持負(fù)數(shù)
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[0]'
{
"name": "JSON",
"good": true
}
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[-2]'
{
"name": "JSON",
"good": true
}
?? .[10:15] 數(shù)組切片
.[10:15] 包含從從0開始10（含）到15（不含）號(hào)元素，如果沒有值則默認(rèn)到頭/尾
$ echo '["a","b","c","d","e"]' | jq '.[1:3]' [ "b", "c" ] $ echo '["a","b","c","d","e"]' | jq '.[1:]' [ "b", "c", "d", "e" ]
數(shù)組/對(duì)象
?? .[] 遍歷
對(duì)于數(shù)組來(lái)說，會(huì)返回?cái)?shù)組中的所有元素
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[]'
{
"name": "JSON",
"good": true
}
{
"name": "XML",
"good": false
}
對(duì)于對(duì)象來(lái)說，會(huì)返回對(duì)象中的所有值
$ echo '{"a":1,"b":[1,2]}' | jq '.[]'
1
[
1,
2
]
結(jié)合上文提到管道，可以取出數(shù)組中的每一個(gè)field
$ echo '[{"name":"JSON", "good":true}, {"name":"XML", "good":false}]' | jq '.[] | .name'
"JSON"
"XML"
與shell結(jié)合的常見操作
?? 同時(shí)將json中的多個(gè)值賦值到多個(gè)變量
首先利用, 來(lái)同時(shí)解析多個(gè)json字段
其次用echo把多行輸出轉(zhuǎn)換成單行輸出
最后利用read讀取到多個(gè)變量里
$ read json xml <<< $(echo $(echo '{"foo":"JSON","bar":"XML"}' | jq -c '.foo, .bar')) && \
echo "json:$json,xml:$xml"
json:"JSON",xml:"XML"
?? 把多個(gè)json字段輸出到一行
上面使用echo是一種方式，還有一種更通用，尤其是處理數(shù)組時(shí)更方便的方式
利用@tsv處理，注意輸入需要是數(shù)組
# 不加處理
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | .name, .good'
JSON
true
XML
false
# 利用@tsv處理，注意輸入需要是數(shù)組
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | [.name, .good] | @tsv'
JSON true
XML false
# 還可以輸出csv格式的
$ echo '[{"name":"JSON","good":true},{"name":"XML","good":false}]' | jq -r '.[] | [.name, .good] | @csv'
"JSON",true
"XML",false
?? 遍歷數(shù)組
對(duì)數(shù)組中的每一個(gè)元素進(jìn)行處理
$ echo '["a","b","c","d","e f"]' | jq -c '.[]' | while read i; do echo "val=${i}"; done
val="a"
val="b"
val="c"
val="d"
val="e f"
總結(jié)
以上主要介紹了用jq提取jso，更多關(guān)于jq命令操作JSON的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章！
相關(guān)文章
Shell中統(tǒng)計(jì)字符串中單詞的個(gè)數(shù)的幾種方法
今天小編就為大家分享一篇關(guān)于Shell中統(tǒng)計(jì)字符串中單詞的個(gè)數(shù)的幾種方法，小編覺得內(nèi)容挺不錯(cuò)的，現(xiàn)在分享給大家，具有很好的參考價(jià)值，需要的朋友一起跟隨小編來(lái)看看吧2019-03-03
Bash Shell中的select命令簡(jiǎn)單使用示例
這篇文章主要介紹了Bash Shell中的select命令簡(jiǎn)單使用示例,通常用于流程控制功能的實(shí)現(xiàn),需要的朋友可以參考下2015-07-07
這篇文章介紹了Linux文件管理的方法，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2022-06-06
Linux?shell中$(())、$()、``與${}的區(qū)別
本文主要介紹了Linux?shell中$(())、$()、``與${}的區(qū)別，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-06-06
用模板的方式創(chuàng)建守護(hù)進(jìn)程代碼實(shí)例
用模板的方式創(chuàng)建守護(hù)進(jìn)程,只需要定義一個(gè)與int work(int argc,char **argv)相同的偽入口函數(shù)傳入start_domain()函數(shù)即可2013-12-12
這篇文章主要介紹了 linux 查看端口占用命令實(shí)例詳解的相關(guān)資料,教大家怎樣查看系統(tǒng)端口占用情況，需要的朋友可以參考下2017-07-07
git 現(xiàn)在的火爆程度非同一般，它被廣泛地用在大型開源項(xiàng)目，團(tuán)隊(duì)開發(fā)，以及獨(dú)立開發(fā)者，甚至學(xué)生之中。這篇文章給大家介紹一些Git代碼提交流程和Git基礎(chǔ)命令的使用，需要的朋友參考下吧2017-12-12
ssh自動(dòng)登錄的4種實(shí)現(xiàn)方法
這篇文章主要介紹ssh自動(dòng)登錄的幾種實(shí)現(xiàn)方法，需要的朋友可以參考下2013-02-02
linux shell中的比較符號(hào)與特殊符號(hào)介紹
本文為大家介紹linux shell中的特殊符號(hào)，包括字符串比較、數(shù)字比較與計(jì)算、特殊字符等，學(xué)習(xí)shell的朋友可以看下2013-06-06
這篇文章主要介紹了Shell腳本檢查IP格式及mysql操作實(shí)例,本文直接給出腳本代碼,需要的朋友可以參考下2015-05-05