pgsql jsonb的索引

Posted 2023-04-03

参考技术A 搜索JSONB中一些预定的属性，可以使用Btree、HASH、GIN索引，一般使用BTREE；

如果索引要支持搜索任意属性，则使用GIN索引，如果只是检查它是否仅具有键值，使用jsonb_path_ops，但是如果不仅检查是否具有键值，还检查键的存在，最好使用jsonb_ops：

https://bitnine.net/blog-postgresql/postgresql-internals-jsonb-type-and-its-indexes/

关于pgsql 的json 和jsonb 的数据查询操作笔记整理

关于pgsql 的json 和jsonb 的数据处理笔记

1. json 和jsonb 区别
两者从用户操作的角度来说没有区别，区别主要是存储和读取的系统处理（预处理）和耗时方面有区别。json写入快，读取慢，jsonb写入慢，读取快。

2. 常用的操作符

操作符：

-> // 右边传入整数（针对纯数组），获取数组的第n个元素，n从0开始算，返回值为json

示例： select \'[{"a":"foo"},{"b":"bar"},{"c":"baz"}]\'::json->2 // 输出 {"c":"baz"}

-> // 右边传入键值（针对关联数组），获取数组的第n个元素，n从0开始算，返回值为json

示例： select \'{"a": {"b":"foo"}, "c":{"a": "aaa"}}\'::json->\'a\' // 输出 {"b":"foo"}

->> // 右边传入整数（针对纯数组），获取数组的第n个元素，n从0开始算，返回值为文本

示例： select \'[{"a":"foo"},{"b":"bar"},{"c":"baz"}]\'::json->>2 // 输出 {"c":"baz"}

->> // 右边传入键值（针对关联数组），获取数组的第n个元素，n从0开始算，返回值为文本

示例： select \'{"a": {"b":"foo"}, "c":{"a": "aaa"}}\'::json->>\'a\' // 输出 {"b":"foo"}

#> // 获取json子对象，传入数组，返回json

示例： select \'{"a": {"b":{"c": "foo"}}}\'::json#> \'{a,b}\' // 输出 {"c": "foo"}

#>> // 获取json子对象并转换为文本，传入数组，返回文本

示例： select \'{"a": {"b":{"c": "foo"}}}\'::json#>> \'{a,b}\' // 输出 {"c": "foo"}

 

3. 操作函数
目前pgsql版本提供了两套函数分别处理，可以通用，名称也差不多，比如 json_each 和 jsonb_each ， json_array_elements 和 jsonb_array_elements 。

json相关的处理函数比较多，常用的有如下三个，这三个基本够用了

json_object_keys  // 返回json的键（多层只返回第一层），该函数不能用于纯数组.

json_array_elements  // 提取转换纯数组元素

json_extract_path   // 返回JSON值所指向的某个键元素（相当于 #> 操作符），该函数不能直接操作纯数组。

需要注意的是如果你创建字段用的是json就用json相关函数，如果创建字段用的是jsonb就用jsonb相关函数。

 

json_object_keys 函数示例：

select json_object_keys (\'
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": "10"
}
\')

输出：

json_object_keys 函数示例：

select json_object_keys (\'
[ 
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
\')

输出：

ERROR:  cannot call json_object_keys on an array     // 不能用于数组

 

json_array_elements  函数 示例:

select json_array_elements (\'
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"},
{"id": "111a13d3-0225-4431-b858-678c3cfea999", "weight": "3", "quantity": "11"}
]
\')

 

我们看到json数据被分离成三条记录，这时我们就可以对其进行查询操作，

比如查询是否包含了weight=3的数据。

select * from json_array_elements (\'
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"},
{"id": "111a13d3-0225-4431-b858-678c3cfea999", "weight": "3", "quantity": "11"}
]
\') as jae
where jae::jsonb->>\'weight\' = \'3\' 

#输出：

我们看到这样就可以到对json数据内部进行查询了。

 

json_extract_path   函数示例：

比如要获取键 ‘goods’ 的值：

{
"goods":
[ 
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}

select json_extract_path   (\'
{
"goods":
[ 
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
\' , \'goods\' )  ;   // 第二个参数表示获取键为goods的值

#输出：

json_extract_path   函数和  pgsql  提供的操作符  #>  是一样的。

select (\'
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": {"max": "150", "min": "2"}
}
\') ::json #> \'{goods}\'

两者的输出是一致的。

 

同样我们要输出 键quantity 下键max 的值：

select json_extract_path   (\'
{
"goods":
[ 
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
\' , \'quantity\',\'max\' ) ;   

-- 或

select (\'
{
"goods":
[ 
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
\') ::json #> \'{quantity, max}\'

两者输出是一样的。

 

这几个函数是可以联合使用的。

比如我们要查询 键“goods” 下weight =2 的id 和quantity 值，语句如下：

select jae::json->>\'id\' as id, jae::json->>\'quantity\' as quantity from json_array_elements (
json_extract_path (\'
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": {"max": "150", "min": "2"}
}
\' , \'goods\' ) ) as jae where jae::json->> \'weight\' = \'2\'

#输出：

 

 上述的json语句我们可以当做字段来使用，就相当于对表记录进行操作了。

 

接下来我们同个一个例子讲解json在表中的用法：

示例：查询表中jsonb_msg字段中goods下id=1003和1002的记录，表中输入如下图：

 sql查询语句：

select name,* from upgrade_test.test1 test
where
( select count(*) from jsonb_array_elements (
jsonb_extract_path(test.json_msg , \'goods\' ) ) as jae where jae::json->> \'id\' in (\'1001\',\'1003\') ) > 0 ; 

#输出：

 

效率还行：

Total query runtime: 11 msec
检索到 2 行。

 

 

官方文档页：

https://www.postgresql.org/docs/9.4/static/functions-json.html