PostgreSQL中查询JSON数组:提取并筛选特定键值

PostgreSQL中查询JSON数组:提取并筛选特定键值

本文旨在详细阐述如何在postgresql中高效且精确地查询json类型列中的数组数据。我们将聚焦于从json对象数组中提取特定键的值,并根据这些值进行条件筛选,避免使用低效且不准确的全局文本匹配方法。通过介绍postgresql的内置json函数和操作符,如`json_array_elements`和`->>`,我们将提供一个结构化的解决方案,帮助您准确地从复杂json结构中检索所需信息,并讨论性能优化和最佳实践。

在现代应用开发中,数据库中存储JSON数据已成为常见模式。然而,如何高效且准确地查询这些非结构化或半结构化数据,特别是当JSON列中包含对象数组时,是一个常见的挑战。本教程将以一个具体场景为例,详细讲解在PostgreSQL中解决这类问题的专业方法。

理解问题背景

假设我们有一个名为 cyto_records 的表,它通过 recordid 与 cyto_record_results 表关联。在 cyto_record_results 表中,存在一个名为 interval_note 的 json 类型列,其数据结构为JSON对象数组,例如:

[ {"text":"bbb","userID":"U001","time":16704,"showInReport":true},   {"text":"bb","userID":"U001","time":167047,"showInReport":true}]

我们的目标是查询所有 workflowid(来自 cyto_records 表),这些记录的 interval_note 列中,存在某个JSON对象的 text 键值包含特定字符串(例如 ‘bb’)。

用户尝试的初始查询 rr.interval_note::text LIKE ‘%aaa%’ 存在明显缺陷:它将整个JSON数组转换为文本进行匹配,这不仅效率低下,而且可能导致误报(例如,如果 userID 或 time 字段中包含了匹配字符串)。此外,对于PostgreSQL而言,JSON_EXTRACT 是MySQL的函数,不适用于PostgreSQL。

PostgreSQL JSON查询核心概念

PostgreSQL提供了强大的JSON函数和操作符,用于处理 json 和 jsonb 类型的数据。对于JSON数组的查询,以下几个关键组件至关重要:

json_array_elements(json) / jsonb_array_elements(jsonb):

这两个函数用于将JSON数组展开为一组行,每行包含数组中的一个元素。json_array_elements 适用于 json 类型,jsonb_array_elements 适用于 jsonb 类型。通常与 JOIN LATERAL 结合使用,以高效地遍历数组。

-> (获取JSON字段/元素) 和 ->> (获取JSON字段/元素并转换为文本):

-> 操作符用于从JSON对象中提取指定键的值,结果仍然是JSON类型。->> 操作符用于从JSON对象中提取指定键的值,并将其作为文本(TEXT)返回。这是我们进行字符串匹配时所需要的。

构建精确的PostgreSQL查询

为了实现我们的目标,我们将分步构建查询。

步骤 1: 展开JSON数组

首先,我们需要将 interval_note 列中的JSON数组展开,使得数组中的每个对象都作为单独的行进行处理。这通过 JOIN LATERAL 和 json_array_elements 函数实现。

SELECT    rr.recordid,    json_array_elements(rr.interval_note) AS note_elementFROM    cyto_record_results rrJOIN LATERAL json_array_elements(rr.interval_note) AS note_element ON TRUE;

这条语句会将 cyto_record_results 表的每一行,与其 interval_note 列中的每个JSON元素进行连接。例如,如果 interval_note 有两个元素,那么原始行就会被复制两次,分别与这两个元素关联。

步骤 2: 提取特定键的值

从展开的 note_element 中,我们需要提取 text 键的值,并将其转换为文本类型,以便进行字符串匹配。

SELECT    rr.recordid,    (note_element->>'text') AS extracted_text_valueFROM    cyto_record_results rrJOIN LATERAL json_array_elements(rr.interval_note) AS note_element ON TRUE;

note_element->>’text’ 将安全地提取 note_element 对象中 text 键的值,并以 TEXT 类型返回。如果 text 键不存在,它将返回 NULL。

vizcom.ai vizcom.ai

AI草图渲染工具,快速将手绘草图渲染成精美的图像

vizcom.ai 139 查看详情 vizcom.ai

步骤 3: 应用筛选条件

现在我们可以在提取的 extracted_text_value 上应用 LIKE 操作符进行模糊匹配。

SELECT    rr.recordid,    (note_element->>'text') AS extracted_text_valueFROM    cyto_record_results rrJOIN LATERAL json_array_elements(rr.interval_note) AS note_element ON TRUEWHERE    (note_element->>'text') LIKE '%bb%';

步骤 4: 获取最终结果(workflowid)

最后,我们将上述查询与 cyto_records 表连接,并选择 workflowid,同时使用 DISTINCT 确保每个 workflowid 只出现一次。

SELECT DISTINCT r.workflowidFROM cyto_records rJOIN cyto_record_results rr ON r.recordid = rr.recordidJOIN LATERAL json_array_elements(rr.interval_note) AS note_element ON TRUEWHERE (note_element->>'text') LIKE '%bb%';

这个查询是针对PostgreSQL 10.20版本及更高版本兼容的,它能精确地定位到含有指定字符串的 text 键值,并返回相应的 workflowid。

性能优化与注意事项

json vs. jsonb:

如果您的PostgreSQL版本支持(9.4及以上),强烈建议将 json 类型列改为 jsonb。jsonb 是以二进制格式存储的JSON,相比 json(存储为原始文本),它在查询和处理上通常更快,因为它不需要在每次查询时重新解析。如果使用 jsonb,请将 json_array_elements 替换为 jsonb_array_elements。

索引优化:

对于 jsonb 列,可以创建 GIN 索引来加速查询。如果您经常查询特定路径下的文本值,可以创建表达式索引:

CREATE INDEX idx_interval_note_text ON cyto_record_results USING GIN ((interval_note->'text'));

请注意,这里的 -> 返回的是JSON类型,如果 LIKE 匹配的是文本,可能需要 (interval_note->>’text’)。然而,对于 LIKE 匹配,更通用的 jsonb_path_ops 索引可能更有效,或者直接在 jsonb 列上创建 GIN 索引,PostgreSQL能够利用它进行路径操作:

CREATE INDEX idx_interval_note_gin ON cyto_record_results USING GIN (interval_note jsonb_path_ops);

此索引可以加速涉及 -> 和 ->> 操作符的查询。

空值处理:

如果 note_element 中没有 text 键,note_element->>’text’ 将返回 NULL。NULL LIKE ‘%bb%’ 的结果是 NULL,在 WHERE 子句中被视为 FALSE,这意味着它不会匹配不包含 text 键的JSON对象。这通常是期望的行为。

查询复杂性:

尽管 JOIN LATERAL 结合 json_array_elements 是处理JSON数组的标准且高效方法,但对于非常大的JSON数组和频繁的查询,其性能仍需通过索引和可能的应用层缓存来进一步优化。

总结

通过本教程,我们学习了如何在PostgreSQL中精确地查询JSON类型列中的对象数组。核心方法是利用 JOIN LATERAL 和 json_array_elements(或 jsonb_array_elements)来展开数组,然后使用 ->> 操作符提取特定键的文本值,最后应用 LIKE 等条件进行筛选。这种方法比简单的全局文本匹配更准确、更高效,并且能够充分利用PostgreSQL强大的JSON处理能力。在实际应用中,结合 jsonb 类型和适当的 GIN 索引,可以进一步提升查询性能,确保数据检索的效率和准确性。

以上就是PostgreSQL中查询JSON数组:提取并筛选特定键值的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/894163.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月28日 16:42:55
下一篇 2025年11月28日 16:43:17

相关推荐

  • 网络进化!

    Web 应用程序从静态网站到动态网页的演变是由对更具交互性、用户友好性和功能丰富的 Web 体验的需求推动的。以下是这种范式转变的概述: 1. 静态网站(1990 年代) 定义:静态网站由用 HTML 编写的固定内容组成。每个页面都是预先构建并存储在服务器上,并且向每个用户传递相同的内容。技术:HT…

    2025年12月24日
    000
  • 为什么多年的经验让我选择全栈而不是平均栈

    在全栈和平均栈开发方面工作了 6 年多,我可以告诉您,虽然这两种方法都是流行且有效的方法,但它们满足不同的需求,并且有自己的优点和缺点。这两个堆栈都可以帮助您创建 Web 应用程序,但它们的实现方式却截然不同。如果您在两者之间难以选择,我希望我在两者之间的经验能给您一些有用的见解。 在这篇文章中,我…

    2025年12月24日
    000
  • 深入理解CSS框架与JS之间的关系

    深入理解CSS框架与JS之间的关系 在现代web开发中,CSS框架和JavaScript (JS) 是两个常用的工具。CSS框架通过提供一系列样式和布局选项,可以帮助我们快速构建美观的网页。而JS则提供了一套功能强大的脚本语言,可以为网页添加交互和动态效果。本文将深入探讨CSS框架和JS之间的关系,…

    2025年12月24日
    000
  • HTML+CSS+JS实现雪花飘扬(代码分享)

    使用html+css+js如何实现下雪特效?下面本篇文章给大家分享一个html+css+js实现雪花飘扬的示例,希望对大家有所帮助。 很多南方的小伙伴可能没怎么见过或者从来没见过下雪,今天我给大家带来一个小Demo,模拟了下雪场景,首先让我们看一下运行效果 可以点击看看在线运行:http://hai…

    2025年12月24日 好文分享
    500
  • 10款好看且实用的文字动画特效,让你的页面更吸引人!

    图片和文字是网页不可缺少的组成部分,图片运用得当可以让网页变得生动,但普通的文字不行。那么就可以给文字添加一些样式,实现一下好看的文字效果,让页面变得更交互,更吸引人。下面创想鸟就来给大家分享10款文字动画特效,好看且实用,快来收藏吧! 1、网页玻璃文字动画特效 模板简介:使用css3制作网页渐变底…

    2025年12月24日 好文分享
    000
  • tp5如何引入css文件

    tp5引入css文件的方法:1、将css文件放在public目录下的static文件里即可;2、在页面引入中写上“”语句即可。 本教程操作环境:windows7系统、CSS3&&HTML5版、Dell G3电脑。 其实很简单,只需要将css,js,image文件放在这个目录下即可 页…

    2025年12月24日
    000
  • 聊聊CSS 与 JS 是如何阻塞 DOM 解析和渲染的

    本篇文章给大家介绍一下css和js阻塞 dom 解析和渲染的原理。有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助。 hello~各位亲爱的看官老爷们大家好。估计大家都听过,尽量将CSS放头部,JS放底部,这样可以提高页面的性能。然而,为什么呢?大家有考虑过么?很长一段时间,我都是知其…

    2025年12月24日
    200
  • js如何修改css样式

    js修改css样式的方法:1、使用【obj.className】来修改样式表的类名;2、使用【obj.style.cssTest】来修改嵌入式的css;3、使用【obj.className】来修改样式表的类名;4、使用更改外联的css。 本教程操作环境:windows7系统、css3版,DELL G…

    2025年12月24日
    000
  • 如何使用纯CSS、JS实现图片轮播效果

    本篇文章给大家详细介绍一下使用纯css、js实现图片轮播效果的方法。有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助。 .carousel {width: 648px;height: 400px;margin: 0 auto;text-align: center;position: a…

    2025年12月24日
    000
  • js如何修改css

    js修改css的方法:1、使用【obj.style.cssTest】来修改嵌入式的css;2、使用【bj.className】来修改样式表的类名;3、使用更改外联的css文件,从而改变元素的css。 本教程操作环境:windows7系统、css3版,DELL G3电脑。 js修改css的方法: 方法…

    2025年12月24日
    000
  • js如何改变css样式

    js改变css样式的方法:1、使用cssText方法;2、使用【setProperty()】方法;3、使用css属性对应的style属性。 本教程操作环境:windows7系统、css3版,DELL G3电脑。 js改变css样式的方法: 第一种:用cssText div.style.cssText…

    2025年12月24日
    000
  • 为什么css放上面js放下面

    css放上面js放下面的原因:1、在加载html生成DOM tree的时候,可以同时对DOM tree进行渲染,这样可以防止闪跳,白屏或者布局混乱;2、javascript加载后会立即执行,同时会阻塞后面的资源加载。 本文操作环境:Windows7系统、HTML5&&CSS3版,DE…

    2025年12月24日
    000
  • 推荐六款移动端 UI 框架

    作为一个前端人员来说,总结几款相对来说不错的用于移动端开发的UI框架是非常必要的,以下几种移动端UI框架就能基本满足工作中开发需要,根据项目需求,选用合适的框架搭建项目,更能容易提高开发效率。 一、MUI         最接近原生APP体验的高性能前端框架,追求性能体验,是我们开始启动MUI项目的…

    2025年12月24日
    000
  • CSS如何实现任意角度的扇形(代码示例)

    本篇文章给大家带来的内容是关于CSS如何实现任意角度的扇形(代码示例),有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助。 扇形制作原理,底部一个纯色原形,里面2个相同颜色的半圆,可以是白色,内部半圆按一定角度变化,就可以产生出扇形效果 扇形绘制 .shanxing{ position:…

    2025年12月24日
    000
  • css如何实现图片的旋转展示效果(代码示例)

    本篇文章给大家带来内容是通过代码示例介绍使用css+js实现图片的旋转展示,制作一个手动操作的“无限”照片轮播图。有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。 下面我们就开始介绍如何实现效果。 1、构建图像轮播框架 首先是HTML。它有点难以阅读,因为我们删除了元素之间的任何空格…

    2025年12月24日
    000
  • css3+js实现烟花绽放的动画效果(代码示例)

    本篇文章给大家介绍通过js+css3的transforms属性和keyframes属性来实现烟花绽放的动画效果的方法。有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。 首先我们来看看效果: 动画的实现原理: 动画使用了两个关键帧(keyframes): 一个是烟花筒上升的轨迹,另一个…

    2025年12月24日
    000
  • css+js如何在幻灯片上添加文字?实现幻灯片的旋转切换(附代码)

    本篇文章给大家带来的内容是介绍css+js如何在幻灯片上添加文字?实现幻灯片的旋转切换(附代码)。有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。 在之前的文章【css如何实现幻灯片效果?幻灯片的实现方法】中介绍了实现淡入淡出幻灯片的实现方法,本篇文章就在其基础上去解释如何在幻灯片上…

    2025年12月24日
    000
  • css+js如何实现简单的动态进度条效果?(代码实例)

    css+js如何实现简单的动态进度条?本篇文章就给大家用css+js制作一个简单的动态进度条效果,并将页面动态进度条滚动加载的代码分享给大家,感兴趣的小伙伴可以参考借鉴一下,希望对你们有所帮助。 我们要知道,这里主要使用了css3的animation动画属性,首先将进度条设置为一个初始宽度为0,背景…

    2025年12月24日
    000
  • 手写CSS+js实现radio单选按钮

    本文给大家介绍手写css+js实现radio单选按钮,有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。 有的时候我们需要用长得漂亮一点的单选按钮,那么,就要抛弃原有的自己来写,下面就是我实现的 你丑你先你才丑你先你更丑你先 .radio{display: flex;align-ite…

    2025年12月24日
    000
  • css3+js绘制动态时钟(附代码)

    本章给大家介绍如何使用css3与js实现动态时钟效果,有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助。 先看看效果图: 首先,思考了一下页面的布局,大致需要4层div,最底层是一个表盘的背景图,然后其余3层分别是时针,分针,秒针的图层. html代码如下: 变量名是随便起的,不要介意;…

    2025年12月24日
    000

发表回复

登录后才能评论
关注微信