使用 Knexjs 批量更新记录的 QL 方法

使用 knexjs 批量更新记录的 ql 方法

在 web 开发领域,高效地使用数据库至关重要,尤其是在处理批量操作(例如一次更新多个记录)时。无论您是管理库存、处理用户数据还是处理交易,以高效可靠的方式执行批量更新的能力都是至关重要的。

在本指南中,我们将详细介绍使用 knex.jsnode.js 的多功能查询生成器)批量更新记录的三种基本 sql 技术。每种方法都针对不同的场景量身定制,根据您的具体用例提供独特的优势。我们将介绍:

具有多个条件的单一更新: 一种允许您在单个查询中更新多个记录的方法,利用条件逻辑根据特定条件应用不同的更新。

在事务中使用单个查询进行批量更新: 这种方法利用事务来确保原子性,安全高效地执行多个更新查询。

upsert(插入或更新)使用 onconflict: 非常适合需要插入新记录或更新现有记录而不冒重复数据风险的场景。

在下面的部分中,我们将深入研究每种方法,检查它们的实现、优点和最佳用例。通过了解这些方法,您可以选择最适合您的特定需求的技术,优化应用程序中的性能和数据完整性。

1. 多条件单次更新

当涉及到更新数据库中的多条记录时,效率是关键。一项强大的技术是使用具有多个条件的单个 update 查询。当您需要根据特定条件对不同记录应用不同的更新(所有这些都在单个 sql 语句中)时,此方法特别有用。

理念:

“多条件单次更新”方法背后的核心思想是使用单个 update 查询来修改多行,每行可能根据其独特的特征接收不同的值。这是通过在 update 查询中使用 case 语句来实现的,允许您为需要更新的每个字段指定条件逻辑。

为什么使用这种方法:

效率: 对于少量到中等数量的记录(例如几十到几百条),将多个更新合并到单个查询中可以通过减少数据库往返次数来显着提高性能。这在处理高频更新时尤其有用。然而,对于非常大的数据集(数千或更多),这种方法可能不那么有效。我们将在本指南后面讨论处理大型数据集的替代方法。

简单性: 与执行多个单独的查询相比,使用单个查询管理更新通常更简单且更易于维护。这种方法降低了数据库交互的复杂性,并使代码更易于理解,特别是在处理适度数量的更新时。

减少开销:更少的查询意味着更少的数据库开销,这可以带来更好的整体性能。这在网络延迟或数据库负载可能影响操作速度的情况下尤其重要。
对于大量记录,我们在本指南中探索其他策略,以更有效地管理潜在开销。

示例实现:

这里有一个实际示例,说明如何使用 knex.js(node.js 的流行 sql 查询构建器)来实现此方法。此示例演示如何一次性更新多条记录的多个字段,使用条件逻辑根据记录的 id 应用不同的更新:

const queryheaderproductupdate = 'update products set '; // start of the sql update queryconst updatesproductupdate = []; // array to hold the individual update statementsconst parametersproductupdate = []; // array to hold the parameters for the queryconst updateproducts = [  { product_id: 1, name: 'new name 1', price: 100, status: 'active' },  { product_id: 2, name: 'new name 2', price: 150, status: 'inactive' },  { product_id: 3, name: 'new name 3', price: 200, status: 'active' }];// extract the product ids to use in the where clauseconst productids = updateproducts.map(p => p.product_id);// build the update statements for each fieldupdateproducts.foreach((item) => {  // add conditional logic for updating the 'name' field  updatesproductupdate.push('name = case when product_id = ? then ? else name end');  parametersproductupdate.push(item.product_id, item.name);  // add conditional logic for updating the 'price' field  updatesproductupdate.push('price = case when product_id = ? then ? else price end');  parametersproductupdate.push(item.product_id, item.price);  // add conditional logic for updating the 'status' field  updatesproductupdate.push('status = case when product_id = ? then ? else status end');  parametersproductupdate.push(item.product_id, item.status);  // add 'updated_at' field with the current timestamp  updatesproductupdate.push('updated_at = ?');  parametersproductupdate.push(knex.fn.now());  // add 'updated_by' field with the user id  updatesproductupdate.push('updated_by = ?');  parametersproductupdate.push(req.user.userid);});// construct the full query by joining the individual update statements and adding the where clauseconst queryproductupdate = `${queryheaderproductupdate + updatesproductupdate.join(', ')} where product_id in (${productids.join(', ')})`;// execute the update queryawait db.raw(queryproductupdate, parametersproductupdate);

这段代码的作用:

构造查询标头:开始产品表的 update 语句。

构建条件更新:使用case语句根据product_id为每个字段指定不同的更新。

生成完整查询:组合更新语句和 where 子句。

执行查询:运行构造的查询以将更新应用于指定的记录。

通过实施此技术,您可以使用条件逻辑高效处理批量更新,使您的数据库操作更加简化和有效。

注意:在提供的示例中,我们没有使用事务,因为该操作涉及单个 sql 查询。由于单个查询本身就可以维护数据的完整性和一致性,因此不需要额外的事务。添加交易只会增加开销,而不会在这种情况下提供额外的好处。

探索了“多条件单次更新”方法(该方法适用于中等数量的记录并提供简单性和效率)之后,我们现在将注意力转向不同的场景。随着数据集变得越来越大,或者当多个操作之间的原子性变得至关重要时,有效地管理更新需要更强大的方法。

在事务中使用单个查询进行批量更新是一种旨在满足这些需求的方法。此方法涉及在单个事务中执行多个更新查询,确保以原子方式应用所有更新。让我们深入了解一下这种方法的工作原理及其优点。

2. 在事务中使用单个查询进行批量更新

在处理批量更新时,尤其是对于大型数据集,在事务中单独管理每个更新可能是一种稳健且可靠的方法。此方法确保所有更新都以原子方式应用,并且可以优雅地处理错误。

为什么使用这种方法:

可扩展性: 对于较大的数据集,使用多个条件进行单一更新可能会变得效率低下,使用事务进行批量更新可以提供更好的控制。每个查询单独执行,事务确保所有更改一起提交,降低部分更新的风险。

错误处理: 事务通过确保所有更新都成功或没有更新来提供安全网。这种原子性保证了数据的完整性,非常适合需要执行多个相关更新的场景。

怪兽智能全息舱 怪兽智能全息舱

专业的AI数字人平台,定制数字人专属IP

怪兽智能全息舱 16 查看详情 怪兽智能全息舱

并发控制: 使用事务可以帮助管理对同一记录的并发修改,防止冲突并确保一致性。

代码示例

以下是如何使用 knex.js 在事务中通过单个查询实现批量更新:

const updaterecordsinbatch = async () => {    // example data to update    const datatoupdate = [        { id: 1, name: 'updated name 1', price: 100 },        { id: 2, name: 'updated name 2', price: 200 },        { id: 3, name: 'updated name 3', price: 300 }    ];    // start a transaction    const trx = await db.transaction();    const promises = [];    try {        // iterate over the data and push update queries to the promises array        datatoupdate.foreach(record => {            promises.push(                trx('products')                    .update({                        name: record.name,                        price: record.price,                        updated_at: trx.fn.now()                    })                    .where('id', record.id)            );        });        // execute all queries concurrently        await promise.all(promises);        // commit the transaction        await trx.commit();        console.log('all records updated successfully.');    } catch (error) {        // rollback the transaction in case of error        await trx.rollback();        console.error('update failed:', error);    }};

解释

事务初始化:使用db.transaction()启动事务,这确保了所有后续查询都在该事务内执行。

批量更新:构建每个更新查询并将其添加到承诺数组中。此方法允许同时执行多个更新。

执行查询:promise.all(promises) 用于同时执行所有更新查询。这种方法确保所有更新都并行发送到数据库。

提交或回滚:如果所有查询都成功,则使用 trx.commit() 提交事务。如果任何查询失败,事务将使用 trx.rollback() 回滚,确保不会应用部分更新。

在事务内使用批量更新和单个查询提供了管理大型数据集的可靠方法。它通过原子事务确保数据完整性,并提供对并发操作的更好控制。当具有多个条件的单一更新对于非常大的数据集可能效率不高时,此方法特别有用。

3.使用onconflict进行upsert(插入或更新)

当您处理可能需要插入或更新的数据(取决于数据库中是否存在)时,“upsert”操作是理想的解决方案。这种方法允许您在单个简化的操作中处理两种情况:插入新记录或更新现有记录。当您想要保持数据一致性而无需编写单独的逻辑来检查记录是否存在时,它特别有用。

为什么使用这种方法:

简单性: upsert 使您能够将插入和更新操作合并到单个查询中,从而简化代码并减少额外检查的需要。

效率: 这种方法比执行单独的插入和更新操作更高效,因为它最大限度地减少了数据库往返并自动处理冲突。

冲突处理: onconflict 子句让您可以通过更新相关字段来指定如何处理冲突,例如当具有唯一约束的记录已经存在时。

const productData = [  {    product_id: 1,    store_id: 101,    product_name: 'Product A',    price: 10.99,    category: 'Electronics',  },  {    product_id: 2,    store_id: 102,    product_name: 'Product B',    price: 12.99,    category: 'Books',  },  {    product_id: 3,    store_id: 103,    product_name: 'Product C',    price: 9.99,    category: 'Home',  },  {    product_id: 4,    store_id: 104,    product_name: 'Product D',    price: 15.49,    category: 'Garden',  },];await knex('products')  .insert(productData)  .onConflict(['product_id', 'store_id'])  .merge({    product_name: knex.raw('EXCLUDED.product_name'),    price: knex.raw('EXCLUDED.price'),    category: knex.raw('EXCLUDED.category'),  });

解释

数据定义:我们定义productdata,它是一个对象数组,代表我们想要插入或更新的产品记录。每个对象包含一个product_id、store_id、product_name、价格和类别。

插入或更新:knex(‘products’).insert(productdata) 函数尝试将productdata 数组中的每条记录插入到products 表中。

处理冲突:onconflict([‘product_id’, ‘store_id’]) 子句指定,如果product_id 和 store_id 的组合发生冲突,则执行下一步。

合并(冲突时更新):当检测到冲突时,merge({…}) 方法会使用productdata 中的新产品名称、价格和类别值更新现有记录。 knex.raw(‘excluded.column_name’) 语法用于引用已插入的值,允许数据库使用这些值更新现有记录。

为了使 onconflict 子句在 upsert 操作中正确运行,所涉及的列必须是唯一约束的一部分。它的工作原理如下:

单个唯一列:如果您在 onconflict 子句中使用单个列,则该列在整个表中必须是唯一的。这种唯一性保证了数据库可以根据该列准确检测一条记录是否已经存在。多列:当onconflict子句中使用多列时,这些列的组合必须是唯一的。这种唯一性是通过唯一索引或约束来强制执行的,这确保了这些列的组合值在整个表中是唯一的。

索引和约束:
索引: 一列或多列上的唯一索引允许数据库有效地检查值的唯一性。当您定义唯一索引时,数据库将使用它来快速验证指定列中的值是否已存在。这使得 onconflict 子句能够准确地检测和处理冲突。

约束: 唯一约束可确保一列或多列中的值必须是唯一的。此约束对于 onconflict 子句的工作至关重要,因为它强制执行防止重复值的规则,并允许数据库根据这些列检测冲突。

与具有多个条件的单一更新方法类似,更新插入操作不需要事务。由于它涉及插入或更新记录的单个查询,因此它可以高效运行,而无需管理事务的额外开销。

结论

每种技术都具有独特的优势,从简化代码和减少数据库交互到确保数据完整性和有效处理冲突。通过选择最适合您的用例的方法,您可以在应用程序中实现更高效、更可靠的更新。

了解这些方法可以让您根据特定需求定制数据库操作,从而提高性能和可维护性。无论您是处理批量更新还是复杂的数据管理任务,选择正确的策略对于优化工作流程并在开发项目中取得更好的成果至关重要。

以上就是使用 Knexjs 批量更新记录的 QL 方法的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/899273.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月28日 19:21:49
下一篇 2025年11月28日 19:25:54

相关推荐

  • chatgpt,bonk和$ apork:导航模因硬币狂潮

    通过chatgpt insights探索模因硬币的动态世界,重点是bonk的挑战和$ apork的兴起,作为令人信服的替代方案。在模因硬币市场中发现关键趋势和投资机会。 Meme硬币市场是一个疯狂的旅程,最近在Bonk和The Remering $ apork等硬币周围嗡嗡作响。让我们深入了解正在发…

    2025年12月8日
    000
  • ruvi ai:下一个solana?投资回报率预测和加密比较

    ruvi ai是否将成为加密货币领域的下一个重大事件?专家预测其投资回报率可能极高,并将其与早期solana进行类比,探讨其潜在及实际应用场景。 围绕Ruvi AI(Ruvi)的讨论热度持续上升,业内专家私下将其与Solana(SOL)发展初期相提并论。据称该项目有望带来高达13,100%的投资回报…

    2025年12月8日
    000
  • 币安在哪里下载? 币安如何下载

    目录 官方下载渠道安卓手机下载方法iOS(iPhone/iPad)下载方法如何在币安App注册账户?币安app注册方法币安安全设置如何注册海外appleid海外Apple ID的用处使用海外ID注意事项​注册需准备材料:注册台湾或中国台湾苹果账号教程 通过修改appleid地区的方法 币安(bina…

    2025年12月8日 好文分享
    000
  • AISHIB币去哪里买?AISHIB币交易所有哪些?

    AISHIB币,作为加密货币领域的新兴力量,其购买渠道和交易平台的选择,是每一位潜在投资者必须了解的关键信息。 想要踏入AISHIB币的投资世界,了解“AISHIB币去哪里买?AISHIB币交易所有哪些?”这两个核心问题至关重要。毕竟,选择安全可靠的交易平台,是保障资产安全的第一步。 目前,AISH…

    2025年12月8日
    000
  • LERN360:AI和区块链革新教育,以及Solana的成功

    探索lern360如何借助ai与区块链推动普惠教育,aix平台在数据主权方面的突破,以及solana作为顶级区块链的崛起之路。 LERN360:AI与区块链重塑教育,Solana助力实现飞跃 LERN360正处于人工智能与区块链技术交汇点的前沿,正引领着教育民主化的浪潮。与此同时,AIX平台正在为数…

    2025年12月8日
    000
  • 2025年6月购买的加密货币:码头及以后

    探索2025年6月值得关注的顶级加密货币,包括qubetics、xrp、algorand等,以及其他具备大幅增长潜力的项目。 2025年6月值得购买的加密货币:从Qubetics开始展望 驾驭加密货币市场就像预测变幻莫测的天气,而2025年6月可能是一个充满机遇的时间点。让我们来看看一些值得关注的数…

    2025年12月8日
    000
  • 比特币价格预测,2025年6月:乘坐流动性浪潮?

    比特币能否在2025年6月维持上涨势头?我们的分析深入探讨了包括流动性及宏观经济趋势在内的关键因素,揭示btc的未来走向。 比特币价格预测:2025年6月,能否乘风破浪? 比特币正徘徊在历史高点附近,但它能在2025年6月持续走高吗?我们解析影响BTC下一步动作的主要因素,从流动性到宏观经济趋势。准…

    2025年12月8日
    000
  • Angl令牌在Uniswap上发布:AI的新时代?

    angl inc.正式在uniswap平台上推出其angl代币,旨在重塑人工智能经济格局。本文将探讨angl的前景及其对去中心化ai发展的影响。 加密社区正因Angl的上线而沸腾。这是一种实用型代币,致力于推动去中心化人工智能经济的发展。Angl Inc.已在Uniswap上架该代币,象征着迈向用户…

    2025年12月8日
    000
  • Neo Pepe,Chainlink和Stellar:Crypto的2025种游戏改变者?

    Neo Pepe、Chainlink与Stellar:2025年重塑全球金融的三大加密力量 随着加密行业的持续演进,一些关键项目正站在变革的最前沿。neo pepe coin、chainlink和stellar不仅在技术层面带来了突破,更在defi、跨境支付以及社区驱动模式中掀起波澜。让我们一探究竟…

    2025年12月8日
    000
  • 2025币圈交易平台有哪些 2025币圈数字货币交易平台最新排名一览

    2025年数字货币交易平台排名前十依次为币安、OKX、火币、Coinbase、Kraken、Bitfinex、KuCoin、Gemini、Binance US和Crypto.com。币安以丰富的交易对、强大的流动性和多重安全措施保持领先;OKX凭借低手续费和区块链生态系统稳居前列;火币以合规性及亚洲…

    2025年12月8日
    000
  • 怎么下载欧意交易所 欧意使用教程

    在%ignore_a_1%日益普及的今天,选择一个安全、便捷、功能强大的交易平台至关重要。欧意交易所(okx)作为全球领先的数字资产交易平台之一,凭借其丰富的交易品种、强大的安全保障和流畅的用户体验,吸引了众多投资者的目光。本教程将详细介绍如何下载欧意交易所,并提供全面的使用指南,帮助您快速上手,安…

    2025年12月8日
    000
  • gate.io官网最新地址 gate.io网页版最新登录入口

    Gate.io 是一个安全可靠的数字资产交易平台,用户应通过官方地址访问以避免安全风险。为确保账户安全,请使用安全网络环境、启用双重验证、定期更改密码、警惕钓鱼网站和诈骗信息,并核对官方邮件地址。Gate.io 提供丰富的交易品种、合约交易、理财借贷、Startup 首发平台、自主研发的 GateC…

    2025年12月8日
    000
  • 三大交易所排名(全面分析版)

    加密货币交易所中,币安、Coinbase 和 Kraken 是全球三大主流平台,各自适合不同用户。1. 币安交易量最大,提供现货、期货、期权等多种交易方式,手续费低且支持币种多,但界面复杂,适合进阶交易者;2. Coinbase 界面简洁,支持法币直接购买主流币种并提供教育内容,适合初学者和美国用户…

    2025年12月8日
    000
  • 安币交易所app最新版官方下载地址 ba交易所苹果版下载方法

    目录 常用几种下载方式1. 官方网站下载2. 应用商店下载3. 版本与安全验证4. 安装后操作如何在币安App注册账户?币安app注册方法币安安全设置如何注册海外appleid海外Apple ID的用处使用海外ID注意事项​注册需准备材料:注册台湾或中国台湾苹果账号教程 通过修改appleid地区的…

    2025年12月8日 好文分享
    000
  • USDT泰达币是什么?为何有脱钩风险?2025年USDT 泰达币完整介绍

    USDT泰达币是什么?2025年USDT 泰达币完整介绍 USDT 泰达币基本信息 中文名称:泰达币 英文名称:Tether USDt 常用缩写: USDT 官网:https://tether.to/  创始人:USDT 最早于2014 年6 月由Brock Pierce, Craig Sellar…

    2025年12月8日
    000
  • 2025年好用的数字货币交易所推荐 十大数字货币交易app最新排名

    2025年十大数字货币交易所排名揭晓,Binance、OKX、Huobi稳居前三。1. Binance为全球最大交易所,支持1000+交易对,手续费低且产品丰富;2. OKX以衍生品交易著称,Web3生态完善,具备闪电交易引擎和隐私保护技术;3. Huobi提供机构级API,支持火币生态链,合规牌照…

    2025年12月8日 好文分享
    000
  • 比特币,经济和资本基金会:PNG观点

    探索比特币作为经济自由基石的可能性,特别是在巴布亚新几内亚(png)等地区,以及其与本地项目的协同效应。 比特币、经济与资本基金会:PNG视角 比特币在全球范围内掀起波澜,它对经济体系的潜在变革尤其在像巴布亚新几内亚(PNG)这样的地区受到关注。比特币是否有可能成为新时代经济结构的基础? 比特币:数…

    2025年12月8日
    000
  • 福特股票,卡迪诺区块链和法律数据:意外的交叉点?

    福特与iagon及cloudcourt合作,在cardano区块链上测试法律数据管理,与此同时,福特股价保持平稳。技术正在改变法律行业的未来吗? 福特股票、Cardano区块链与法律数据:一个不寻常的交汇? 福特、卡尔达诺(Cardano)、法律数据——这些词组合在一起似乎有些奇怪,但它们背后隐藏着…

    2025年12月8日
    000
  • 预货币,比特币和国库策略:一个新时代?

    探索psg的长期加密战略与eyenovia的创新代币炒作,财政部的but coin研究揭示了数字资产整合的新趋势和深层洞察。 预货币、比特币与国库战略:一个新时代? 传统金融体系与数字资产之间的融合正在加速升温!越来越多企业将比特币及其他加密货币纳入其国库管理策略之中。让我们深入探讨围绕Precoi…

    2025年12月8日
    000
  • 虚拟价格潜水:Block3是AI游戏救主吗?

    virtuals协议的虚拟代币价格暴跌,引发对ai游戏未来走向的质疑。block3凭借其人工智能驱动的游戏开发平台,是否将成为行业的新希望? 虚拟资产跳水:Block3能否扛起AI游戏大旗? Virtuals协议的虚拟代币正经历剧烈波动,而Block3是否能为AI游戏领域注入新活力?我们来一探究竟。…

    2025年12月8日
    000

发表回复

登录后才能评论
关注微信