Python多进程中如何使用锁保证共享变量的原子操作?

python多进程中如何使用锁保证共享变量的原子操作?

分享多进程操作共享变量的原子操作

python 多进程处理中,协调多个进程同时访问共享变量要保持原子性十分关键。为了解决这个问题,我们可以使用 concurrent.futures 模块中的 lock 对象。

1. 创建 manager 和 lock

我们首先创建一个 manager 对象,它允许多个进程共享数据。然后,我们创建一个 lock 对象,它将用于保护对共享变量的访问。

立即学习“Python免费学习笔记(深入)”;

2. 使用锁进行原子操作

在进程中操作共享变量时,我们可以使用 with 语句将 lock 作为上下文管理器。这将确保每次共享变量被更改时只允许一个进程访问它,从而保持原子操作。

修正后的代码示例:

from concurrent.futures import ProcessPoolExecutorimport ctypesfrom multiprocessing import Manager, Lockimport os# 创建 Manager 和 Lockmanager = Manager()m = manager.Value(ctypes.c_int, 0)lock = manager.Lock()def calc_number(x: int, y: int, _m, total_tasks: int, _lock):    # 模拟耗时任务函数    # 模拟耗时计算    res = x ** y        # 用锁来保证原子操作    with _lock:        _m.value += 1        current_value = _m.value        # 当总任务数量和_m.value相等的时候, 通知第三方任务全部做完了    if current_value == total_tasks:        print(True)        print(f"m_value: {current_value}, p_id: {os.getpid()}, res: {res}")def main():    # 任务参数    t1 = (100, 200, 300, 400, 500, 600, 700, 800)    t2 = (80, 70, 60, 50, 40, 30, 20, 10)    len_t = len(t1)    # 多进程执行任务    with ProcessPoolExecutor(max_workers=len_t) as executor:        for x, y in zip(t1, t2):            executor.submit(calc_number, x, y, m, len_t, lock)if __name__ == "__main__":    main()

这将确保多个进程每次只修改共享变量 m_value,从而实现原子操作。

以上就是Python多进程中如何使用锁保证共享变量的原子操作?的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1353795.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月13日 17:59:14
下一篇 2025年12月11日 09:48:17

相关推荐

  • 多进程编程中,如何保证共享变量的原子操作?

    多进程共享可操作变量的原子操作保证 问题提出 在涉及多进程共享可操作变量时,确保原子性操作至关重要,尤其是在对该变量进行增减或比较等操作时。 原因分析 在多进程场景下,多个进程会并发访问共享变量,如果不采取保护措施,可能会出现竞态条件,导致意外结果。例如,多个进程读取到相同的值,然后分别执行增减操作…

    2025年12月13日
    000
  • 如何用字典数据初始化自定义Python数据类型?

    自定义 python 字典数据类型 在 python 中,有时需要为方法定制数据类型。dataclass 装饰器提供了简洁的方法,但它要求传入实例化的对象。如果你希望传入字典形式的数据,可以使用以下几种简洁的方法: 方法 1:使用字典初始化 你可以使用 ** 运算符直接将字典传递给 dataclas…

    2025年12月13日
    000
  • 如何使用SQLAlchemy高效地添加、修改和删除数据库表字段?

    对 sqlalchemy 表字段的操作:添加、修改、删除 在 python 中,sqlalchemy 库用于管理关系型数据库。它提供了方便的 api 来创建和操作表。但是,对于修改现有表的字段,sqlalchemy 自身并没有提供直接的方法。 添加字段 对于添加新字段,可以使用 migrations…

    2025年12月13日
    000
  • 如何用简洁方法自定义Python字典数据类型?

    想要自定义字典数据类型,考虑以下简洁方法: 利用星号(*)语法,可以直接将字典数据传递给 @dataclass 装饰器: @dataclassclass abc: a: inttest([abc(**{‘a’: 1}), abc(**{‘a’: 2})]) 实现 from_dict 类方法,通过字典…

    2025年12月13日
    000
  • Python数据类中如何自定义字典类型?

    自定义字典类型 python 数据类 在 python 中,要自定义字典数据类型,有几种简单的方法。 通过关键字参数传递字典 这可能是最简单的方法,只需将字典作为关键字参数传递给数据类,如下所示: 立即学习“Python免费学习笔记(深入)”; @dataclassclass abc: a: int…

    2025年12月13日
    000
  • Python SQLAlchemy中如何添加、修改和删除数据库表字段?

    sqlalchemy 表字段操作:添加、修改、删除 在 python 中使用 sqlalchemy 进行数据库操作时,对于表字段的管理,存在一些常见问题。本文将探讨如何添加、修改和删除表字段,帮助您理解 sqlalchemy 在此方面的功能和限制。 添加字段 sqlalchemy 没有直接提供添加表…

    2025年12月13日
    000
  • Python浮点运算精度失准:为什么23300*0.7结果并非16310?

    Python 浮点运算精度问题:23300*0.7 不等于 16309.999999999998? 在 Python 中,浮点运算可能会存在精度问题,尤其是在涉及乘法和除法时。例如,计算 23300*0.7 的结果为 16309.999999999998,而不是预期的 16310。 原因 这种精度问…

    2025年12月13日
    000
  • 如何使用SQLAlchemy高效管理数据库表字段?

    SQLAlchemy 对表字段的管理 SQLAlchemy 是一款功能强大的 ORM 工具,用于 Python 中与数据库的交互。虽然它提供了直观的表创建功能,但修改表结构的 API 可能会让人迷惑。本文将探讨如何在 SQLAlchemy 中对表字段进行添加、修改和删除操作。 添加字段 除了编写原生…

    2025年12月13日
    000
  • Python浮点运算精度低,如何避免金额计算错误?

    python 浮点运算精度问题 浮点运算的精度可能在某些情况下导致奇怪的结果。例如: >>> 23300 * 0.716309.999999999998 即使我们用精确的数字进行了运算,结果也不是我们预期的 16310。 解决方法 立即学习“Python免费学习笔记(深入)”; 这…

    2025年12月13日
    000
  • Python浮点数计算陷阱:23300 * 0.7 为什么结果不是16310?

    python 中神秘的数字:23300 * 0.7 为何不等于 16310 你是否遇到过这样一个奇怪的现象:在 python 中,计算 23300 * 0.7 时,结果竟然是 16309.999999999998,而不是预期的 16310? 问题解释 出现这种现象的原因在于浮点数的有限精度。在计算机…

    2025年12月13日
    000
  • Python with语句:return语句后文件会自动关闭吗?

    python 中的 with 语句:f 文件是否被关闭? 在 python 中,使用 with 语句可以简化对文件的操作。不过当遇到 return 语句时,可能会让人疑惑文件是否被正确关闭。 让我们来看看下面的代码: def func(): with open(self.yaml_path,’w’)…

    2025年12月13日
    000
  • pytest单元测试如何显示被测程序的标准输出?

    如何让 pytest 显示被测试程序的标准输出? 在编写单元测试时,有时需要查看被测试程序的标准输出。默认情况下,pytest 会屏蔽这些输出以提高运行速度。 以以下代码为例,它使用 logger.debug 和 print 打印日志: def test_make_keyword_task(…)…

    2025年12月13日
    000
  • pytest如何显示被测程序的标准输出?

    如何在 pytest 中显示被测程序的标准输出? 在使用 pytest 测试程序时,你可能会遇到无法在测试中查看被测程序标准输出的情况。这是因为 pytest 默认会屏蔽这些输出。 解决方案:使用 -s 选项 要让 pytest 显示被测程序的标准输出,可以在 pytest 命令后添加 -s 选项。…

    2025年12月13日
    000
  • Python with语句:第一个return语句后文件是否自动关闭?

    f 文件是否在第一个 return 中关闭了? 这段 Python 代码实现了一个函数,该函数在特定的条件下执行以下操作: 使用 with 语句打开一个文件 f。加载并保存文件的 yaml 数据到 info_save 变量中。检查 xx 条件,如果为真,则返回。 需要确定的是,在第一个 return…

    2025年12月13日
    000
  • pytest 如何显示被测程序的标准输出?

    如何在 pytest 中显示被测试程序的标准输出? 在使用 pytest 进行测试时,有时需要看到被测试程序的标准输出,如打印语句。但默认情况下,pytest 会屏蔽这些输出。 解决方法: 只需在 pytest 命令中添加 -s 参数即可: python -m pytest -s common -s…

    2025年12月13日
    000
  • Pytest测试中如何避免屏蔽标准输出?

    避免 pytest 屏蔽标准输出的方法 在编写 pytest 测试用例时,有时希望打印被测试程序的标准输出信息,但默认情况下,pytest 会屏蔽这些信息。 解决方案 要在 pytest 中显示标准输出,请在命令行中添加 -s 参数。当使用 python -m pytest 运行测试时,-s 参数指…

    2025年12月13日
    000
  • Tornado项目Nacos服务注册:健康实例数波动的原因是什么?

    Python 项目向 Nacos 注册服务:健康实例数不稳定原因 一个项目使用了 Tornado 框架,向 2.0 版本的 Nacos 注册服务,并每隔 5 秒发送心跳。虽然注册服务和发送心跳都没有问题,但在 Nacos 的管理页面上,实例数和健康实例数却一直在变化,不稳定。 经过调查,发现以下原因…

    2025年12月13日
    000
  • Python如何批量修改Markdown文档中图片的地址?

    如何使用 python 批量更改 markdown 文档中的图片地址 在 markdown 文档中,图片通常通过以下语法引用: ![图片描述](图片路径) 其中,图片描述和图片路径的内容可能包含汉字。 代码实现 立即学习“Python免费学习笔记(深入)”; 为了处理多个 markdown 文档中的…

    2025年12月13日
    000
  • 如何用Python批量修改Markdown文档中的图片地址?

    批量处理 markdown 文档中的图片地址 对于大量 markdown 文档中指向同一个文件夹的图片,手动更改图片地址是一项繁琐的任务。使用 python,我们可以自动完成这一过程,从而提高效率。 这里有一个 python 函数可以将存储在不同文件夹中的图片链接更新为 markdown 文档中: …

    2025年12月13日
    000
  • Python下划线属性:约定还是强制?

    Python 下划线属性的本质 在 Python 类中,属性名称以单下划线开头(如 _A)表示约定俗成的私有属性,而以双下划线开头(如 __B)的属性通常被认为是私有属性。 但是,你发现可以访问 _A,却无法访问 __B,并报错 “Unexpected System Error: &#8…

    2025年12月13日
    000

发表回复

登录后才能评论
关注微信