使用Pandas DataFrame高效执行多列算术运算

使用pandas dataframe高效执行多列算术运算

本文旨在探讨在Pandas DataFrame中对多列进行加减法运算的两种高效方法。我们将介绍如何利用`DataFrame.eval()`进行多行表达式计算,以及如何通过链式调用`add()`和`sub()`方法实现向量化操作。通过具体示例,读者将掌握在Python环境中简洁、高效地处理DataFrame列间复杂算术逻辑的技巧,从而提升数据处理效率和代码可读性

在数据分析和处理中,我们经常需要对Pandas DataFrame中的多个列执行一系列算术运算。当这些运算模式相似且涉及多个目标列时,寻找一种简洁高效的方法至关重要。本教程将详细介绍两种实现这一目标的策略:使用DataFrame.eval()进行多行表达式求值,以及利用Pandas的向量化方法add()和sub()。

1. 数据准备

首先,我们创建一个示例DataFrame,作为后续操作的基础。

import pandas as pddata = {  "A": [42, 38, 39, 23],  "B": [45, 30, 15, 65],  "C": [60, 50, 25, 43],  "D": [12, 70, 35, 76],  "E": [87, 90, 45, 43],  "F": [40, 48, 55, 76],  "G": [58, 42, 85, 10],}df = pd.DataFrame(data)print("原始DataFrame:")print(df)

我们的目标是针对列 C, D, E,执行相同的运算逻辑:目标列 = 目标列 – B + A。

2. 方法一:使用 DataFrame.eval() 进行多行表达式求值

DataFrame.eval() 方法允许用户以字符串形式传递表达式,Pandas 会在 DataFrame 的上下文中对这些表达式进行求值。对于需要对多个列执行相同或相似操作的场景,eval() 特别有用,因为它支持多行表达式,从而提高了代码的清晰度。

df_eval = df.copy() # 创建副本,避免修改原始dfdf_eval = df_eval.eval('''C = C - B + AD = D - B + AE = E - B + A''')print("n使用 eval() 后的DataFrame:")print(df_eval)

优点:

可读性强: 表达式直接反映了数学逻辑,易于理解。简洁: 可以在一个方法调用中处理多个列的更新。性能: 对于大型DataFrame,eval() 通常比纯Python循环更快,因为它在C层级进行优化。

注意事项:

表达式字符串需要严格遵循Python语法,且只能引用DataFrame中的列名。eval() 默认会修改DataFrame的副本并返回,如果需要原地修改,可以考虑inplace=True参数(但通常不推荐,因为会使链式操作复杂化)。

3. 方法二:使用向量化操作 add() 和 sub()

Pandas 提供了高度优化的向量化方法,如 add()、sub()、mul()、div() 等,它们能够对整个 Series 或 DataFrame 执行元素级的运算,而无需显式循环。对于本例中的模式 目标列 = 目标列 – B + A,我们可以将其分解为 目标列 = 目标列 + (A – B)。

df_vec = df.copy() # 创建副本# 首先计算 (A - B) 的结果,这是一个 Seriesintermediate_result = df_vec['A'].sub(df_vec['B'])# 然后将这个 Series 加到目标列 C, D, E 上# 注意:当将一个 Series 加到一个 DataFrame 的子集时,# Pandas 会根据索引对齐,并广播 Series 的值到每一行。# 明确指定 axis=0 确保按行进行操作(即 Series 的每个值对应 DataFrame 的一行)df_vec[['C', 'D', 'E']] = df_vec[['C', 'D', 'E']].add(intermediate_result, axis=0)print("n使用向量化操作后的DataFrame:")print(df_vec)

优点:

极致性能: Pandas 的核心优势之一,这些方法在底层C/Cython实现,速度非常快,尤其适用于大型数据集。Pandas 惯用法: 这种链式调用和向量化思维是Pandas数据处理的推荐方式。灵活性: 可以通过 axis 参数控制操作的方向(行或列)。

注意事项:

理解 axis 参数对于正确执行操作至关重要。axis=0 表示按行操作(或沿索引方向),axis=1 表示按列操作(或沿列方向)。当操作涉及不同维度的数据(如 DataFrame 和 Series)时,Pandas 会尝试进行对齐和广播。确保这种行为符合预期。

4. 结果验证

无论是使用 eval() 还是向量化方法,最终的输出结果都应该是一致的:

    A   B   C   D   E   F   G0  42  45  57   9  84  40  581  38  30  58  78  98  48  422  39  15  49  59  69  55  853  23  65   1  34   1  76  10

可以看到,列 C, D, E 都按照 目标列 = 目标列 – B + A 的逻辑进行了更新。

5. 总结与最佳实践

在Pandas DataFrame中对多列执行批量算术运算时,DataFrame.eval() 和链式向量化方法都是强大的工具

选择 eval() 的场景:当表达式逻辑复杂,且涉及多个列的更新时,eval() 的多行字符串形式能提供更好的可读性。当表达式可以直接引用DataFrame中的列名,并且表达式本身比较长或包含多个中间步骤时。选择向量化操作的场景:当操作模式相对简单,可以分解为一系列 add(), sub(), mul() 等方法链式调用时。追求极致性能,并且熟悉Pandas的向量化操作原理时。当需要更细粒度地控制对齐和广播行为时。

在实际开发中,通常会根据具体情况和团队的代码风格偏好来选择。对于大多数日常任务,两种方法都能提供高效且可读的解决方案。建议优先考虑向量化操作,因为它更符合Pandas的设计哲学,并且在性能上通常表现更优。然而,对于涉及大量临时变量或复杂条件逻辑的表达式,eval() 的简洁性可能更具吸引力。

以上就是使用Pandas DataFrame高效执行多列算术运算的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1382470.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 23:56:39
下一篇 2025年12月14日 23:56:57

相关推荐

  • 如何解决本地图片在使用 mask JS 库时出现的跨域错误?

    如何跨越localhost使用本地图片? 问题: 在本地使用mask js库时,引入本地图片会报跨域错误。 解决方案: 要解决此问题,需要使用本地服务器启动文件,以http或https协议访问图片,而不是使用file://协议。例如: python -m http.server 8000 然后,可以…

    2025年12月24日
    200
  • 使用 Mask 导入本地图片时,如何解决跨域问题?

    跨域疑难:如何解决 mask 引入本地图片产生的跨域问题? 在使用 mask 导入本地图片时,你可能会遇到令人沮丧的跨域错误。为什么会出现跨域问题呢?让我们深入了解一下: mask 框架假设你以 http(s) 协议加载你的 html 文件,而当使用 file:// 协议打开本地文件时,就会产生跨域…

    2025年12月24日
    200
  • 什么是功能类优先的 CSS 框架?

    理解功能类优先 tailwind css 是一款功能类优先的 css 框架,用户可以通过组合功能类轻松构建设计。为了理解功能类优先,我们首先要区分语义类和功能类这两种 css 类名命名方式。 语义类 以前比较常见的 css 命名方式是根据页面中模块的功能来命名。例如: 立即学习“前端免费学习笔记(深…

    2025年12月24日
    000
  • 正则表达式在文本验证中的常见问题有哪些?

    正则表达式助力文本输入验证 在文本输入框的验证中,经常遇到需要限定输入内容的情况。例如,输入框只能输入整数,第一位可以为负号。对于不会使用正则表达式的人来说,这可能是个难题。下面我们将提供三种正则表达式,分别满足不同的验证要求。 1. 可选负号,任意数量数字 如果输入框中允许第一位为负号,后面可输入…

    2025年12月24日
    000
  • SCSS – 增强您的 CSS 工作流程

    在本文中,我们将探索 scss (sassy css),这是一个 css 预处理器,它通过允许变量、嵌套规则、mixins、函数等来扩展 css 的功能。 scss 使 css 的编写和维护变得更加容易,尤其是对于大型项目。 1.什么是scss? scss 是 sass(syntropically …

    2025年12月24日
    000
  • 为什么多年的经验让我选择全栈而不是平均栈

    在全栈和平均栈开发方面工作了 6 年多,我可以告诉您,虽然这两种方法都是流行且有效的方法,但它们满足不同的需求,并且有自己的优点和缺点。这两个堆栈都可以帮助您创建 Web 应用程序,但它们的实现方式却截然不同。如果您在两者之间难以选择,我希望我在两者之间的经验能给您一些有用的见解。 在这篇文章中,我…

    2025年12月24日
    000
  • 姜戈顺风

    本教程演示如何在新项目中从头开始配置 django 和 tailwindcss。 django 设置 创建一个名为 .venv 的新虚拟环境。 # windows$ python -m venv .venv$ .venvscriptsactivate.ps1(.venv) $# macos/linu…

    2025年12月24日
    000
  • css3选择器优化技巧

    CSS3 选择器优化技巧可提升网页性能:减少选择器层级,提高浏览器解析效率。避免通配符选择器,减少性能损耗。优先使用 ID 选择器,快速定位目标元素。用类选择器代替标签选择器,精确匹配。使用属性选择器,增强匹配精度。巧用伪类和伪元素,提升性能。组合多个选择器,简化代码。利用 CSS 预处理器,增强代…

    2025年12月24日
    300
  • 花 $o 学习这些编程语言或免费

    → Python → JavaScript → Java → C# → 红宝石 → 斯威夫特 → 科特林 → C++ → PHP → 出发 → R → 打字稿 []https://x.com/e_opore/status/1811567830594388315?t=_j4nncuiy2wfbm7ic…

    2025年12月24日
    000
  • css代码规范有哪些

    CSS 代码规范对于保持一致性、可读性和可维护性至关重要,常见的规范包括:命名约定:使用小写字母和短划线,命名特定且描述性。缩进和对齐:按特定规则缩进、对齐选择器、声明和值。属性和值顺序:遵循特定顺序排列属性和值。注释:解释复杂代码,并使用正确的语法。分号:每个声明后添加分号。大括号:左大括号前换行…

    2025年12月24日
    200
  • 响应式HTML5按钮适配不同屏幕方法【方法】

    实现响应式HTML5按钮需五种方法:一、CSS媒体查询按max-width断点调整样式;二、用rem/vw等相对单位替代px;三、Flexbox控制容器与按钮伸缩;四、CSS变量配合requestAnimationFrame优化的JS动态适配;五、Tailwind等框架的响应式工具类。 如果您希望H…

    2025年12月23日
    000
  • html5怎么导视频_html5用video标签导出或Canvas转DataURL获视频【导出】

    HTML5无法直接导出video标签内容,需借助Canvas捕获帧并结合MediaRecorder API、FFmpeg.wasm或服务端协同实现。MediaRecorder适用于WebM格式前端录制;FFmpeg.wasm支持MP4等格式及精细编码控制;服务端方案适合高负载场景。 如果您希望在网页…

    2025年12月23日
    300
  • 如何查看编写的html_查看自己编写的HTML文件效果【效果】

    要查看HTML文件的浏览器渲染效果,需确保文件以.html为扩展名保存、用浏览器直接打开、利用开发者工具调试、必要时启用本地HTTP服务器、或使用编辑器实时预览插件。 如果您编写了HTML代码,但无法直观看到其在浏览器中的实际渲染效果,则可能是由于文件未正确保存、未使用浏览器打开或文件扩展名设置错误…

    2025年12月23日
    400
  • node.js怎么运行html_node.js运行html步骤【指南】

    答案是使用Node.js内置http模块、Express框架或第三方工具serve可快速搭建服务器预览HTML文件。首先通过http模块创建服务器并读取index.html返回响应;其次用Express初始化项目并配置静态文件服务;最后利用serve工具全局安装后一键启动服务器,三种方式均在浏览器访…

    2025年12月23日
    300
  • html5游戏怎么修改_HT5改JS逻辑或资源文件调整游戏玩法效果【修改】

    需直接编辑核心JavaScript代码或替换图片、音频等资源文件;先用浏览器开发者工具的Sources面板定位含game、main等关键词的.js文件,再搜索score++、if (health等逻辑片段进行修改。 如果您下载了某个HTML5游戏的本地文件,希望调整其玩法逻辑或替换资源以改变视觉效果…

    2025年12月23日
    000
  • html5怎么重叠图片_html5用position:absolute或z-index让图片重叠【重叠】

    在HTML5中实现图片重叠需结合CSS定位与层叠控制:一、用position:absolute+top/left精确定位,父容器设position:relative;二、用z-index设定堆叠顺序(需已定位);三、用transform:translate()实现无文档流干扰的偏移重叠;四、用CSS…

    2025年12月23日
    200
  • html5怎么打包运行_HT5用Webpack或Gulp打包后浏览器打开运行【打包】

    应通过 HTTP 服务运行打包后的 HTML5 页面,而非双击打开:一、Webpack 配 webpack-dev-server 启动本地服务;二、Gulp 配 BrowserSync 提供实时重载;三、用 Python/Node.js 轻量 HTTP 工具托管 dist 目录;四、仅当必须双击运行…

    2025年12月23日
    000
  • html5文件运行不出来怎么回事_析html5文件运行失败原因【解析】

    首先检查文件扩展名和编码格式,确保为.html且使用UTF-8编码;接着验证HTML5结构完整性,包含及正确闭合的标签;然后排查外部资源路径是否正确,利用开发者工具查看404错误;排除浏览器兼容性问题,优先在现代浏览器中测试并避免未广泛支持的API;检查JavaScript语法错误与执行顺序,确保脚…

    2025年12月23日
    000
  • html5如何建立站点_HTML5站点建立步骤与网站搭建技巧【指南】

    HTML5网站搭建需五步:一、建my-website目录及css/js/images子目录,含index.html;二、写标准HTML5骨架,含DOCTYPE、lang、meta、语义化标签;三、外链CSS与defer/async脚本;四、用http-server启本地服务;五、用email/num…

    2025年12月23日
    000
  • html5怎么插入文档_HT5用object或iframe嵌入PDF/Word文档显示【插入】

    可在HTML5中用iframe或object标签嵌入PDF,需设宽高及可访问路径;Word文档需借OneDrive等第三方服务代理渲染;须处理跨域限制并提供下载降级方案。 如果您希望在HTML5页面中嵌入PDF或Word文档并直接显示,可以使用或标签实现。以下是几种可行的嵌入方法: 一、使用ifra…

    2025年12月23日
    200

发表回复

登录后才能评论
关注微信