Python中如何计算数据累积和?cumsum函数详解

python中计算数据累积和,最常用的方法是使用numpy的cumsum函数或pandas的cumsum方法。1. numpy的cumsum支持多维数组操作,默认展平数组进行累加,也可通过axis参数指定轴向,如axis=0按列累加、axis=1按行累加;2. pandas的cumsum适用于series和dataframe,保留索引与列名,便于表格数据分析,并支持skipna参数处理缺失值及groupby结合实现分组累积求和;3. 性能方面,numpy和pandas的cumsum基于c语言实现,高效稳定,是首选方案,仅在特定简单场景下可考虑itertools.accumulate等替代方式。

Python中如何计算数据累积和?cumsum函数详解

Python中计算数据累积和,最常用也最便捷的方式就是利用NumPy库的cumsum函数,或者在处理表格数据时,使用Pandas库的DataFrameSeries对象自带的cumsum方法。它们能高效地对数组或序列中的元素进行逐个累加,并返回一个新数组或序列,其中每个元素是原数组从开头到当前位置所有元素的总和。

Python中如何计算数据累积和?cumsum函数详解

解决方案

在Python中,要实现数据的累积和计算,NumPy和Pandas库提供了极其方便且高效的cumsum函数。这几乎是我在数据分析工作中处理序列累加时,不假思索就会选择的方法。

使用NumPy的cumsum

立即学习“Python免费学习笔记(深入)”;

Python中如何计算数据累积和?cumsum函数详解

NumPy的ndarray对象本身就支持cumsum方法,或者你可以直接调用numpy.cumsum()函数。它会沿着指定的轴(默认为展平后的数组)计算累积和。

import numpy as np# 1D数组的累积和data_1d = np.array([1, 2, 3, 4, 5])cumulative_sum_1d = np.cumsum(data_1d)print("1D数组累积和:", cumulative_sum_1d)# 输出: 1D数组累积和: [ 1  3  6 10 15]# 2D数组的累积和(默认展平)data_2d = np.array([[1, 2], [3, 4]])cumulative_sum_2d_flat = np.cumsum(data_2d)print("2D数组展平后累积和:", cumulative_sum_2d_flat)# 输出: 2D数组展平后累积和: [ 1  3  6 10]

使用Pandas的cumsum

Python中如何计算数据累积和?cumsum函数详解

Pandas的SeriesDataFrame对象也内置了cumsum方法,这在处理表格数据时尤为方便。它能自动保留索引和列名,让结果更具可读性。

import pandas as pd# Series的累积和s = pd.Series([10, 20, 30, 40, 50])cumulative_sum_s = s.cumsum()print("nSeries累积和:n", cumulative_sum_s)# 输出:# Series累积和:# 0     10# 1     30# 2     60# 3    100# 4    150# dtype: int64# DataFrame的累积和(默认按列,即axis=0)df = pd.DataFrame({    'A': [1, 2, 3],    'B': [10, 20, 30],    'C': [100, 200, 300]})cumulative_sum_df_col = df.cumsum()print("nDataFrame按列累积和:n", cumulative_sum_df_col)# 输出:# DataFrame按列累积和:#      A   B    C# 0    1  10  100# 1    3  30  300# 2    6  60  600

这两种方法,无论是面对简单的数字序列,还是复杂的多维数据表,都能提供高效且直观的累积和计算能力。

NumPy cumsum函数在多维数组中的应用与轴向理解

我刚开始接触NumPy的axis参数时,确实有点绕,感觉它总是在玩“反直觉”的游戏。但一旦你理解了,axis其实就是指操作发生时,哪个维度会被“压缩”或者说“遍历”掉。对于多维数组,numpy.cumsum()axis参数决定了累积和是按行计算还是按列计算,这在处理表格数据或图像数据时尤为关键。

axis=0:沿着第一个轴(行)进行计算,结果的每一列是原数组对应列的累积和。可以理解为“向下”累加。axis=1:沿着第二个轴(列)进行计算,结果的每一行是原数组对应行的累积和。可以理解为“向右”累加。

import numpy as npdata_2d = np.array([    [1, 2, 3],    [4, 5, 6],    [7, 8, 9]])print("原始2D数组:n", data_2d)# 沿着axis=0(列方向)累积求和cumsum_axis_0 = np.cumsum(data_2d, axis=0)print("n沿着axis=0累积和(按列累加):n", cumsum_axis_0)# 解释:# 第1列: [1, 1+4, 1+4+7] = [1, 5, 12]# 第2列: [2, 2+5, 2+5+8] = [2, 7, 15]# 第3列: [3, 3+6, 3+6+9] = [3, 9, 18]# 沿着axis=1(行方向)累积求和cumsum_axis_1 = np.cumsum(data_2d, axis=1)print("n沿着axis=1累积和(按行累加):n", cumsum_axis_1)# 解释:# 第1行: [1, 1+2, 1+2+3] = [1, 3, 6]# 第2行: [4, 4+5, 4+5+6] = [4, 9, 15]# 第3行: [7, 7+8, 7+8+9] = [7, 15, 24]

在实际应用中,比如你有一个记录了每天不同产品销售额的表格,如果想看每天每种产品的累计销售额,可能就需要axis=0。而如果你想看每天所有产品销售额的累计总和,那可能就需要先对行求和,再进行累积,或者考虑更复杂的聚合方式。理解这个轴向,是掌握NumPy多维操作的关键一步。

Pandas cumsum处理缺失值与分组累积求和的策略

很多时候,数据里总有那么些“空洞”,NaN就是其中之一。cumsum默认会把它们一路“传染”下去,这在某些场景下是合理的,但有时你可能希望跳过。而分组累积求和,这简直是数据分析的“瑞士之刃”,尤其在处理时间序列或者分类数据时,它能帮你快速看到每个组内部的累积趋势。

处理缺失值(NaN):

Pandas的cumsum方法有一个skipna参数,默认是True,表示在计算过程中会跳过NaN值,并将NaN视为0进行累加,但结果中仍然保留NaN的位置。如果设置为False,那么遇到NaN后,后续的累积和都将是NaN

import pandas as pdimport numpy as nps_with_nan = pd.Series([10, 20, np.nan, 30, 40])print("原始Series(含NaN):n", s_with_nan)# skipna=True (默认行为): 跳过NaN,但NaN位置仍为NaNcumsum_skipna_true = s_with_nan.cumsum(skipna=True)print("ncumsum(skipna=True):n", cumsum_skipna_true)# 解释:NaN位置依然是NaN,但后续的30是基于20累加的,而不是基于NaN。# skipna=False: 遇到NaN后,后续都变为NaNcumsum_skipna_false = s_with_nan.cumsum(skipna=False)print("ncumsum(skipna=False):n", cumsum_skipna_false)# 解释:一旦遇到NaN,累积过程就中断,后续都变成了NaN。

分组累积求和:

这是Pandas中非常强大的一个功能组合,通过groupby()方法结合cumsum(),可以实现对数据按某个或多个类别进行分组后,再在每个组内独立进行累积和计算。

import pandas as pddata = {    'Category': ['A', 'A', 'B', 'A', 'B', 'A', 'B'],    'Value': [10, 5, 15, 8, 12, 3, 20]}df = pd.DataFrame(data)print("原始DataFrame:n", df)# 按Category分组后,对Value进行组内累积求和df['Cumulative_Value_Per_Category'] = df.groupby('Category')['Value'].cumsum()print("n按Category分组后的累积和:n", df)# 解释:# Category A: [10, 10+5, (跳过B), 15+8, (跳过B), 23+3] -> [10, 15, NaN, 23, NaN, 26, NaN] (索引对应)# Category B: [(跳过A), (跳过A), 15, (跳过A), 15+12, (跳过A), 27+20] -> [NaN, NaN, 15, NaN, 27, NaN, 47] (索引对应)

这种分组累积求和在分析销售数据(按产品类别累计)、用户行为(按用户ID累计登录时长)或财务报表(按部门累计支出)等场景中,都表现得极其高效和实用。

Python中累积和计算的性能考量与替代方案(在特定场景下)

我总觉得,当你开始考虑性能的时候,说明你处理的数据量已经不小了。cumsum在Python生态里,尤其是NumPy和Pandas的版本,基本就是最优解了。它们底层都是用C语言实现的,因此对于大型数组或DataFrame,其执行效率非常高,通常不需要我们去手动优化。

为什么cumsum是首选?

高度优化: NumPy和Pandas的cumsum函数都是用C语言编写的,这意味着它们执行速度极快,远超纯Python循环。内存效率: 它们能够有效地处理大型数据集,而不会导致不必要的内存开销。功能全面: 支持多维数组、缺失值处理、轴向控制等,功能强大。

一些“替代方案”或“理解性”的实现(在特定场景下):

虽然cumsum是标准答案,但在某些特殊情况下,或者仅仅是为了理解其工作原理,你可能会遇到或考虑其他方法。

纯Python循环(仅用于理解,不推荐用于性能敏感场景):这是最直观的实现方式,但性能极差,尤其是在数据量大时。

data = [1, 2, 3, 4, 5]cumulative_sum_py = []current_sum = 0for x in data:    current_sum += x    cumulative_sum_py.append(current_sum)print("纯Python循环累积和:", cumulative_sum_py)

itertools.accumulate(适用于迭代器和内存敏感场景):itertools模块提供了很多用于迭代器的工具accumulate就是其中之一。它返回一个迭代器,按需生成累积和,这在处理非常大的序列时可能比一次性加载到内存更节省资源,因为它不需要一次性创建整个结果列表。

from itertools import accumulatedata = [1, 2, 3, 4, 5]cumulative_sum_itertools = list(accumulate(data))print("itertools.accumulate累积和:", cumulative_sum_itertools)# 也可以指定一个二元操作函数,例如累积乘积import operatorcumulative_product = list(accumulate(data, operator.mul))print("itertools.accumulate累积乘积:", cumulative_product)

itertools.accumulate的优点在于它的“惰性”计算和内存效率,它更适合处理流式数据或当你不需要一次性获得所有结果,而是逐个处理时。但它不如NumPy/Pandas那样直接支持多维数组的轴向操作或DataFrame的复杂索引结构。

总而言之,在Python中进行数据累积和计算,NumPy和Pandas的cumsum函数几乎总是你的首选。它们在性能、功能和易用性之间找到了完美的平衡。只有在非常特殊、对内存极致敏感且数据结构简单的场景下,itertools.accumulate才可能成为一个有益的补充。

以上就是Python中如何计算数据累积和?cumsum函数详解的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1363924.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 03:42:21
下一篇 2025年12月14日 03:42:34

相关推荐

发表回复

登录后才能评论
关注微信