Pandas时间序列:实现每日重置的滚动计算

Pandas时间序列:实现每日重置的滚动计算

本文详细介绍了如何在Pandas时间序列数据中,实现expanding()函数按天重新开始计算的逻辑。通过将日期时间索引转换为单独的日期列,并结合groupby()方法,用户可以有效地对每日数据进行独立的累积统计分析,确保每个新的一天都从头开始计算其滚动指标,适用于需要分日统计的场景。

理解Pandas中的Expanding操作

在时间序列分析中,expanding()函数是pandas提供的一个强大工具,用于执行累积(或扩展)窗口计算。与固定大小的rolling()窗口不同,expanding()窗口会随着数据的增加而不断扩大,从序列的第一个元素开始,逐步包含后续所有元素。例如,data[“somecolumn”].expanding().mean()会计算从序列开始到当前点的所有数据的累积平均值。

然而,在某些业务场景下,我们可能需要这种累积计算在特定时间点(例如每天开始时)“重置”。这意味着当新的一天到来时,expanding()计算应该从该天的第一条记录重新开始,而不是继续前一天的累积。

每日重置Expanding计算的挑战

默认的expanding()方法会跨越整个序列进行累积计算,不会自动识别日期边界并重置。如果直接在一个包含多天数据的DataFrame上应用expanding().mean(),它将计算整个时间跨度内的累积平均值,这不符合每日重置的需求。例如,如果第二天的数据是第一条记录,它将与前一天的所有数据一起计算,而不是作为新一天的起点。

解决方案:结合groupby()按天分组

解决此问题的关键在于利用Pandas的groupby()方法。我们可以首先从时间序列索引中提取出“日期”部分,将其作为一个新的分组键。然后,对这个日期键进行分组,并在每个组(即每一天)内部独立地应用expanding()函数。这样,expanding()操作就会在每天的边界处自动“重置”。

实施步骤

以下是实现每日重置expanding()计算的具体步骤:

准备数据: 确保你的DataFrame有一个DatetimeIndex,这是进行时间序列操作的基础。提取日期信息: 从DatetimeIndex中提取出单独的日期部分,并将其存储为一个新的列。这个新列将作为我们groupby()操作的键。应用groupby()和expanding(): 使用新创建的日期列作为groupby()的参数,然后在其结果上链式调用expanding()和所需的聚合函数(如mean()、sum()、`count()等)。

示例代码

让我们通过一个具体的例子来演示这个过程。假设我们有一个包含多天数据的DataFrame,我们希望计算每日的累积平均值。

import pandas as pd# 1. 准备示例数据# 创建一个包含多天时间序列数据的DataFramedf = pd.DataFrame(    {"B": [1, 2, 4, 0, 4]},    index=pd.to_datetime(        ["2023-12-11 21:00:00", "2023-12-11 22:00:00", "2023-12-11 23:00:00",         "2023-12-12 00:00:00", "2023-12-12 01:00:00"]    ))# 确保索引已排序(虽然本例数据已排序,但这是一个好习惯)# df = df.sort_index()print("原始DataFrame:")print(df)print("-" * 30)# 2. 提取日期信息并创建新的“day”列# 使用 .dt 访问器和 strftime 方法将日期格式化为 YYYY-MM-DD 字符串df["day"] = df.index.to_series().dt.strftime("%Y-%m-%d")print("添加'day'列后的DataFrame:")print(df)print("-" * 30)# 3. 应用 groupby() 和 expanding().mean()# 首先按“day”列分组,然后在每个组内应用 expanding().mean()daily_expanding_mean = df.groupby("day")["B"].expanding().mean()print("每日重置的Expanding平均值结果:")print(daily_expanding_mean)

代码解释:

我们创建了一个名为df的DataFrame,其索引是DatetimeIndex,包含两天的数据。df[“day”] = df.index.to_series().dt.strftime(“%Y-%m-%d”) 这一行是关键。它从DataFrame的日期时间索引中提取出日期部分,并将其格式化为”YYYY-MM-DD”字符串,然后作为新列”day”添加到DataFrame中。使用字符串格式化可以确保即使时间戳包含时区信息,日期分组也能准确无误。df.groupby(“day”)[“B”].expanding().mean():df.groupby(“day”):将DataFrame按照”day”列的值进行分组。这意味着所有属于同一天的数据将被视为一个独立的组。[“B”]:指定我们要在列”B”上执行计算。.expanding().mean():在每个分组内部,对列”B”应用expanding().mean()。当一个新组(新的一天)开始时,expanding()的计算将重新开始。

输出结果分析:

原始DataFrame:                       B2023-12-11 21:00:00  12023-12-11 22:00:00  22023-12-11 23:00:00  42023-12-12 00:00:00  02023-12-12 01:00:00  4------------------------------添加'day'列后的DataFrame:                       B         day2023-12-11 21:00:00  1  2023-12-112023-12-11 22:00:00  2  2023-12-112023-12-11 23:00:00  4  2023-12-112023-12-12 00:00:00  0  2023-12-122023-12-12 01:00:00  4  2023-12-12------------------------------每日重置的Expanding平均值结果:day                                  2023-12-11 2023-12-11 21:00:00    1.000000           2023-12-11 22:00:00    1.500000           2023-12-11 23:00:00    2.3333332023-12-12 2023-12-12 00:00:00    0.000000           2023-12-12 01:00:00    2.000000

从结果中可以看出,对于2023-12-11这一天:

第一个值是 1.000000 (1 / 1)第二个值是 1.500000 ((1 + 2) / 2)第三个值是 2.333333 ((1 + 2 + 4) / 3)

当日期切换到2023-12-12时,expanding()计算被重置:

第一个值是 0.000000 (0 / 1)第二个值是 2.000000 ((0 + 4) / 2)

这正是我们期望的每日重置行为。

注意事项与扩展

索引类型: 确保DataFrame的索引是DatetimeIndex。如果不是,你需要先使用pd.to_datetime()将其转换。日期提取方式: 除了dt.strftime(“%Y-%m-%d”),你也可以使用df.index.to_series().dt.date来获取Python的date对象进行分组。这两种方法在groupby的效果上是相似的。其他Expanding聚合: 这种方法不仅适用于mean(),也适用于expanding().sum()、expanding().min()、expanding().max()、expanding().count()等所有expanding()支持的聚合函数。性能考量: 对于非常大的数据集,创建新的辅助列可能会增加内存消耗。然而,groupby()和expanding()的组合通常是处理此类时间序列问题的有效且高效的方法。多级索引: df.groupby(“day”).expanding().mean()的输出结果是一个Series,其索引是多级索引(MultiIndex),第一级是日期,第二级是原始的DatetimeIndex。如果你需要将其合并回原始DataFrame,可以使用join()或merge()操作。

总结

通过巧妙地结合Pandas的groupby()功能与日期时间索引的提取能力,我们可以轻松地实现expanding()函数在每日边界处重置的需求。这种方法提供了一种灵活且强大的方式,用于在时间序列数据中执行分段的累积统计分析,从而更好地满足特定的业务逻辑和数据分析要求。

以上就是Pandas时间序列:实现每日重置的滚动计算的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1376288.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
从HTML表格中提取数据并转换为DataFrame
上一篇 2025年12月14日 15:46:38
利用Pandas对DataFrame多列组合进行统计分析与结果展示
下一篇 2025年12月14日 15:46:50

相关推荐

  • 微软 Xbox 用 AI 制作招聘广告现低级错误:代码出现在显示器背面

    7 月 15 日消息,在全面推动人工智能(ai)战略的进程中,微软再次因一则由 ai 制作的招聘广告引发公众争议。近日,微软 xbox 图形团队在 linkedin 上发布了一则招聘信息,本意是招募图形驱动开发与游戏视觉优化方面的工程师,但其中出现的一个低级错误——“电脑屏幕倒装”,却招致了外界广泛…

    2026年8月29日
    000
  • 新榜矩阵通 | AI再升级!7大实践方向,重塑矩阵管理新

      以上就是新榜矩阵通 | AI再升级!7大实践方向,重塑矩阵管理新的详细内容,更多请关注创想鸟其它相关文章!

    2026年8月29日
    100
  • PHP如何实现与Java类似的AES加密解密功能?

    本文演示如何用PHP实现与Java类似的AES加密解密功能。Java代码通常使用AES算法,包含加密和解密方法。PHP实现需要选择合适的函数并处理差异。 Java代码用KeyGenerator生成密钥,并通过SecretKeySpec用于Cipher对象。PHP可以使用openssl_encrypt…

    2026年8月29日
    000
  • thinkpad think book主要区别是什么

    ThinkPad和ThinkBook虽同为兄弟笔记本,但定位不同。ThinkPad专注高端商务,稳定可靠,追求极致性能,价格高昂,如同深度优化的算法。ThinkBook主打性价比和时尚,功能强大,易于上手,价格亲民,类似封装良好的库。选择ThinkPad还是ThinkBook取决于您的需求和预算。 …

    用户投稿 2026年8月29日
    000
  • think book thinkpad区别是啥

    ThinkBook和ThinkPad定位不同:ThinkPad主打专业商务,ThinkBook针对大众市场。具体差异体现在硬件配置(ThinkPad更高端)、做工设计(ThinkPad更坚固耐用)、软件和服务(ThinkPad更专业)。考虑预算和需求选择:ThinkPad适合对性能、稳定、安全性要求…

    2026年8月29日
    000
  • 123网盘上传文件速度慢怎么解决_123网盘文件上传加速技巧

    123网盘上传慢可通过优化网络和工具解决。首先确保稳定有线连接,关闭占用带宽的应用,重启路由器提升网络质量;其次使用官方PC客户端或支持多线程的第三方工具,利用多线程上传提高效率;再者避开晚高峰,在网络空闲时段上传大文件;最后将多个小文件打包压缩后再上传,减少连接开销,避免上传受限文件类型。 123…

    2026年8月29日
    000
  • Win10系统如何创建U盘安装介质?

    Win10系统如何创建U盘安装介质?Win10系统如何创建U盘安装介质?Win10系统如何创建U盘安装介质?Win10系统如何创建U盘安装介质?

    windows 10 系统支持直接在线升级,但在升级期间可能会遇到一些问题。为此,微软官方推出了一个名为 mediacreationtool 的工具,用户可以通过它来升级 windows 10 或为其他设备制作 u 盘安装介质。接下来,我们将详细介绍如何利用这个工具创建 windows 10 系统的…

    2026年8月29日 用户投稿
    500
  • 《罪恶装备》开发商将在本周五正式揭晓全新作

    arc system works宣布将于本周五举行一场网络直播发布会,正式揭晓其全新作品。 这家总部位于日本横滨的游戏开发兼发行商表示,直播活动将在北京时间6月27日上午9点开始,并承诺将“披露有关Arc System Works的最新动态,包括新游戏的公布”。 官方同时透露,“除了展示多款正在开发…

    2026年8月29日
    000
  • 电脑提示内存不足怎么清理 快速解决内存问题

    电脑提示内存不足怎么清理 快速解决内存问题电脑提示内存不足怎么清理 快速解决内存问题电脑提示内存不足怎么清理 快速解决内存问题电脑提示内存不足怎么清理 快速解决内存问题

    许多人可能都遇到过“内存不足”的提示,尤其是在同时运行多个程序或使用大型软件时。出现这一问题的原因可能是电脑的物理内存(ram)不够,也可能是虚拟内存设置不合理。无论是哪种情况,都可以通过一些有效的方法来清理和优化内存,让电脑重新恢复流畅运行。 一、检查并关闭占用资源过多的程序 当系统提示内存不足时…

    2026年8月29日 用户投稿
    000
  • 贝壳找房怎么联系房东_贝壳找房直接联系房东方法详解

    通过贝壳找房筛选“个人房源”并查看“房东直租”标签提高联系真房东几率;2. 沟通时主动询问是否业主本人,要求提供房产证或合同信息核实身份;3. 结合实地走访,向物业打听房屋出租情况以验证线上信息真实性;4. 使用平台私信功能沟通,避免过早泄露手机号,观察回复细节并要求签约前查验身份证和房产证明原件。…

    2026年8月29日
    300
  • PHP如何实现与Java类似的AES加解密效果?

    PHP与Java AES加解密实现详解及代码对比 本文将详细阐述如何利用PHP实现与Java代码等效的AES加解密效果。我们将分析Java代码的AES算法实现,并提供相应的PHP代码,确保两者在加密和解密结果上保持一致。 这需要选择合适的PHP函数库,并正确处理密钥和初始化向量(IV)。 Java代…

    2026年8月29日
    000
  • 如何解决Symfony依赖注入测试中的复杂性?使用matthiasnoback/symfony-dependency-injection-test可以!

    可以通过以下地址学习composer:学习地址 在开发symfony应用时,依赖注入是核心功能之一,但测试这些依赖注入配置和编译器传递的复杂性常常令人头疼。我曾在一个项目中遇到了这样的问题,测试容器扩展和编译器传递的正确性花费了大量时间和精力。幸运的是,通过使用matthiasnoback/symf…

    用户投稿 2026年8月29日
    300
  • PyGraphviz 安装使用

    在 windows 系统下,安装和使用 pygraphviz 的详细步骤如下: 安装 Python:选择 Python 版本并下载安装包,这里以 Python 3.4.4 的 msi 格式文件为例。访问 Python 下载页面进行下载。安装 Python 后,确保将 Python 安装目录添加到系统…

    2026年8月29日
    000
  • 酷睿i7和i5的区别 两者哪个好介绍

    酷睿i7和i5的区别 两者哪个好介绍酷睿i7和i5的区别 两者哪个好介绍酷睿i7和i5的区别 两者哪个好介绍酷睿i7和i5的区别 两者哪个好介绍

    电脑处理器选购时,不少用户都会在intel酷睿i5与i7之间陷入纠结。作为消费级市场中高端定位的两大主力系列,这两款处理器在性能表现、价格区间以及适用场景上各有特点。那么,i7和i5究竟有何不同?哪一款更契合你的需求?本文将从核心参数、实际表现、使用场景及性价比四个维度进行深入剖析。 一、酷睿i5与…

    2026年8月29日 用户投稿
    000
  • regard as和think of as区别是什么

    regard as 和 think of as 皆意为“视作”,区别在于视角和正式程度。regard as 较为正式,强调客观判断,常用于学术论文等。think of as 偏口语化,强调主观感受,适用于非正式对话或写作。可通过代码模拟这种视角差异,regard_as 模拟系统判断,而 think_…

    2026年8月29日
    100
  • 何小鹏:热烈欢迎特斯拉FSD中国推送,智驾行业会有更多有趣交流

    小鹏汽车ceo何小鹏对特斯拉fsd在中国市场推出表示欢迎,并认为这将推动智能驾驶行业发展。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 何小鹏表示,小鹏汽车计划在今年上半年,对标全球顶级高级辅助驾驶系统,在功能、性能、安全性和覆盖率等方面…

    2026年8月29日
    000
  • R 语言 download.file 的几点知识

    R 语言 download.file 的几点知识R 语言 download.file 的几点知识R 语言 download.file 的几点知识R 语言 download.file 的几点知识

    在 r 语言中,无论是安装包还是下载数据, download.file 函数都是一个常用的工具。如果你在使用过程中遇到中断或异常,了解 download.file 函数的详细信息将有助于你判断问题是出在远程源服务器、自身服务器还是网络故障上,甚至可以帮助你找到替代的下载方法。 上面的链接提供了关于 …

    2026年8月29日 用户投稿
    000
  • [openvino]windows上配置C++openvino后测试代码

    测试环境: vs2022 w_openvino_toolkit_windows_2024.3.0.16041.1e3b88e4e3f_x86_64.zip 代码: #include #include int main(int, char**) {// ——– 获取 OpenVINO 运行时…

    2026年8月29日
    000
  • 人工智能中的语音识别

    语音识别技术,即自动语音识别(asr),是人工智能领域的关键技术,它致力于将人类语音转化为文本,让机器“理解”人类语言并做出相应反应。本文将深入探讨语音识别在ai中的作用、核心技术、应用场景以及未来发展趋势。 1. 定义与目标 语音识别技术通过计算机系统识别和转录口语,将音频输入转化为文本输出。其目…

    2026年8月29日
    000
  • MySQL安全配置误区及防范_MySQL安全加固常见问题分析

    MySQL安全配置误区及防范_MySQL安全加固常见问题分析MySQL安全配置误区及防范_MySQL安全加固常见问题分析MySQL安全配置误区及防范_MySQL安全加固常见问题分析MySQL安全配置误区及防范_MySQL安全加固常见问题分析

    mysql安全配置误区在于依赖默认设置、忽视最小权限原则和网络暴露面管理不足。1.清理默认及不必要的账户,如匿名用户和test数据库;2.实施最小权限原则,为每个应用创建专属用户并仅授予必要权限;3.强化密码策略,使用validate_password插件强制复杂密码;4.收紧网络访问控制,限制bi…

    2026年8月29日 用户投稿
    000

发表回复

登录后才能评论
关注微信