在Python中合并Pandas Groupby聚合结果并生成组合条形图教程

在Python中合并Pandas Groupby聚合结果并生成组合条形图教程

本教程详细介绍了如何将Pandas中两个基于相同分组键(如年、季节、天气情况)的聚合结果(例如总和与平均值)合并,并使用Matplotlib将它们绘制成一个清晰的组合条形图。文章通过数据合并、子图创建和精细化绘图步骤,指导用户实现高效的数据可视化,避免了直接绘制的常见问题

在数据分析和可视化过程中,我们经常需要对同一数据集进行多种聚合操作,例如计算分组的总和与平均值,并希望将这些结果在一个图表中进行比较。直接尝试将两个独立的 groupby().plot.barh() 调用合并到一个图表中通常会遇到挑战,因为它们生成的是独立的图表实例,并且数据结构可能不兼容。本教程将提供一种结构化的方法来解决这个问题,通过数据预处理和matplotlib的灵活绘图功能,实现组合条形图的创建。

核心思路:数据合并与统一绘图

解决此问题的关键在于:

独立聚合并规范化数据: 分别执行 groupby() 聚合操作,并将结果转换为标准DataFrame,确保分组键作为可访问的列。合并数据: 将两个聚合结果DataFrame基于共同的分组键进行合并,形成一个包含所有聚合指标的统一DataFrame。统一绘图: 使用Matplotlib的 plt.subplots() 创建一个图表和坐标轴对象,然后利用合并后的DataFrame在同一个坐标轴上绘制组合条形图。

详细步骤与示例代码

假设我们有一个名为 day_df 的DataFrame,其中包含 yr (年份), season (季节), weathersit (天气情况) 等分组字段,以及 cnt (计数) 字段。我们的目标是可视化不同分组下 cnt 的总和与平均值。

首先,导入必要的库:

import pandas as pdimport matplotlib.pyplot as pltimport numpy as np# 假设 day_df 已经加载并包含数据# 例如,创建一个模拟数据用于演示data = {    'yr': [0, 0, 0, 0, 1, 1, 1, 1, 0, 0, 0, 0, 1, 1, 1, 1],    'season': [1, 1, 2, 2, 1, 1, 2, 2, 1, 1, 2, 2, 1, 1, 2, 2],    'weathersit': [1, 2, 1, 2, 1, 2, 1, 2, 1, 2, 1, 2, 1, 2, 1, 2],    'cnt': [100, 150, 200, 250, 300, 350, 400, 450, 120, 180, 220, 280, 330, 380, 430, 480]}day_df = pd.DataFrame(data)

1. 数据聚合与规范化

分别计算 cnt 的平均值和总和,并使用 reset_index() 将分组键从索引转换为常规列。

立即学习“Python免费学习笔记(深入)”;

# 计算每个分组的平均值day_mean_dataframe = day_df.groupby(by=["yr", "season", "weathersit"]).agg({"cnt": "mean"}).reset_index()# 计算每个分组的总和day_sum_dataframe = day_df.groupby(by=["yr", "season", "weathersit"]).agg({"cnt": "sum"}).reset_index()print("Mean DataFrame Head:")print(day_mean_dataframe.head())print("nSum DataFrame Head:")print(day_sum_dataframe.head())

reset_index() 是一个关键步骤,它将 groupby 操作后生成的多层索引转换回扁平的DataFrame结构,使得 yr, season, weathersit 成为普通的列,便于后续的合并操作。

2. 合并数据帧

使用 pd.merge() 函数将两个聚合后的DataFrame合并。合并时,指定 on 参数为共同的分组键,并使用 suffixes 参数为相同列名的聚合结果添加不同的后缀,以避免列名冲突。

merged_df = pd.merge(day_mean_dataframe, day_sum_dataframe, on=["yr", "season", "weathersit"], suffixes=('_mean', '_sum'))print("nMerged DataFrame Head:")print(merged_df.head())

现在,merged_df 包含了每个分组的 cnt_mean 和 cnt_sum,数据已经准备好进行统一绘图。

3. 绘制组合条形图

我们将展示两种常见的组合条形图:垂直条形图和水平条形图。

3.1 绘制垂直组合条形图
# 创建图表和坐标轴对象fig, ax = plt.subplots(figsize=(14, 7)) # 调整图表大小以适应更多标签# 确定每个分组条形的位置r1 = np.arange(len(merged_df)) # 为每个分组创建一个基准位置width1 = 0.4 # 条形的宽度# 绘制平均值条形bars_mean = ax.bar(r1 - width1/2, merged_df["cnt_mean"], width=width1, label='平均值 (Mean)', color='skyblue')# 绘制总和条形,位置稍微偏移bars_sum = ax.bar(r1 + width1/2, merged_df["cnt_sum"], width=width1, label='总和 (Sum)', color='lightcoral')# 设置X轴刻度标签# 刻度位置应该在两个条形的中间ax.set_xticks(r1)# 组合分组键作为X轴标签ax.set_xticklabels([f'Yr:{row.yr}, Sea:{row.season}, Wea:{row.weathersit}' for _, row in merged_df.iterrows()], rotation=90, ha='right')# 添加图例、标题和轴标签ax.legend()ax.set_xlabel("分组条件 (年, 季节, 天气情况)")ax.set_ylabel("计数")ax.set_title("不同分组下计数的平均值与总和 (垂直条形图)")plt.tight_layout() # 自动调整布局,防止标签重叠plt.show()
3.2 绘制水平组合条形图

水平条形图在分组标签较长时特别有用,可以避免标签重叠。

# 创建图表和坐标轴对象fig, ax = plt.subplots(figsize=(14, 8)) # 调整图表大小# 确定每个分组条形的位置r1 = np.arange(len(merged_df)) # 为每个分组创建一个基准位置height1 = 0.4 # 条形的高度 (对于水平条形图)# 绘制平均值条形bars_mean_h = ax.barh(r1 - height1/2, merged_df["cnt_mean"], height=height1, label='平均值 (Mean)', color='skyblue')# 绘制总和条形,位置稍微偏移bars_sum_h = ax.barh(r1 + height1/2, merged_df["cnt_sum"], height=height1, label='总和 (Sum)', color='lightcoral')# 设置Y轴刻度标签# 刻度位置应该在两个条形的中间ax.set_yticks(r1)# 组合分组键作为Y轴标签ax.set_yticklabels([f'Yr:{row.yr}, Sea:{row.season}, Wea:{row.weathersit}' for _, row in merged_df.iterrows()])# 添加图例、标题和轴标签ax.legend()ax.set_xlabel("计数")ax.set_ylabel("分组条件 (年, 季节, 天气情况)")ax.set_title("不同分组下计数的平均值与总和 (水平条形图)")plt.tight_layout() # 自动调整布局plt.show()

注意事项

reset_index() 的重要性: 在 groupby() 之后,聚合列会成为新的索引。使用 reset_index() 可以将这些索引转换为普通列,使得它们可以在 pd.merge() 中作为 on 参数进行合并,并且方便在绘图时作为标签或数据点。pd.merge() 的应用: 这是将不同聚合结果整合到一起的关键步骤。确保 on 参数指定了所有用于分组的列,并且 suffixes 参数用于区分合并后相同名称的聚合列。Matplotlib subplots(): 推荐使用 plt.subplots() 来创建图表 (fig) 和坐标轴 (ax) 对象,这样可以更灵活地控制图表的各个元素。条形位置计算: 在绘制组合条形图时,需要巧妙地计算每个条形的位置 (r1, r1 + width1 或 r1 – width1/2, r1 + width1/2),确保它们并排显示且中心对齐。标签与可读性: 当分组标签较长时,尤其是在垂直条形图中,使用 rotation=90 和 ha=’right’ (或 ha=’center’) 可以改善标签的可读性。对于水平条形图,通常标签会更清晰。plt.tight_layout() 可以自动调整图表布局,防止标签和标题重叠。自定义: Matplotlib 提供了丰富的自定义选项,可以调整条形颜色、边框、图例、标题、轴标签等,以使图表更具表现力。

总结

通过将独立的 groupby 聚合结果进行规范化、合并,并利用Matplotlib的 bar() 或 barh() 函数在同一坐标轴上进行绘制,我们可以有效地创建出清晰、专业的组合条形图。这种方法不仅解决了直接合并 plot.barh() 结果的难题,也为更复杂的多指标可视化提供了坚实的基础。掌握这种数据处理和绘图技巧,将大大提升数据分析和报告的效率与质量。

以上就是在Python中合并Pandas Groupby聚合结果并生成组合条形图教程的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1375789.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 15:19:46
下一篇 2025年12月14日 15:19:56

相关推荐

  • 解决Docker中Python模块导入错误的常见陷阱与排查指南

    本文旨在深入探讨在Docker容器中运行Python应用时,出现ModuleNotFoundError或ImportError的常见原因及排查方法。我们将通过一个具体案例,剖析即使PYTHONPATH和__init__.py配置正确,仍可能因构建上下文遗漏文件而导致导入失败的问题,并提供详细的解决方…

    好文分享 2025年12月14日
    000
  • Python Enum _missing_ 方法:实现灵活的成员查找与多值映射

    本文深入探讨Python enum.Enum 的 _missing_ 类方法,演示如何通过自定义查找逻辑,使枚举成员能够响应多种形式的输入(如”true”、”yes”、”T”),同时保持其内部值的独立性。这为处理外部不一致数据源…

    2025年12月14日
    000
  • 深入解析NumPy与Pickle的数据存储差异及优化策略

    本文深入探讨了NumPy数组与Python列表在使用np.save和pickle.dump进行持久化时,文件大小差异的根本原因。核心在于np.save以原始、未压缩格式存储数据,而pickle在特定场景下能通过对象引用优化存储,导致其文件看似更小。教程将详细解释这两种机制,并提供使用numpy.sa…

    2025年12月14日
    000
  • 优化Python游戏循环:解决“石头剪刀布”游戏中的while循环陷阱

    本教程探讨了Python“石头剪刀布”游戏中while循环无法正确重启的问题。核心在于循环条件变量类型被意外改变,导致循环提前终止。文章详细分析了这一常见错误,并提供了解决方案,包括使用while True结合break语句进行循环控制,以及关键的游戏状态重置策略,确保游戏能无限次正确运行。 问题剖…

    2025年12月14日
    000
  • 深入理解 Python super() 关键字:继承中的方法解析与调用机制

    Python中的super()关键字用于在子类中调用父类(或兄弟类)的方法,特别是在方法重写时。它确保了在继承链中正确地访问和执行上层类的方法,从而实现功能的扩展或协同。本文将详细解释super()的工作原理、方法解析顺序(MRO)及其在实际编程中的应用。 super() 关键字概述 在面向对象编程…

    2025年12月14日
    000
  • 深入理解Python列表推导式:避免副作用与高效计数实践

    Python列表推导式专为创建新列表设计,不应直接修改外部变量。本文将解释为何在列表推导式中递增全局变量会导致语法错误,并提供多种高效、符合Pythonic风格的替代方案,包括利用sum()、len()结合布尔值或条件表达式进行计数,同时优化列表构建过程,提升代码可读性和性能。 列表推导式的核心原则…

    2025年12月14日
    000
  • Python super() 关键字详解:理解继承中方法的调用顺序

    本文深入探讨 Python 中 super() 关键字的用法及其在继承体系中的作用。通过解析方法重写与调用机制,阐明 super() 如何实现协作式继承,确保子类在扩展或修改父类行为的同时,仍能正确调用父类方法,并详细解释方法执行的实际顺序。 1. 继承与方法重写基础 在面向对象编程中,继承是一种核…

    2025年12月14日
    000
  • 解决Kivy应用中KV文件重复加载导致的BuilderException

    在Kivy应用开发中,当App类已自动加载同名.kv文件时,若再通过Builder.load_file()显式加载该文件,会引发BuilderException及相关解析错误。这是由于Kivy重复解析KV文件,导致内部状态冲突或属性引用失败。解决方案是避免重复加载,即移除冗余的Builder.loa…

    2025年12月14日
    000
  • 优化Python石头剪刀布游戏:正确实现循环重玩机制

    本教程深入探讨Python石头剪刀布游戏中常见的循环重玩问题。通过分析原始代码中因变量类型重定义导致的循环提前终止,文章详细阐述了如何使用while True结合break语句构建健壮的游戏主循环,确保游戏能够按预期反复进行,并提供了完整的优化代码示例及相关编程实践建议。 在开发交互式游戏时,一个常…

    2025年12月14日
    000
  • 多样化PDF文档标题提取:从格式特征分析到智能模板系统的策略演进

    本文探讨了从海量、布局多变的PDF文档中高效提取标题的挑战。针对传统规则和基于PyMuPDF的格式特征分类方法,分析了其局限性,特别是面对复杂布局和上下文依赖时的不足。最终,文章强调了采用专业OCR系统和模板化解决方案的优势,指出其在处理大规模、异构文档时,能通过可视化模板配置和人工校对工作流,提供…

    2025年12月14日
    000
  • Python列表推导式:避免副作用与高效计数实践

    Python列表推导式旨在高效创建新列表,而非执行带有副作用的操作,如直接修改外部全局变量。本文将深入探讨为何在列表推导式中尝试递增全局变量会导致语法错误,并提供多种符合Pythonic风格的解决方案,包括利用sum()和len()函数进行计数,以及如何优化数据处理流程,从而在保持代码简洁性的同时实…

    2025年12月14日
    000
  • 网页内容抓取进阶:解析JavaScript动态加载的数据

    本教程旨在解决使用BeautifulSoup直接解析HTML元素时,无法获取到通过JavaScript动态加载内容的常见问题。我们将深入探讨当目标文本被嵌入到标签内的JavaScript变量(如window.__INITIAL_STATE__)中时,如何结合使用requests库、正则表达式和jso…

    2025年12月14日
    000
  • python编写程序的常见错误

    缩进错误:Python依赖缩进,应统一用4空格;2. 变量未定义:先初始化再使用;3. 索引越界:访问前检查长度或用try-except;4. 混淆==与is:值比较用==,None判断用is;5. 迭代时修改列表:应遍历副本或用列表推导式;6. 默认参数为可变对象:应设为None并在函数内初始化;…

    2025年12月14日
    000
  • BeautifulSoup处理命名空间标签:lxml与xml解析器的选择与实践

    本教程探讨BeautifulSoup在处理HTML/XML文档中命名空间标签(如)时遇到的常见问题及解决方案。重点分析了lxml和xml两种解析器对命名空间标签的不同处理方式,并提供了针对性的find_all方法,确保能准确提取所需元素。 命名空间标签的挑战:lxml解析器的行为 在处理复杂的HTM…

    2025年12月14日
    000
  • Python列表推导式中的外部变量修改限制与高效计数方法

    Python列表推导式旨在高效地创建新列表,而非修改外部变量。尝试在其中直接递增全局变量会导致语法错误,因为列表推导式是表达式,不支持语句式的副作用操作。要实现类似计数功能,应利用列表推导式生成一个包含特定值的列表(如1或布尔值),然后结合sum()或len()等聚合函数进行统计,从而保持代码的简洁…

    2025年12月14日
    000
  • 合并Pandas groupby聚合结果并进行分组条形图可视化

    本教程详细介绍了如何将Pandas groupby操作生成的不同聚合结果(如平均值和总和)合并到同一张图表中进行可视化。通过先将聚合后的数据框合并,然后利用Matplotlib的bar或barh函数,可以实现对复杂分组数据的多指标对比分析,有效解决直接链式调用绘图函数无法实现分组对比的问题。 在数据…

    2025年12月14日
    000
  • 优化Python矩阵运算:提升与Matlab媲美的性能

    本文深入探讨了Python在处理矩阵线性方程组时常见的性能瓶颈,尤其是在与Matlab进行对比时。核心问题在于Python开发者常错误地使用矩阵求逆操作(scipy.linalg.inv)来解决线性系统,而Matlab的运算符则默认采用更高效的直接求解方法。文章详细阐述了这一差异,并提供了使用num…

    2025年12月14日
    000
  • Numpy数组与Python列表:意外的存储大小差异及其优化策略

    本文深入探讨了Numpy数组在特定场景下存储空间大于等效Python列表的现象。通过分析Numpy不进行自动压缩的特性以及Python Pickle在序列化时对对象引用的优化机制,揭示了导致这种差异的深层原因。教程将提供使用numpy.savez_compressed等方法来有效缩小Numpy数组文…

    2025年12月14日
    000
  • 如何在循环中将字典形式的超参数传递给RandomForestRegressor

    本文旨在解决在Python的scikit-learn库中,将包含多个超参数的字典直接传递给RandomForestRegressor构造函数时遇到的InvalidParameterError。核心解决方案是使用Python的字典解包运算符**,将字典中的键值对作为关键字参数传递,从而确保模型正确初始…

    2025年12月14日
    000
  • Python namedtuple序列化陷阱:pickle的命名匹配要求

    本文深入探讨了在使用Python pickle模块序列化collections.namedtuple类型时遇到的PicklingError。核心问题在于pickle在反序列化时,会尝试根据namedtuple内部定义的名称在其原始模块中查找对应的类。若namedtuple类型被赋值的变量名与其内部定…

    2025年12月14日
    000

发表回复

登录后才能评论
关注微信