使用 Pandas 将多行多列数据合并为单行

使用 pandas 将多行多列数据合并为单行

本文旨在介绍如何使用 Pandas 库将 DataFrame 中具有对应关系的多个 Position/Name 列合并为单行,并根据 Position 列的值筛选出有效数据。通过 stack、where、dropna 等 Pandas 函数的组合运用,可以高效地实现数据转换和清洗,最终得到目标格式的数据。

数据准备

首先,我们需要创建一个 Pandas DataFrame,模拟原始数据。以下是一个示例:

import pandas as pddata = {'Position A': [-1, 3, -1, -1],        'Name A': ['tortise', 'sprite', 'nope', 'nope'],        'Position B': [-1, 2, -1, -1],        'Name B': ['monkey', 'coffee', 'nope', 'nope'],        'Position C': [2, -1, -1, -1],        'Name C': ['coca cola', 'bird', 'fish', 'nope'],        'Position D': [-1, -1, 5, -1],        'Name D': ['slug', 'monkey', 'root beer', 'nope'],        'Position E': [-1, -1, 1, -1],        'Name E': ['rooster', 'ostrich', 'tea', 'nope']}df = pd.DataFrame(data)print(df)

这段代码创建了一个名为 df 的 DataFrame,包含了 Position 和 Name 列,模拟了原始数据。

数据转换

核心思路是使用 stack 函数将 DataFrame 转换为 Series,然后根据 Position 列的值进行筛选,最后再将 Series 转换回 DataFrame。

new_df = (df.filter(like='Name').stack()          .where(df.filter(like='Position').stack().ne(-1).values)          .dropna().droplevel(0).sort_index().to_frame().T)print(new_df)

这段代码主要做了以下几件事:

df.filter(like=’Name’): 筛选出包含 ‘Name’ 的列。.stack(): 将筛选出的列堆叠成一个 Series。df.filter(like=’Position’).stack().ne(-1).values: 筛选出包含 ‘Position’ 的列,堆叠成 Series,并判断值是否不等于 -1,将结果转换为 Numpy 数组。.where(…): 根据 Position 列的条件,保留 Name 列中满足条件的值,否则设置为 NaN。.dropna(): 移除 NaN 值。.droplevel(0): 移除最外层的索引。.sort_index(): 对索引进行排序。.to_frame().T: 将 Series 转换为 DataFrame,并转置。

结果展示

运行上述代码后,将会得到以下结果:

    Name A   Name B      Name C     Name D  Name E0   sprite   coffee   coca cola  root beer     tea

这正是我们期望的结果,将多行多列的数据合并为了单行,并根据 Position 列的值进行了筛选。

注意事项

确保 Position 和 Name 列的对应关系正确。可以根据实际情况调整筛选条件,例如,将 -1 替换为其他值。如果数据量很大,可以考虑使用更高效的 Pandas 函数,例如 apply。

总结

本文介绍了如何使用 Pandas 将 DataFrame 中具有对应关系的多个 Position/Name 列合并为单行,并根据 Position 列的值筛选出有效数据。通过 stack、where、dropna 等 Pandas 函数的组合运用,可以高效地实现数据转换和清洗。这种方法可以应用于各种需要将多行多列数据合并为单行的场景,例如,数据清洗、数据转换、数据分析等。掌握这种方法可以帮助你更高效地处理数据,提高工作效率。

以上就是使用 Pandas 将多行多列数据合并为单行的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1369910.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月14日 10:04:22
下一篇 2025年12月14日 10:04:27

相关推荐

发表回复

登录后才能评论
关注微信