python中pandas的知识点整理

Pandas核心功能包括数据结构(Series、DataFrame)、读写文件、数据查看、选择索引、清洗、操作、分组聚合、合并连接及时间序列处理,系统掌握可应对多数数据分析任务。

python中pandas的知识点整理

Python中Pandas是数据处理和分析的核心库,广泛用于读取、清洗、转换和分析结构化数据。以下是Pandas主要知识点的系统整理,帮助快速掌握其核心功能。

1. 数据结构:Series 和 DataFrame

Series 是带标签的一维数组,支持任意数据类型。

• 创建方式:pd.Series(data, index=index)
• 示例:
   s = pd.Series([1, 3, 5], index=[‘a’, ‘b’, ‘c’])
   s[‘a’] → 1

DataFrame 是二维表格型数据结构,类似Excel表格或SQL表。

• 创建方式:pd.DataFrame(data, columns=列名, index=索引)
• 示例:
   df = pd.DataFrame({‘name’: [‘Alice’, ‘Bob’], ‘age’: [25, 30]})

2. 数据读取与写入

Pandas支持多种文件格式的输入输出操作。

立即学习“Python免费学习笔记(深入)”;

• 读取CSV:pd.read_csv(‘file.csv’)
• 读取Excel:pd.read_excel(‘file.xlsx’)
• 读取JSON:pd.read_json(‘file.json’)
• 写入文件:
   df.to_csv(‘output.csv’, index=False)
   df.to_excel(‘output.xlsx’)

常用参数:
   sep=’,’(指定分隔符)
   header=0(指定哪行为列名)
   usecols=[‘col1’, ‘col2’](只读取指定列)
   encoding=’utf-8′

Unity3D技术之纹理着色器基础详解 中文WORD版 Unity3D技术之纹理着色器基础详解 中文WORD版

本文档说的是unity3D中shader相关的一些知识;在shader编程中,有一些术语,有时候不明白的话容易被整懵圈,所以这里就简单提一下。Shading最开始指的在素描中给物体画明暗调子,在图形学中,其实就是给Mesh上色(Mesh就是一堆三角面片,包含顶点左边,法线坐标,uv坐标之类的),wiki中说的是根据物体相对于光线的角度及其距离光源距离改变物体颜色生成photorealistic效果的过程。我们所编写的处理shading的程序就叫做shader,中文叫着色器,程序的输入是颜色,纹理,坐标等等

Unity3D技术之纹理着色器基础详解 中文WORD版 0 查看详情 Unity3D技术之纹理着色器基础详解 中文WORD版

3. 数据查看与基本信息

• 查看前几行:df.head(n)
• 查看后几行:df.tail(n)
• 查看列名:df.columns
• 查看索引:df.index
• 查看数据类型:df.dtypes
• 数据形状:df.shape
• 统计摘要:df.describe()(数值列均值、标准差等)
• 检查缺失值:df.isnull().sum()

4. 数据选择与索引

• 按列选择:
   df[‘col’] 或 df[[‘col1’, ‘col2’]]
• 按行切片:
   df[1:4]
• 使用 loc:按标签选择
   df.loc[1, ‘name’]
   df.loc[:, ‘age’ > 25]
• 使用 iloc:按位置选择
   df.iloc[0, 1] → 第一行第二列
• 条件筛选:
   df[df[‘age’] > 25]

5. 数据清洗

• 处理缺失值:
   df.dropna():删除含空值的行/列
   df.fillna(value):用指定值填充
   df.fillna(method=’ffill’):向前填充
   df.fillna(df.mean()):用均值填充数值列

• 处理重复值:
   df.duplicated():返回布尔Series
   df.drop_duplicates():删除重复行

• 类型转换:
   df[‘age’] = df[‘age’].astype(int)
   pd.to_datetime(df[‘date_col’])

6. 数据操作

• 添加列:
   df[‘new_col’] = df[‘col1’] + df[‘col2’]
• 删除列或行:
   df.drop(‘col_name’, axis=1, inplace=True)
• 重命名列:
   df.rename(columns={‘old’: ‘new’}, inplace=True)
• 设置索引:
   df.set_index(‘col’, inplace=True)
   df.reset_index(inplace=True)

7. 数据聚合与分组

• 分组操作:
   grouped = df.groupby(‘category’)
   grouped.mean()
   grouped.size()
   grouped.agg({‘age’: ‘mean’, ‘salary’: ‘sum’})

• 常用聚合函数
   sum(), mean(), count(), max(), min(), std()

8. 合并与连接数据

• 拼接(concat):
   pd.concat([df1, df2], axis=0) # 上下拼接
   pd.concat([df1, df2], axis=1) # 左右拼接

• 合并(merge):
   pd.merge(df1, df2, on=’key’) # 内连接
   pd.merge(df1, df2, on=’key’, how=’left’) # 左连接
   pd.merge(df1, df2, left_on=’key1′, right_on=’key2′)

9. 时间序列处理

• 转换为时间类型:
   pd.to_datetime(df[‘date’])
• 设置时间为索引:
   df.set_index(‘date’, inplace=True)
• 重采样:
   df.resample(‘M’).mean() # 按月汇总
• 时间偏移:
   df.index + pd.DateOffset(days=1)

10. 实用技巧

• 查看唯一值:
   df[‘col’].unique()
   df[‘col’].nunique()
• 值计数:
   df[‘col’].value_counts()
• 排序:
   df.sort_values(by=’col’, ascending=False)
   df.sort_index()
• 应用函数:
   df[‘col’].apply(lambda x: x.upper())
   df.apply(np.mean, axis=1)

基本上就这些。熟练掌握以上内容,就能应对大多数数据分析任务。多练习真实数据集(如CSV导入)能更快上手。不复杂但容易忽略的是索引设置和缺失值处理,建议在每步操作后打印shape或head验证结果。

以上就是pythonpandas的知识点整理的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/842727.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
192.168.1.1修改内网IP地址 192.168.1.1 局域网网段更改步骤
上一篇 2025年11月27日 13:35:33
今日头条极速版零碎时间赚钱 今日头条极速版碎片化收益技巧
下一篇 2025年11月27日 13:35:34

相关推荐

  • 如何设置Linux服务超时参数 systemd服务超时配置

    如何设置Linux服务超时参数 systemd服务超时配置如何设置Linux服务超时参数 systemd服务超时配置如何设置Linux服务超时参数 systemd服务超时配置如何设置Linux服务超时参数 systemd服务超时配置

    systemd服务超时参数调整方法包括:1.使用systemctl show查看timeoutstartsec、timeoutstopsec、timeoutsec字段获取当前配置;2.通过systemctl edit编辑unit文件设置timeoutstartsec、timeoutstopsec或t…

    2026年9月22日 用户投稿
    000
  • mysql安装完如何诊断 mysql慢查询分析与优化方法

    要解决 mysql 慢查询问题,首先要开启慢查询日志,其次使用 mysqldumpslow 分析日志,再通过 explain 查看执行计划,最后根据常见优化建议改进 sql 和索引。具体步骤如下:一、修改配置文件或动态开启慢查询日志,并设置阈值和路径;二、使用 mysqldumpslow 工具分析慢…

    2026年9月22日
    100
  • 主板供电相数对CPU超频稳定性的影响:14相 vs. 20相实测

    20相供电主板在超频下表现更稳,实测显示其VRM温度更低、电压波动更小、性能输出更一致,尤其适合极限超频和高负载场景,而14相供电配合优质用料也能满足主流超频需求,普通用户无需盲目追求高相数。 主板供电相数直接影响CPU在高负载和超频状态下的电压稳定性和温度控制。很多人在选择主板时会看到“14相”或…

    2026年9月22日
    200
  • mysql安装后怎么建表 mysql创建数据表的详细步骤

    mysql安装后怎么建表 mysql创建数据表的详细步骤mysql安装后怎么建表 mysql创建数据表的详细步骤mysql安装后怎么建表 mysql创建数据表的详细步骤mysql安装后怎么建表 mysql创建数据表的详细步骤

    安装完 mysql 后,建表的关键在于先创建数据库并选择使用,然后通过 create table 语句定义表结构。1. 创建数据库:使用 create database mydatabase; 创建数据库;2. 使用数据库:通过 use mydatabase; 选择当前操作的数据库;3. 建表语法:…

    2026年9月22日 用户投稿
    200
  • 夸克浏览器电脑网页版访问入口 夸克官网主页链接地址

    夸克浏览器电脑网页版访问入口是https://www.quark.cn/,用户可直接在浏览器地址栏输入该链接访问,其界面采用极简设计并集成智能搜索、网盘服务与跨设备同步等功能。 立即进入“☞☞☞☞☞点击夸克资源网(永久免费)入口☜☜☜☜☜”; 立即进入“☞☞☞☞☞点击夸克浏览器电脑网页版访问入口☜☜…

    2026年9月22日
    500
  • 如何查询命令所属包 yum provides反向查找

    如何查询命令所属包 yum provides反向查找如何查询命令所属包 yum provides反向查找如何查询命令所属包 yum provides反向查找如何查询命令所属包 yum provides反向查找

    使用 yum provides 可以查找某个命令或文件属于哪个软件包,解决“command not found”问题。1. 使用时建议带上完整路径,如 yum provides /usr/sbin/ifconfig;2. 支持通配符模糊查找,如 yum provides */python3;3. 若…

    2026年9月22日 用户投稿
    000
  • RAID 0阵列对NVMe SSD性能的提升与数据安全风险分析

    RAID 0通过多NVMe SSD并行提升读写性能,理论速度翻倍且显著优化高负载响应,但无冗余导致任一硬盘故障即全阵列崩溃,数据恢复极难,仅建议用于可接受高风险的临时工作或性能优先场景,并必须配合外部备份。 raid 0通过将数据条带化分布在多个存储设备上,理论上可提升读写性能。在搭配nvme ss…

    用户投稿 2026年9月22日
    200
  • SonyCatalyst如何制作高质量AI视频?专业工具剪辑AI内容的指南

    Sony Catalyst通过素材筛选、视觉修正、色彩校正、细节雕琢与音频优化,将AI生成的粗胚视频精修为具备叙事感与视觉一致性的专业作品,其强大色彩管理、稳定器与降噪工具有效解决AI视频的抖动、噪点、色彩偏差等问题,并支持高分辨率素材处理与跨平台输出,实现AI内容与传统剪辑流程的高效融合。 ☞☞☞…

    2026年9月22日
    000
  • 谷歌浏览器窗口透明边框显示异常如何修复

    首先尝试修改快捷方式添加–disable-gpu –disable-software-rasterize参数,若可正常运行则关闭硬件加速,并重置chrome://flags实验功能及清除ShaderCache缓存文件。 谷歌浏览器出现窗口透明边框显示异常,通常和硬件加速或GP…

    2026年9月22日
    000
  • VSCode配合Quartus开发FPGA(环境设置教程,提高开发效率)

    使用VSCode配合Quartus开发FPGA可提升效率,核心是结合VSCode的代码编辑功能与Quartus的编译仿真能力。首先安装Quartus、VSCode及Python,再安装VHDL/Verilog插件和Makefile Tools等扩展。配置系统环境变量,将Quartus命令路径加入PA…

    2026年9月22日
    100
  • 如何在Dask中训练AI大模型?分布式数据处理的AI训练技巧

    如何在Dask中训练AI大模型?分布式数据处理的AI训练技巧如何在Dask中训练AI大模型?分布式数据处理的AI训练技巧如何在Dask中训练AI大模型?分布式数据处理的AI训练技巧如何在Dask中训练AI大模型?分布式数据处理的AI训练技巧

    Dask在处理超大规模数据集时的独特优势在于其Python原生的分布式计算能力,能无缝扩展Pandas和NumPy的工作流,突破单机内存限制,实现高效的数据预处理与模型训练。它通过惰性计算、分块处理和内存溢写机制,支持TB级数据的并行操作,相比Spark提供了更贴近Python数据科学生态的API和…

    2026年9月22日 用户投稿
    100
  • 如何设置Linux用户磁盘配额 xfs_quota配置完整流程

    如何设置Linux用户磁盘配额 xfs_quota配置完整流程如何设置Linux用户磁盘配额 xfs_quota配置完整流程如何设置Linux用户磁盘配额 xfs_quota配置完整流程如何设置Linux用户磁盘配额 xfs_quota配置完整流程

    linux用户磁盘配额是通过xfs_quota工具配置,以限制用户或组的磁盘空间和文件数量。1. 确认文件系统为xfs并安装xfsprogs;2. 修改/etc/fstab启用usrquota和grpquota后重新挂载;3. 使用xfs_quota初始化数据库;4. 用limit命令设置用户或组的…

    2026年9月22日 用户投稿
    000
  • php-gd怎么应用复古滤镜_php-gd图像怀旧色调处理

    使用PHP-GD库实现复古滤镜主要通过色调偏移和色彩调整模拟老照片效果。1. 色调偏黄褐色:先转灰度,再用imagefilter添加棕黄色调;2. 手动像素级调整:逐像素计算灰度并赋予暖色系值,降低饱和度;3. 增强质感:结合对比度降低与轻微模糊提升真实感;4. 示例流程包括加载图像、应用滤镜、输出…

    2026年9月22日
    200
  • 家庭NAS搭建:硬件选型与RAID模式对传输速度的影响

    家庭NAS搭建需综合考虑CPU、内存、硬盘接口、网络和RAID模式。CPU至少四核,内存8GB起,推荐N5105/N100或AMD嵌入式处理器;千兆网口成瓶颈,应升级至2.5G/10G;SATA III限制SSD性能,建议支持NVMe主板。RAID 0提升速度但无冗余,RAID 1保障安全但写速低,…

    2026年9月22日
    100
  • VSCode调试FPGA的UART通信(串口数据分析,调试技巧)

    使用VSCode调试FPGA的UART通信,核心是通过其扩展生态集成串口监视与数据分析。首先确保FPGA的UART模块正常工作并输出调试信息,然后在VSCode中安装“Serial Monitor”等串口扩展,配置波特率、端口号以捕获数据。为解析十六进制或自定义协议数据,可结合Python脚本通过t…

    2026年9月22日
    000
  • 如何扫描Linux本地网络 nmap基础扫描技巧

    如何扫描Linux本地网络 nmap基础扫描技巧如何扫描Linux本地网络 nmap基础扫描技巧如何扫描Linux本地网络 nmap基础扫描技巧如何扫描Linux本地网络 nmap基础扫描技巧

    快速扫描整个子网可使用 sudo nmap -sn 192.168.1.0/24,用于发现活跃主机;若防火墙屏蔽icmp请求,可加 -pe 参数提高准确性。2. 扫描单台设备开放端口用 sudo nmap 192.168.1.100,默认扫描1000个常见端口,或加 -p- 扫描全部端口,并可用 -…

    2026年9月22日 用户投稿
    100
  • win10无法修改默认应用_Win10设置中更改默认程序失败的解决方法

    首先通过“设置”应用重新分配默认程序,若无效则使用PowerShell移除预装应用障碍,最后可手动修改注册表重置文件关联,三步解决Windows 10默认程序无法保存问题。 如果您尝试在Windows 10的设置中更改文件类型的默认打开程序,但发现设置无法保存或立即恢复为原程序,则可能是由于系统策略…

    2026年9月22日
    500
  • 如何在mysql中监控用户操作日志

    MySQL默认不记录用户操作日志,但可通过启用通用查询日志记录所有SQL操作,或使用二进制日志追踪数据变更,也可部署审计插件实现细粒度监控,结合独立账号管理和日志轮转策略提升安全性与可追溯性。 MySQL 本身不默认记录用户的所有操作日志,但可以通过启用特定的日志功能来实现对用户行为的监控。以下是几…

    2026年9月22日
    100
  • Android自定义开关UI实现教程

    本文详细介绍了在Android应用中实现自定义开关UI的两种主要方法:一是通过集成第三方库如StickySwitch,快速实现美观且功能丰富的开关;二是通过结合Drawable XML和ToggleButton,实现高度定制化的开关外观。文章提供了详细的代码示例和配置说明,旨在帮助开发者灵活地创建符…

    2026年9月22日
    000
  • 爱应用pc版官网访问地址 爱应用pc版平台官方链接直达首页

    爱应用PC版官网访问地址是http://www.xapcn.com/,该软件为WP7/WP8手机提供资源管理、软件游戏免费安装等服务。 爱应用pc版官网访问地址在哪里?这是不少网友都关注的,接下来由PHP小编为大家带来爱应用pc版平台官方链接直达首页,感兴趣的网友一起随小编来瞧瞧吧! http://…

    2026年9月22日
    100

发表回复

登录后才能评论
关注微信