文章目录
- 数据结构概览
- 常用数据创建函数
- 创建DataFrame
- 创建Series
- 数据操作函数
- 选择数据
- 修改数据
- 删除数据
- 数据清洗函数
- 处理缺失值
- 数据转换函数
- 数据类型转换
- 数据排序
- 数据聚合函数
- 描述性统计
- 聚合函数
- 数据合并函数
- 纵向合并
- 横向合并
- 数据分组函数
- 分组和聚合
- 时间序列函数
- 时间序列重采样
- 数据导出与导入函数
- 导出到CSV
- 从CSV导入
- 导出到Excel
- 从Excel导入
- 结语
Pandas是Python中用于数据分析和操作的一个极其强大的库。它提供了快速、灵活和富有表达力的数据结构,旨在使数据清洗和分析工作变得更加简单易行。在这篇博客中,我们将深入探讨Pandas中一些最常用的函数及其参数.
数据结构概览
Pandas主要有两种数据结构:
- Series:一维数组,可以包含任何数据类型。
- DataFrame:二维表格型数据结构,可以将其想象为一个Excel电子表格。
常用数据创建函数
创建DataFrame
import pandas as pddata = {'Column1': [1, 2, 3, 4],'Column2': ['a', 'b', 'c', 'd'],'Column3': [True, False, True, False]
}
df = pd.DataFrame(data)
创建Series
s = pd.Series([1, 3, 5, 7], index=['a', 'b', 'c', 'd'])
数据操作函数
选择数据
# 选择单个列,返回Series
column = df['Column1']# 使用条件表达式选择行
filtered_data = df[df['Column1'] > 2]
修改数据
# 修改DataFrame列名
df.rename(columns={'Column1': 'NewColumn1'}, inplace=True)# 修改Series索引
s.set_index(['a', 'b', 'c', 'd'], inplace=True)
删除数据
# 删除列
df.drop('Column2', axis=1, inplace=True)# 删除行
df.drop(df[df['Column1'] < 3].index, inplace=True)
数据清洗函数
处理缺失值
# 删除含有缺失值的行或列
df.dropna(axis=0, how='any', inplace=True)# 填充缺失值
df.fillna(value=0, inplace=True)
数据转换函数
数据类型转换
# 将列转换为不同的数据类型
df['Column1'] = df['Column1'].astype(str)
数据排序
# 根据某个列的值排序DataFrame
df.sort_values(by='Column1', ascending=False, inplace=True)
数据聚合函数
描述性统计
# 计算统计数据
df.describe()
聚合函数
# 使用agg()函数同时应用多个聚合函数
df.agg(['sum', 'min', 'max'])
数据合并函数
纵向合并
# 纵向堆叠DataFrame
result = pd.concat([df1, df2], ignore_index=True)
横向合并
# 基于某个键合并DataFrame
result = pd.merge(df1, df2, on='CommonColumn', how='inner')
数据分组函数
分组和聚合
# 按列值分组并计算每组的均值
grouped = df.groupby('Column2').mean()
时间序列函数
时间序列重采样
# 将时间序列数据按月重采样并求均值
resampled_data = df.resample('M').mean()
数据导出与导入函数
导出到CSV
# 将DataFrame导出到CSV文件
df.to_csv('output.csv', index=False)
从CSV导入
# 从CSV文件读取数据
df_from_csv = pd.read_csv('input.csv')
导出到Excel
# 将DataFrame导出到Excel文件
df.to_excel('output.xlsx', index=False)
从Excel导入
# 从Excel文件读取数据
df_from_excel = pd.read_excel('input.xlsx')
结语
Pandas库提供了丰富的函数,用于数据的导入、处理、分析和导出。掌握这些函数及其参数,将极大地提升您的数据处理能力。无论是数据清洗、转换、聚合还是可视化,Pandas都是数据分析领域中不可或缺的工具。