概述
pandas常用功能手册(自用)
文章目录
- 前言
- 一、创建
- 多个数组>>dateframe
- 增加一列
- 二、读取数据
- 三、常用操作
- 取数据
- 随机取n行
- 上下合并
- 循环读取数据+tqdm进度条
- 查询数据
- menrge拼接
- 修改列名
- 分组
- 去重
- 去除某列空值
- 四、保存文件
- 输出excel
- 输出csv
- 是否存在文件夹,没有则创建
- 总结
前言
pandas常用功能手册(自用)
pandas常用功能手册(自用),持续更新
一、创建
多个数组>>dateframe
pd_before = pd.DataFrame()
pd_before['new_x'] = new_x
pd_before['new_y'] = new_y
pd_before['new_plabel'] = new_plabel
pd_before['new_pinfo'] = new_pinfo
增加一列
df_info_simple['drug'] = drug_new_list
二、读取数据
读excel
df_drug_gene = pd.read_excel('../F1A-drug-go.xlsx', header = 0)
# header = 0 带列名数据
三、常用操作
取数据
已知列名,取指定列
df_drug_gene = df_drug_gene[['drug', 'gene']]
已知序号,取指定列
df.iloc[:, n]
# 取第1行
print(df.iloc[0])
# 取前10行
print(df.iloc[:10])
# 取第1列
print(df.iloc[:, 0])
# 取前10列
print(df.iloc[:, :10])
随机取n行
pd_data_neg = pd_data.sample(n=pd_data_pos.shape[0])
上下合并
pd_data_train = pd.concat([pd_data_pos, pd_data_neg])
循环读取数据+tqdm进度条
for index, row in tqdm(df.iterrows(), total=df.shape[0]):
row[1] == 1
查询数据
#满足条件的行
df.loc[df['A']=='A']
#也可以取满足条件范围的行
df.loc[df['B'] > 6]
data.iloc[:10,:]
# 存在某个字段
df[df['A'].isin(['A'])]
# 查找特定条件下的行索引
index = df[df.A == 'A'].index.tolist()[0]
menrge拼接
左拼接对齐
pd_result_1 = pd.merge(df_drug_gene, df_symmap_info, left_on = 'gene',
right_on = 'Gene_symbol', how = 'left')
修改列名
df_pw_Enrichment_result2.rename(columns={"go": "pw", "name": "pw_name"}, inplace=True)
分组
dict_id_drug = df_drug.groupby('ID').drug.apply(list).to_dict()
去重
df_new = pd_before.drop_duplicates(
subset = ['new_x', 'new_y'],
# 去重列,按这些列进行去重
keep = 'first'
# 保存第一条重复数据
)
去除某列空值
df_book = df_book.dropna(subset=['content_id'])
四、保存文件
输出excel
pd_result_2.to_excel('../result/drug-gene.xlsx', index = False) # index = False 不保存列名
输出csv
注意中文乱码问题
pd_result_2.to_csv('../result/drug-gene.csv', index = False, encoding='utf_8_sig')
是否存在文件夹,没有则创建
import os
if not os.path.exists(save_path_dir):
os.makedirs(save_path_dir)
总结
提示:以上就是今天要讲的内容,本文仅仅简单介绍了pandas的使用,而pandas提供了大量能使我们快速便捷地处理数据的函数和方法。
最后
以上就是友好芹菜为你收集整理的pandas常用功能手册前言一、创建二、读取数据三、常用操作四、保存文件总结的全部内容,希望文章能够帮你解决pandas常用功能手册前言一、创建二、读取数据三、常用操作四、保存文件总结所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复