总结了Pandas实现数据清洗的7种方式
最近在做“对比excel,学习pandas系列”,前面发了一篇 很受读者喜爱,今天给大家介绍一下excel和pandas实现数据清洗的种方式 1.处理数据中的空值 我们在处理真实总结的数据时,往往会有很多缺少的的特征数据,就是所谓的空值,必须要进行处理才能进行下一步分析 空值的处理方式有很多种,一般是删除或者填充 Excel通过“查找和替换”功能实现空值的了P统一替换: 通过“定位”删除空值: pandas处理空值的方式比较灵活,可以使用dropna函数删除空值 import pandas as pd andata=pd.read_csv('成绩表.csv',encoding='gbk') data.dropna(how='any') 用fillna函数实现空da值的填充 ①使用数字0填充数据表中的空值 data.fillna(value=0) ②使用平均值填充数据表中的空值 data['语文'].fills实na(data['语文'].mean()) 2.删除空格 excel中清理空格很简单,直接替换即可 pandas删除空格也很方便,主要使用map函数 data['姓名']=da现数ta['姓名'].map(str.strip) data 3.大小写转换 excel中大小写转换函数分别为upper()和lower() pandas中转换据清函数也为upper()和lower() data['拼音']=data['拼音'].str.upper() data data['拼音']=data['拼音']洗的.str.lower() data 4.更改数据格式 excel中更改数据格式通过快捷键“ctrl+1”打开“设置单元格格式”: pandas使用astype来修改7种数据格式,以将“语文”列改成整数为例 data['语文'].dropna(how='any').astype('int') 5.更改列名称 excel中更改列名称就不说了方式,大家都会 pandas使用rename函数更改列名称,代码如下: data.rename(columns={'语文':'语文成绩'}) 6.删除重复值 excel的功总结能区“数据”下有“删除重复项”,可以用来删除表中的重复值,默认保留最第一个重复值,把后面的删除: pandas使用drop_duplicates函数删除重复值: data['数学了P'].drop_duplicates() #默认删除后面的重复值 data['数学'].drop_duplicates(keep='last')&nbansp;#删除第一项重复值 7.修改及替换数据 excel中使用“查找和替换”功能实现数值的替换 pandas中使用replace函数实现数据替换 data['姓名'].repldaace('成 功','失 败')
- 最近发表
- 随机阅读
-
- 标签: 零售业 盒马
- 标签: 特斯拉 Model Y 挪威 欧洲市场
- 标签: 千里科技 千里智驾 奔驰 吉利
- 世界自然遗产有哪些
- AI 摘要与社交媒体双重夹击:维基百科人工流量骤降8% 敲响警钟
- 标签: Cursor AI编程助手 Accel Coatue
- GAN靠「伪造思维」登上Nature子刊:首次合成神经活动数据
- 云计算开发:Python3-List index()方法详解
- 标签: 抖音 推荐算法 双塔模型 Wide&Deep
- IBM财报不及预期股价大跌7% 新管理层转型云计算效果欠佳
- 百万颗定制AI芯片上阵!亚马逊与Anthropic联手打造全球最大安全AI算力集群
- 标签: 百融云 MaaS BaaS 金融云
- Twitter发布新产品Birdwatch:让用户协助打击错误信息
- 教育部再增37个高校新专业,人工智能类占1/3
- 阿里云季度营收首次超过200亿元 计划为全新操作系统投入20亿专项资金
- 标签: 绿捷公司 光明食品 校园餐 张某华
- 标签: 宏明电子 深交所 创业板 阻容元器件
- 扎克伯格让步了,但Facebook在全球的麻烦才刚刚开始
- 消息称阿里云削减政企定制项目和IoT硬件集成业务
- 标签: LongCat-2.0 美团 大模型 MoE
- 搜索
-
- 友情链接