Python 数据清洗实战——缺失值、异常值、重复值处理
实际数据很少是干净的缺失值、异常值、重复值都需要处理。这篇用 pandas 把这三种情况说清楚。一、缺失值处理importpandasaspdimportnumpyasnp# 查看缺失值print(df.isnull().sum())# 删除缺失值df.dropna(subset[姓名],inplaceTrue)# 填充缺失值df[年龄].fillna(df[年龄].mean(),inplaceTrue)# 均值填充df[工资].fillna(df[工资].median(),inplaceTrue)# 中位数填充df[部门].fillna(未知,inplaceTrue)# 固定值填充df[评分].fillna(methodffill,inplaceTrue)# 前向填充二、异常值处理# Z-score 法fromscipyimportstats znp.abs(stats.zscore(df[工资]))dfdf[z3]# 去掉 Z-score 3 的# IQR 法Q1df[工资].quantile(0.25)Q3df[工资].quantile(0.75)IQRQ3-Q1 dfdf[(df[工资]Q1-1.5*IQR)(df[工资]Q31.5*IQR)]三、重复值处理# 查看重复print(df.duplicated().sum())print(df.duplicated(subset[姓名]).sum())# 删除重复df.drop_duplicates(inplaceTrue)df.drop_duplicates(subset[姓名],keeplast,inplaceTrue) 觉得有用的话点赞 关注【张老师技术栈】吧

相关新闻

SpringBoot 整合 JWT——Token 认证与自动刷新

SpringBoot 整合 JWT——Token 认证与自动刷新

Session 方式在分布式环境下不好用,JWT(JSON Web Token)是目前主流的无状态认证方案。服务端不需要存 Session,Token 中包含了用户信息。 一、JWT 结构 header.payload.signatureheader: 加密算法 payload: 用户数据&#xff08…

2026/7/19 0:44:00 阅读更多 →
SpringBoot 整合 Nacos 配置中心——配置集中管理

SpringBoot 整合 Nacos 配置中心——配置集中管理

当服务数量增多时,修改一个配置要在每个服务上改一遍,非常麻烦。Nacos 配置中心可以把所有配置集中管理,修改后实时生效,无需重启。 一、部署 Nacos docker run -d \--name nacos \-p 8848:8848 \-e MODEstandalone \nacos/nacos-…

2026/7/19 0:44:00 阅读更多 →
算法面试——二叉树遍历:递归、非递归、重建二叉树

算法面试——二叉树遍历:递归、非递归、重建二叉树

二叉树遍历是算法面试的绝对基础。递归写法要熟练,非递归写法要能手撕。 一、前序遍历 void preorder(TreeNode root) {if (root null) return;System.out.print(root.val " ");preorder(root.left);preorder(root.right); }void preorderIter(TreeNode…

2026/7/19 0:44:00 阅读更多 →

最新新闻

RAGAS 评测分数不稳定?5 种方案抑制 LLM 裁判幻觉与波动

RAGAS 评测分数不稳定?5 种方案抑制 LLM 裁判幻觉与波动

RAGAS 评测分数不稳定?5 种方案抑制 LLM 裁判幻觉与波动 写在前面 很多同学刚上手 RAGAS 评测时都会遇到一个共性坑:同一条测试用例跑两次,分数浮动很大;甚至会出现反直觉的情况 —— 回答更完整、信息更全的答案,得分…

2026/7/19 2:07:33 阅读更多 →
初级Java开发面试题大变天!不是门槛降了,是筛选方式改了

初级Java开发面试题大变天!不是门槛降了,是筛选方式改了

Java 岗位门槛不是降低了,而是换了一套筛选方式很多人以为 AI 会降低 Java 岗位门槛。在表面上瞧着, 似乎是这般情形。以往的时候, 得自己去书写 、、, 然而现如今, AI 能够助力你去生成;以前查找文档那可得耗费好些时间, 如今只要问上一句, 就会有答案呈…

2026/7/19 2:07:33 阅读更多 →
Entity Framework Core 核心原理与实战优化指南

Entity Framework Core 核心原理与实战优化指南

1. Entity Framework 核心概念解析Entity Framework(简称EF)是微软推出的.NET平台下的对象关系映射(ORM)框架。作为数据访问层的革命性工具,它彻底改变了.NET开发者与数据库交互的方式。我在实际项目中使用EF已有8年时…

2026/7/19 2:07:33 阅读更多 →
Agent 代表谁行动:可信主体为什么不能来自模型输出?

Agent 代表谁行动:可信主体为什么不能来自模型输出?

关键词:AI Agent 身份认证、Agent 代表用户操作、可信行动主体、Agent 越权、业务系统授权一个 Agent 可以生成格式完全正确的工具参数,却仍然没有资格发起这次行动。 假设退款工具收到: {"order_id": "ORD-1042","…

2026/7/19 2:07:33 阅读更多 →
企业智能体编排实战:从Claude API集成到业务流程自动化

企业智能体编排实战:从Claude API集成到业务流程自动化

在企业数字化转型浪潮中,智能体技术正成为提升运营效率的关键工具。然而,近期行业调查显示,71% 号称"智能体"的企业解决方案本质上仍是传统聊天机器人的包装升级,真正实现复杂业务流程编排能力的案例不足三成。在模型提…

2026/7/19 2:07:33 阅读更多 →
多机器人协同路径规划 是指多个机器人(或农业机械)在共享环境中,通过信息交互、任务分配和协调机制,共同完成覆盖、运输、监测等任务的路径规划技术

多机器人协同路径规划 是指多个机器人(或农业机械)在共享环境中,通过信息交互、任务分配和协调机制,共同完成覆盖、运输、监测等任务的路径规划技术

多机器人协同路径规划(Multi-Robot Collaborative Path Planning) 是指多个机器人(或农业机械)在共享环境中,通过信息交互、任务分配和协调机制,共同完成覆盖、运输、监测等任务的路径规划技术。它是农业机…

2026/7/19 2:06:33 阅读更多 →

日新闻

Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/19 0:00:40 阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/19 0:00:40 阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/19 0:00:40 阅读更多 →

周新闻

Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/19 0:00:40 阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/19 0:00:40 阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/19 0:00:40 阅读更多 →

月新闻