新闻中心

Pandas DataFrame行求和技巧:处理混合数据类型并避免0值结果

2025-11-21
浏览次数:
返回列表

Pandas DataFrame行求和技巧:处理混合数据类型并避免0值结果

在pandas dataframe中对包含混合数据类型的行进行数值求和时,直接使用`df.sum(axis=1, numeric_only=true)`可能因`numeric_only`参数的工作机制而导致0值结果。本文将深入解析此问题,并提供一种健壮的解决方案:通过结合`pd.to_numeric`与`errors='coerce'`对非数值元素进行预处理,确保只有可转换的数值参与求和,并进一步展示如何将求和结果格式化为时间间隔。

理解df.sum(numeric_only=True)的行为

当我们需要对Pandas DataFrame的行进行求和,并且行中包含字符串、列表等非数值类型时,一个常见的做法是使用df.sum(axis=1, numeric_only=True)。然而,如果您的DataFrame中包含类似“No hours logged”这样的字符串,或者以字符串形式存储的数字(如“29160”),即使使用了numeric_only=True,求和结果也可能出乎意料地显示为0.0。

这背后的原因是numeric_only参数的工作方式。根据Pandas官方文档,numeric_only=True参数用于“只包含浮点型、整型、布尔型列”。这意味着Pandas在执行求和操作前,会检查整个列的数据类型。如果某一列中包含任何非数值类型(例如,即使只有一个单元格是字符串,整个列的dtype也可能被推断为object),那么这一整列都将被numeric_only=True排除在计算之外。

在我们的示例数据中,像'2025-11-28'这样的日期列,虽然大部分单元格看起来是数字的字符串,但它们实际存储的是字符串('29160'),甚至有明确的非数字字符串('No hours logged')和列表('[10:02, Odd number: missing entry]')。因此,这些列的dtype很可能是object,从而被numeric_only=True忽略,导致最终的total_hours列全部为0.0。

解决方案:使用pd.to_numeric进行数据预处理

要正确地对包含混合数据类型的行进行数值求和,我们需要在求和之前,将每个单元格中可转换为数字的值进行转换,并将不可转换的值优雅地处理掉。pd.to_numeric函数结合errors='coerce'参数是解决此问题的理想工具。

pd.to_numeric(x, errors='coerce')的工作原理如下:

  • 它会尝试将x(可以是Series或单个值)转换为数值类型。
  • 如果转换成功,则返回对应的数值。
  • 如果转换失败(例如,遇到'No hours logged'或'[10:02, Odd number: missing entry]'),并且errors参数设置为'coerce',那么该值将被替换为NaN(Not a Number)。NaN值在求和时会被默认忽略,从而不影响最终的数值结果。

实施步骤与示例代码

首先,我们准备示例数据:

import pandas as pd

data = {
    'id': {0: 514, 1: 2414, 2: 3225, 3: 3434, 4: 3864, 5: 4716, 6: 5793},
    'name': {0: 'alexis', 1: 'donald', 2: 'mackenzie', 3: 'louisa', 4: 'olga', 5: 'rick', 6: 'roberta'},
    '2025-11-28': {0: 'No hours logged', 1: '29160', 2: '28500', 3: '25380', 4: '15600', 5: '30180', 6: '29220'},
    '2025-11-29': {0: 'No hours logged', 1: '29160', 2: '28620', 3: '18840', 4: '19080', 5: '28800', 6: '29220'},
    '2025-11-30': {0: 'No hours logged', 1: '28860', 2: '28560', 3: '26040', 4: '14400', 5: '28740', 6: '29460'},
    '2025-12-01': {0: 'No hours logged', 1: '28620', 2: '28620', 3: 'No hours logged', 4: '13800', 5: '28620', 6: '29280'},
    '2025-12-02': {0: 'No hours logged', 1: '[10:02, Odd number: missing entry]', 2: '28980', 3: '25560', 4: '5220', 5: '28680', 6: '29340'},
    '2025-12-03': {0: 'No hours logged', 1: 'No hours logged', 2: 'No hours logged', 3: 'No hours logged', 4: '17820', 5: 'No hours logged', 6: 'No hours logged'},
    '2025-12-04': {0: 'No hours logged', 1: 'No hours logged', 2: 'No hours logged', 3: 'No hours logged', 4: 'No hours logged', 5: 'No hours logged', 6: 'No hours logged'},
    '2025-12-05': {0: 'No hours logged', 1: '28860', 2: '28740', 3: '24900', 4: '14400', 5: '28680', 6: '29040'},
}

df = pd.DataFrame(data)
print("原始DataFrame:")
print(df)

接下来,我们应用pd.to_numeric并进行求和:

# 注意:选择列时应从索引为2的列开始,即跳过 'id' 和 'name' 列
# 如果您的DataFrame结构不同,请相应调整列选择。
df['total_hours'] = (
    df.iloc[:, 2:] # 选择从第三列开始的所有列(日期列)
      .apply(lambda x: pd.to_numeric(x, errors='coerce')) # 对每列应用pd.to_numeric
      .sum(axis=1) # 对处理后的DataFrame按行求和
)

print("\n添加 'total_hours' 列后的DataFrame:")
print(df[['id', 'name', 'total_hours']])

代码解析:

CA.LA CA.LA

第一款时尚产品在线设计平台,服装设计系统

CA.LA 94 查看详情 CA.LA
  1. df.iloc[:, 2:]:这部分代码用于选择DataFrame中从第三列(索引为2)开始的所有列。在我们的示例中,这包括了所有日期相关的工时记录列,排除了id和name列。
  2. .apply(lambda x: pd.to_numeric(x, errors='coerce')):对选定的每一列(x代表一个Series),应用一个lambda函数。这个函数的核心是pd.to_numeric(x, errors='coerce'),它尝试将列中的每个元素转换为数值。如果转换失败,则替换为NaN。
  3. .sum(axis=1):对经过pd.to_numeric处理后生成的DataFrame(其中非数值已变为NaN)按行进行求和。Pandas的sum()函数默认会忽略NaN值,因此只有实际的数值会被加起来。

输出结果示例:

添加 'total_hours' 列后的DataFrame:
     id       name  total_hours
0   514     alexis          0.0
1  2414     donald     144660.0
2  3225  mackenzie     172025.0
3  3434     louisa     120720.0
4  3864       olga     100320.0
5  4716       rick     173700.0
6  5793    roberta     175560.0

现在,total_hours列正确地反映了每行中所有可转换数值的总和。

格式化总工时为时间间隔

由于求和结果是秒数,为了更直观地显示,我们可以将其转换为HH:MM或DD HH:MM:SS格式。Pandas提供了pd.to_timedelta函数,可以将秒数转换为时间间隔(timedelta)对象。

df['total_hours_formatted'] = pd.to_timedelta(df['total_hours'], unit='s')

print("\n格式化后的总工时:")
print(df[['id', 'name', 'total_hours_formatted']])

输出结果示例:

格式化后的总工时:
     id       name total_hours_formatted
0   514     alexis       0 days 00:00:00
1  2414     donald       1 days 16:11:00
2  3225  mackenzie       1 days 23:47:00
3  3434     louisa       1 days 09:32:00
4  3864       olga       1 days 03:52:00
5  4716       rick       2 days 00:15:00
6  5793    roberta       2 days 00:46:00

这样,总工时就被转换成了更易读的时间格式。

注意事项与总结

  • 列选择的准确性: 在应用apply和sum之前,务必确保您选择的是包含数值数据(即使是以字符串形式存在)的正确列。错误地包含了id或name等非日期/时间列,可能会导致额外的错误或不准确的结果。使用iloc进行基于位置的选择,或使用列名列表进行基于标签的选择都是有效的方法。
  • errors='coerce'的重要性: 如果不使用errors='coerce',pd.to_numeric在遇到非数字字符串时会抛出错误,中断程序执行。'coerce'参数是处理脏数据、确保代码健壮性的关键。
  • NaN值的处理: sum()函数默认会忽略NaN值。如果您的业务逻辑要求将NaN视为0参与求和,可以在sum()之前使用fillna(0)。
  • 数据类型一致性: 尽管本教程提供了处理混合数据类型的方案,但最佳实践是在数据导入或生成时就尽量保证数据类型的一致性。将数字存储为字符串会增加处理的复杂性。

通过以上方法,您可以有效地在Pandas DataFrame中对包含混合数据类型的行进行求和,避免因numeric_only参数误解而导致的0值结果,并灵活地格式化您的输出。

以上就是Pandas DataFrame行求和技巧:处理混合数据类型并避免0值结果的详细内容,更多请关注其它相关文章!


# 将被  # 铜梁县手机网站优化  # 微信标签营销推广的使用方法  # 西安软文品牌营销推广  # 营销策划和推广策划  # seo运营能赚多少钱  # 广西SEO排名团购  # 乌当区抖音seo哪家强  # 网站名字和seo标题  # 运营营销推广产品区别  # 乐山seo收费  # 时就  # app  # 整型  # 单元格  # 的是  # 布尔  # 浮点  # 转换为  # 您的  # 自定义  # mac  # 工具 


相关栏目: 【 科技资讯46185 】 【 网络学院92790


相关推荐: 抖音从哪里进入网页版_抖音官方入口链接  神经网络二分类模型训练异常:高损失与完美验证准确率的排查与修正  谷歌学术网站直达地址 谷歌学术搜索网页版一键进入  Win10如何开启蓝牙功能_Windows10找不到蓝牙开关解决方法  CSS Box Model与弹性按钮:维持布局稳定的动画实践  php源码怎么看淘宝客系统_看php源码淘宝客系统技巧  痛风发作了怎么办? 快速止痛和后期饮食调理  windows10怎么查看本机ip_windows10命令提示符ipconfig使用  192.168.1.1管理中心入口 192.168.1.1路由器网页设置平台  Excel组合图表怎么做 Excel创建柱状图与折线组合图教程【图表】  QQ邮箱官方邮箱登录入口 QQ邮箱网页版快速访问  cad怎么合并重叠的线段_cad清理重复重叠线条的操作方法  Spyder启动失败:字体文件权限拒绝错误解决方案  狙击外星人小游戏开始_狙击外星人小游戏立即开始  Lar*el 递归关系中排除指定分支的教程  Windows7怎么硬盘安装 Windows7提取ISO镜像到非系统盘并运行setup.exe实现硬盘直装【教程】  C++编译期如何执行复杂计算_C++模板元编程(TMP)技巧与应用  豆包手机助手发布技术预览版:直接嵌入手机系统!努比亚样机发售  mcjs网页版流畅运行 mcjs低配电脑畅玩入口  J*aScript中正确使用querySelectorAll与复杂CSS选择器  SteamMachine定价或为699美元 大家想入手吗?  win11 arm版怎么安装 M1/M2 Mac虚拟机安装ARM win11的方法  C#中解析不规范的HTML为XML 常见的坑与解决办法  c++如何实现一个简单的ECS框架_c++数据驱动设计与游戏开发  极速漫画官方主页网址 极速漫画漫画在线浏览官网链接  实现全屏滚动与导航点:专业教程  抖音隐秘迷城小游戏入口_ 抖音冒险解谜小游戏秒玩  Kafka Streams中基于消息头条件过滤消息的实现指南  Node.js CSV 数据处理:基于字段值条件过滤整条记录的策略  拼多多赚钱渠道_拼多多收益来源  VS Code远程开发时如何处理文件权限问题  动漫花园资源网使用步骤_动漫花园资源网下载流程  Win10怎么制作U盘启动盘 Win10系统安装U盘制作教程【详解】  ACG动漫视频网入口 ACG动漫*免费正版观看地址  《刺客信条4:黑旗》重制版新细节曝光:无缝加载 地图更细致!  win11如何加载ICC颜色配置文件 Win11校色文件安装与显示器色彩管理【指南】  淘宝支付提示失败如何解决 淘宝支付流程优化方法  如何在网页中实现特定地点的随机图片展示  零跑汽车11月交付量达70327台 实现连续9个月正增长  支付宝如何设置安全保护_支付宝安全设置的全面教程  PS5 Pro有点优势但不多! 《燕云十六声》PS5平台与PC性能画面对比  漫蛙Manwa2官网入口地址分享 漫蛙漫画PC版永久访问通道  c++中的std::launder有什么实际用途_c++对象生命周期与指针优化  手机屏幕碎了但能正常使用怎么办 手机外屏碎裂的修复建议  迅雷下载到U盘速度很慢怎么办_迅雷U盘下载慢优化方法  Python中如何避免重复条件判断:利用数据结构实现动态逻辑  处理动态列数据:J*a ArrayList的正确初始化与字符累加教程  Python异步编程实践:使用Binance API构建实时交易数据流  AO3网页版最新入口合集 Archive of Our Own在线访问指南  铁路12306改签能改到更早的车次吗_铁路12306改签提前车次规则 

搜索