本教程详细介绍了如何将DataFrame中包含字典列表的复杂列展开为新的、扁平化的DataFrame。文章提供了两种主要的解决方案：一种利用`str`访问器和`apply(pd.Series)`处理列表中的单个字典，另一种则通过引入默认字典结构来更健壮地处理空列表或缺失值，确保数据转换的完整性和准确性。

从包含字典列表的DataFrame列创建新DataFrame

在数据处理中，我们经常会遇到DataFrame的某一列存储着复杂的数据结构，例如字典列表。将这些复杂结构展开为新的、独立的列是数据清洗和分析的关键步骤。本教程将介绍如何高效地实现这一转换，并处理可能出现的空列表或缺失值情况。

场景描述与初始数据

假设我们有一个DataFrame，其中一个名为stats的列包含了不同长度的列表，每个列表可能包含一个字典或为空。我们的目标是将这些字典中的键（如city和last_time）提取出来，作为新的列添加到DataFrame中。

示例输入数据：

import pandas as pd
import numpy as np

df = pd.DataFrame(
    {
        "stats": [
            [{"city": None, "last_time": 1234567}],
            [],
            [{"city": "Seattle", "last_time": 45678999876}]]
    }
)

print("原始DataFrame:")
print(df)

输出：

原始DataFrame:
                               stats
0  [{'city': None, 'last_time': 1234567}]
1                                     []
2  [{'city': 'Seattle', 'last_time': 45678999876}]

我们期望的输出是一个包含city和last_time两列的DataFrame，其中第二行（对应原始的空列表）应显示为NA或None。

解决方案一：使用 str 访问器和 apply(pd.Series)

如果可以确定列表通常只包含一个字典，或者我们只关心列表中的第一个字典，那么结合使用Series.str访问器和apply(pd.Series)是一种简洁有效的方法。

1. df["stats"].str[0]:
   • str访问器允许我们对Series中的字符串或列表元素执行字符串/列表操作。
   • str[0]会尝试访问每个列表的第一个元素。如果一个元素不是列表，或者列表为空，它将返回NaN。
2. .apply(pd.Series):
   • 对于str[0]返回的每个字典（或NaN），apply(pd.Series)会将其转换为一个Pandas Series。
   • Pandas在将这些Series堆叠时，会自动将字典的键转换为新的列名。对于NaN值，它会相应地填充NaN。

实现代码：

# 方案一：直接提取第一个字典并展开
# 注意：此方法对于空列表会产生NaN，后续可以根据需要进行处理
out1 = df["stats"].str[0].apply(pd.Series)

print("\n方案一输出:")
print(out1)

输出：

方案一输出:
      city      last_time
0      NaN     1234567.00
1      NaN            NaN
2  Seattle 45678999876.00

注意事项：

PHPWind 9.0 模板开发

PHPWind（简称：PW，中国国家版权局著作权登记号为:2004SR06082）的使命是让网站更具价值，让更多人从网络中享受便利，以提升生活品质。 PHPWind的两位创始人王学集、林耀纳于2003年发布了PHPWind的前身版本ofstar，并发展成为包含BBS、CMS、博客、SNS等一系列程序的通用型建站软件。至今累计已有超过120万网站使用phpwind，每天还有1000个新增网站，这些

271 查看详情

• 此方法简洁，但对于原始数据中的city: None，Pandas会将其识别为缺失值并显示为NaN。
• 对于空列表[]，str[0]会返回NaN，进而.apply(pd.Series)也会为对应的行生*NaN。
• 如果列表可能包含多个字典，此方法只会处理第一个字典。

解决方案二：更健壮地处理空列表和缺失值

在某些情况下，我们可能希望对空列表或None值有更明确的控制，例如用一个默认的字典结构来填充，以确保所有行都有相同的列结构，即使数据缺失。

1. stats = df["stats"].str[0]: 同方案一，先尝试提取第一个字典。
2. templ = dict.fromkeys(["city", "last_time"]): 创建一个默认字典模板，其键与我们期望的输出列名一致，值为None。
3. stats.where(stats.notnull(), templ):
   • Series.notnull() 返回一个布尔Series，指示哪些元素不是NaN。
   • Series.where(condition, other) 方法会根据condition替换Series中的值。如果condition为False（即元素为NaN），则使用other（即我们的templ字典）来替换。
   • 这样，原始的空列表（在str[0]后变为NaN）现在会被{'city': None, 'last_time': None}这个默认字典替换。
4. .apply(pd.Series): 再次使用apply(pd.Series)来展开所有字典。

实现代码：

# 方案二：处理空列表，用默认字典填充
stats_series = df["stats"].str[0]
# 创建一个默认字典，用于填充空列表转换后的NaN
templ = dict.fromkeys(["city", "last_time"])

# 使用where方法，如果stats_series中的元素为NaN（来自空列表），则用templ填充
out2 = stats_series.where(stats_series.notnull(), templ).apply(pd.Series)

print("\n方案二输出:")
print(out2)

输出：

方案二输出:
      city      last_time
0      NaN     1234567.00
1     None            NaN
2  Seattle 45678999876.00

对比与分析：

• 第一行 (city: None): 两种方案都将None处理为NaN。这是Pandas在处理混合类型数据时的常见行为，尤其是在数值列中，None通常会被转换为NaN。如果需要保留None作为字符串，可能需要后续类型转换。
• 第二行 (空列表 []):
  • 方案一直接将其转换为全NaN行。
  • 方案二将其转换为{'city': None, 'last_time': None}，然后展开。这使得city列显示None，last_time列显示NaN（因为None在数值列中会被转换为NaN）。这种处理方式在某些情况下更符合预期，因为它明确表示了这些字段的缺失。

总结与最佳实践

在从包含字典列表的DataFrame列创建新DataFrame时，选择哪种方法取决于您的具体需求和数据特性：

• 如果您的列表总是包含一个字典，且对空列表直接生成NaN可以接受，或者您会进行后续的缺失值处理，那么方案一（df["column"].str[0].apply(pd.Series)）是最简洁高效的选择。
• 如果您需要更精细地控制空列表或NaN值的填充行为，例如用一个预定义的结构来表示缺失数据，那么方案二（结合where和默认字典）提供了更强的鲁棒性。

在实际应用中，处理完数据展开后，您可能还需要进一步进行数据类型转换（例如，将city列的NaN转换为字符串"NA"或None），以满足后续分析的需求。

# 最终数据类型和缺失值处理示例 (基于out2)
out_final = out2.copy()
# 将city列的NaN替换为"NA"，并将None转换为字符串"None"
out_final['city'] = out_final['city'].replace({np.nan: 'NA', None: 'None'})
# last_time列的NaN保持不变，或根据需要填充
# out_final['last_time'] = out_final['last_time'].fillna(0) # 示例：填充0

print("\n最终处理后的输出示例:")
print(out_final)

输出：

最终处理后的输出示例:
    city      last_time
0     NA     1234567.00
1   None            NaN
2  Seattle 45678999876.00

通过上述方法，您可以灵活高效地处理DataFrame中复杂嵌套的数据结构，将其转换为更易于分析的扁平化格式。

以上就是从DataFrame中包含字典列表的列创建新DataFrame的详细内容，更多请关注其它相关文章！

# 数据清洗  # 转换为  # 自定义  # 第一个  # 将其  # 数据结构  # 您的  # 两种  # 国家版权局  # app  # 关键词排名被降权  # 重庆通用营销推广中心  # 内江抖音seo免费咨询  # 自贡官网seo推广  # 惠州网站建设设计外包  # sem优化推广网站  # 网络营销seo培训课程  # 布吉网站建设公司哪个好  # 网站还需要优化什么  # 周口网站seo  # 如何用  # 创建一个 

相关栏目： 【 科技资讯46185 】 【 网络学院92790 】

相关推荐： 微博网页版主页入口 微博官方网站免登录访问  漫蛙MANWA漫画主页官方入口 漫蛙漫画最新在线阅读地址  AO3官网镜像链接 Archive of Our Own同人文在线浏览  解决macOS Tkinter应用双击启动崩溃：PyInstaller打包指南  解决Python单元测试中Mock异常方法调用计数为零的问题  顺丰快件物流信息 官方网站查询入口  12306选座系统怎么选连座_12306选座多人连坐操作方法  谷歌学术网站直达地址 谷歌学术搜索网页版一键进入  J*aScript中正确使用querySelectorAll与复杂CSS选择器  Linux如何排查内存不足OOME问题_LinuxOOM分析教程  React/Next.js中实现列表项的动态选择与移动  Win11怎么用U盘重装系统 Win11制作启动盘并重装系统完整教程【详解】  解决Tabulator日期时间排序问题的专业指南  机器学习中对数变换预测结果的反向还原  中兴Axon42Ultra怎样在文件App筛图_iPhone中兴Axon42Ultra文件App筛图【图片筛选】  Descript怎样用AI剪辑自动去噪_Descript用AI剪辑自动去噪【自动降噪】  百度网盘网页版入口 百度网盘网页版官方登录网址  c++中的std::launder有什么实际用途_c++对象生命周期与指针优化  Win10如何恢复误删的快捷方式_Win10重建常用软件快捷方式  C++如何打印当前代码行号与文件名_C++预定义宏FILE与LINE的使用  Golang如何实现简单的Web表单_Golang表单提交与验证处理方法  微信聊天记录怎么加密_微信聊天记录加密方法  Python实时数据流中的动态最值查找策略  钉钉视频会议声音异常如何处理 钉钉会议音频修复技巧  Mac怎么查看崩溃日志_Mac控制台错误报告分析  VS Code远程开发时如何处理文件权限问题  wps文字怎么插入目录并自动更新_wps文字如何插入目录并自动更新方法  怎样在Excel中做仪表盘_Excel仪表盘设计与关键指标展示方法  印象笔记怎样用批量导出备知识库_印象笔记用批量导出备知识库【备份方法】  j*a toString()的覆盖  C++的std::mdspan是什么_C++23中用于操作多维数组的非拥有视图  快手极速版在线观看 官方网页版登录地址  海棠账号登录入口_登录海棠账户同步阅读记录  Spyder启动失败：字体文件权限拒绝错误解决方案  Win11如何开启讲述人功能 Win11屏幕阅读器（讲述人）开启与关闭【教程】  解决移动端滚动问题的overflow属性应用指南  Python多版本共存与虚拟环境管理深度指南  qq游戏跨平台入口_qq游戏多设备同步登录  AO3最新镜像入口 Archive of Our Own官方平台访问  2026年发布！ 美少女养成动作RPG《神剑少女战记》发布实机演示  蛙漫2日版入口 WAMAN2(日版)无删减漫画官网链接  PDO预处理语句中冒号的正确处理：区分SQL函数格式与命名占位符  怎样把文件彻底粉碎无法恢复_Windows下安全删除敏感数据【隐私保护】  Composer的 "licenses" 命令如何帮助你遵守开源协议_检查项目依赖的许可证合规性  星露谷物语官网入口 星露谷物语游戏官网入口  外媒分析《GTA6》定价：卖100美元可以但真没必要！  vivo浏览器怎么扫描二维码 vivo浏览器内置扫一扫功能使用方法  批改网学生版PC登录 批改网官网登录系统入口  解决深度学习模型训练初期异常高损失与完美验证准确率问题  字由网在线版登录地址 字由网网页版安全入口