📑 查看全课大纲(第 41 / 101 节)
- 1.数据分析基本概念
- 2.学习数据分析的一般路线
- 3.数据分析的流程
- 4.数据类型
- 5.环境部署(1)
- 6.环境部署(2)
- 7.课程介绍
- 8.TXT文件操作
- 9.JSON文件操作
- 10.CSV文件操作
- 11.Excel文件操作
- 12.数据库及SQL常用语法
- 13.数据库基本操作
- 14.数据库多表连接
- 15.实战:欧洲职业足球数据库分析
- 16.爬虫简介
- 17.URL管理模块
- 18.网页下载模块
- 19.网页解析模块(1)
- 20.网页解析模块(2)
- 21.Scrapy简介
- 22.Scrapy使用步骤(1)
- 23.Scrapy使用步骤(2)
- 24.Scrapy使用步骤(3)
- 25.Scrapy使用步骤(4)
- 26.实战:获取国内城市空气质量指数数据
- 27.NumPy和SciPy介绍
- 28.多维数组
- 29.多维数组操作
- 30.NumPy的常用方法
- 31.向量化介绍
- 32.向量化及通用函数
- 33.实战:2016美国大选分析
- 34.数据结构-Series
- 35.数据结构-DataFrame
- 36.数据结构-Index
- 37.Series的索引操作
- 38.DataFrame的索引操作
- 39.索引操作总结
- 40.运算与对齐
- 41.函数应用操作(1) -- map
- 42.函数应用操作 (2) -- apply applymap
- 43.文件读写操作
- 44.排序操作
- 45.数据清洗--处理缺失数据
- 46.数据清洗--处理重复数据
- 47.数据清洗--替换数据
- 48.常用统计方法(1) -- describe quantile
- 49.常用统计方法(2) -- sum mean median count
- 50.常用统计方法(3) -- max min idxmax idxmin
- 51.常用统计方法(4) -- mad var std cumsum
- 52.实战:全球食品数据分析
- 53.层级索引
- 54.分组与聚合介绍
- 55.分组操作(1) -- GroupBy对象及常用聚合操作
- 56.分组操作(2) -- 自定义分组及聚合操作
- 57.透视表介绍
- 58.透视表操作
- 59.数据规整(1) -- 数据合并concat
- 60.数据规整(2) -- 数据连接merge
- 61.数据重构(3) -- 数据重构stack unstack
- 62.实战:互联网电影资料库分析
- 63.探索性数据分析EDA介绍
- 64.EDA的目的
- 65.EDA常用工具
- 66.Matplotlib绘图基本介绍
- 67.Matplotlib画布
- 68.散点图和柱状图的绘制
- 69.直方图的绘制
- 70.矩阵绘图
- 71.子图的使用
- 72.Matplotlib颜色、标记、线型
- 73.Matplotlib坐标刻度、标签、图例、标题
- 74.Seaborn介绍
- 75.数据集分布可视化(1) -- 单变量分布、双变量分布
- 76.数据集分布可视化(2) -- 变量关系可视化
- 77.类别数据可视化 -- 类别散布图、类别内数据分布、类别内统计图
- 78.交互式数据可视化工具Bokeh介绍
- 79.Bokeh绘制散点图、柱状图、盒子图、弦图
- 80.Bokeh绘制常用图形元素
- 81.D绘图 -- mplot3d
- 82.D曲线可视化
- 83.D散点图可视化
- 84.D柱状图可视化
- 85.Pandas绘图
- 86.实战:Lending Club借贷数据探索性分析及可视化
- 87.机器学习介绍及应用场景
- 88.机器学习建模介绍 (1) -- 分类
- 89.机器学习建模介绍 (2) -- 回归
- 90.机器学习建模介绍 (3) -- 聚类
- 91.机器学习分类
- 92.机器学习工具scikit-learn
- 93.使用scikit-learn的流程
- 94.数据集准备及划分
- 95.模型选择
- 96.数据预处理及特征工程
- 97.过拟合与欠拟合
- 98.模型调参介绍
- 99.模型调参方法
- 100.模型测试及评价
- 101.实战:通过移动设备行为数据预测性别和年龄
函数应用操作(1) -- map
约 11 分钟
📺 正在播放小象官方高清录播(支持倍速与清晰度调节)
Pandas 元素级映射转换:Series.map() 方法与字典/函数映射精讲
小象实战讲义 · Python数据分析实战
在数据清洗和特征工程中,我们经常需要对某一列数据进行格式规整、离散编码转换、单位换算或词典查找映射(例如将性别编码 'M'/'F' 转换为 '男'/'女',或者将城市拼音映射为中文名称)。Pandas 提供的 Series.map() 是处理一维元素级映射转换最高效优雅的利器。它既支持接收一个 Python 字典 进行键值对匹配替换,也支持传入自定义函数或 Lambda 表达式 执行逐元素动态计算。本节我们将深入剖析 map() 的运行机制与典型实战场景。
💡 核心导读
Series.map()的定位:专属于 Series(一维数据列)的高性能元素级映射函数。- 两种核心参数形式:
- 字典映射(Dict Mapping):通过静态字典匹配键值,未匹配到的项默认返回
NaN; - 函数映射(Function / Lambda Mapping):对每个元素应用自定义函数逻辑。
- 字典映射(Dict Mapping):通过静态字典匹配键值,未匹配到的项默认返回
- 经典业务应用场景:分类变量重编码、单位标准化、手机号/敏感信息脱敏与特征衍生。
1. 基于字典的键值对快速映射与未匹配项处理
当传入字典时,map() 会将 Series 中的每个值作为 Key 去字典中查找对应的 Value:
┌─────────────────────────────────────────────────────────────┐
│ Series.map(dict) 映射模型 │
├───────────────────────┬──────────────┬──────────────────────┤
│ 原始数据 (Series) │ 映射字典 │ 转换后产物 │
├───────────────────────┼──────────────┼──────────────────────┤
│ 'BJ' │ {'BJ': '北京'│ '北京' │
│ 'SH' │ 'SH': '上海'│ '上海' │
│ 'GZ' │ 'SZ': '深圳'│ NaN (字典中未命中) │
│ 'SZ' │ } │ '深圳' │
└───────────────────────┴──────────────┴──────────────────────┘import pandas as pd
# 创建用户基础信息表格
df_users = pd.DataFrame({
"user_id": ["U101", "U102", "U103", "U104", "U105"],
"gender_code": ["M", "F", "F", "M", "U"],
"city_code": ["BJ", "SH", "GZ", "SZ", "HZ"],
"income": [12000, 18000, 9500, 25000, 15000]
})
print("=== 1. 原始用户数据 ===")
print(df_users)
# 1. 字典映射:将性别代码转为中文标签
gender_dict = {"M": "男", "F": "女", "U": "未知"}
df_users["gender_cn"] = df_users["gender_code"].map(gender_dict)
# 2. 字典映射城市名 (未在字典中的 HZ 将变为 NaN)
city_dict = {"BJ": "北京", "SH": "上海", "GZ": "广州", "SZ": "深圳"}
df_users["city_cn"] = df_users["city_code"].map(city_dict)
print("\n=== 2. 字典映射后的用户数据 ===")
print(df_users[["user_id", "gender_code", "gender_cn", "city_code", "city_cn"]])2. 基于函数与 Lambda 表达式的高级元素转换
除了静态字典,map() 还可以接收自定义函数,对每个单元格进行字符串切片、数学计算与业务分类。
# 1. 自定义函数:按收入水平划分收入阶梯
def categorize_income(val):
if val >= 20000:
return "高收入"
elif val >= 10000:
return "中等收入"
else:
return "大众收入"
df_users["income_level"] = df_users["income"].map(categorize_income)
# 2. Lambda 表达式:格式化金额展示 (带货币符号和千分位)
df_users["income_formatted"] = df_users["income"].map(lambda x: f"¥{x:,.2f}")
print("=== 3. 函数映射与格式化结果 ===")
print(df_users[["user_id", "income", "income_level", "income_formatted"]])📝 动手练一练
概念思考题:在使用字典对 Series 进行 map 转换时,如果原始数据中某个值在字典中没有对应的 Key,map() 会返回什么?如果不希望返回 NaN 而是保留原值,该怎么做?
👉 点击查看参考答案
参考答案:
- 默认会返回
NaN; - 若想保留原值,可以使用自定义函数或
s.replace(dict),因为replace()在未命中时会自动保留原始数值不变。
- 默认会返回
编程练习:给定手机号 Series
phones = pd.Series(['13812345678', '13987654321']),请使用map()将中间四位替换为****(如'138****5678')实现隐私脱敏。👉 点击查看参考答案
参考答案:
import pandas as pd phones = pd.Series(['13812345678', '13987654321']) masked_phones = phones.map(lambda p: p[:3] + '****' + p[7:]) print(masked_phones)
本章小结
- 深入掌握了
Series.map()在一维数据转换中的核心用法; - 学会了基于字典快速完成离散编码转换;
- 熟练运用函数与 Lambda 表达式实现灵活的数据清洗与脱敏。
📋 行动清单
- 在本地执行示例代码,观察控制台输出并记录关键指标。
- 做好准备,进入下一小节学习《函数应用操作(2):DataFrame.apply() 与 applymap()》!
—— 小象教研组
配套学习资源与课件
- 本节课件:函数应用操作(1) -- map(PDF · 229KB)下载
- 全套课件打包(第1-5章)(ZIP · 12.8MB)下载
- 全套课件打包(第6-8章)(ZIP · 15MB)下载
- 实战数据集:AppleStore 应用商城分析(ZIP · 329KB)下载
- 实战数据集:女性服装电商分析(ZIP · 2.8MB)下载
- Python 数据分析环境搭建指南(PDF · 2MB)下载
- Scrapy 安装教程(PDF · 12.7MB)下载
- 附加实战项目:AppleStore 应用商城数据分析(ZIP · 0.3MB · ipynb + CSV 数据)下载
- 附加实战项目:银行电话营销数据分析(ZIP · 0.4MB · ipynb + CSV 数据)下载
- 附加实战项目:女性服装电商评论数据分析(ZIP · 2.7MB · ipynb + CSV 数据)下载
- 附加实战项目:美国化学学会杂志数据分析(ZIP · 34.2MB · ipynb + SQLite 数据库)下载
🎁 免费学习资源
领取《小象 11GB VIP 课件资料包与大厂真题手册》
包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。
- ✔完整 Python / 数据分析 Jupyter 实战源码
- ✔大厂真实业务数据集与练习题
- ✔微信扫码添加课程顾问,免费获取网盘下载链接
微信扫码添加顾问