📑 查看全课大纲(第 29 / 101 节)
- 1.数据分析基本概念
- 2.学习数据分析的一般路线
- 3.数据分析的流程
- 4.数据类型
- 5.环境部署(1)
- 6.环境部署(2)
- 7.课程介绍
- 8.TXT文件操作
- 9.JSON文件操作
- 10.CSV文件操作
- 11.Excel文件操作
- 12.数据库及SQL常用语法
- 13.数据库基本操作
- 14.数据库多表连接
- 15.实战:欧洲职业足球数据库分析
- 16.爬虫简介
- 17.URL管理模块
- 18.网页下载模块
- 19.网页解析模块(1)
- 20.网页解析模块(2)
- 21.Scrapy简介
- 22.Scrapy使用步骤(1)
- 23.Scrapy使用步骤(2)
- 24.Scrapy使用步骤(3)
- 25.Scrapy使用步骤(4)
- 26.实战:获取国内城市空气质量指数数据
- 27.NumPy和SciPy介绍
- 28.多维数组
- 29.多维数组操作
- 30.NumPy的常用方法
- 31.向量化介绍
- 32.向量化及通用函数
- 33.实战:2016美国大选分析
- 34.数据结构-Series
- 35.数据结构-DataFrame
- 36.数据结构-Index
- 37.Series的索引操作
- 38.DataFrame的索引操作
- 39.索引操作总结
- 40.运算与对齐
- 41.函数应用操作(1) -- map
- 42.函数应用操作 (2) -- apply applymap
- 43.文件读写操作
- 44.排序操作
- 45.数据清洗--处理缺失数据
- 46.数据清洗--处理重复数据
- 47.数据清洗--替换数据
- 48.常用统计方法(1) -- describe quantile
- 49.常用统计方法(2) -- sum mean median count
- 50.常用统计方法(3) -- max min idxmax idxmin
- 51.常用统计方法(4) -- mad var std cumsum
- 52.实战:全球食品数据分析
- 53.层级索引
- 54.分组与聚合介绍
- 55.分组操作(1) -- GroupBy对象及常用聚合操作
- 56.分组操作(2) -- 自定义分组及聚合操作
- 57.透视表介绍
- 58.透视表操作
- 59.数据规整(1) -- 数据合并concat
- 60.数据规整(2) -- 数据连接merge
- 61.数据重构(3) -- 数据重构stack unstack
- 62.实战:互联网电影资料库分析
- 63.探索性数据分析EDA介绍
- 64.EDA的目的
- 65.EDA常用工具
- 66.Matplotlib绘图基本介绍
- 67.Matplotlib画布
- 68.散点图和柱状图的绘制
- 69.直方图的绘制
- 70.矩阵绘图
- 71.子图的使用
- 72.Matplotlib颜色、标记、线型
- 73.Matplotlib坐标刻度、标签、图例、标题
- 74.Seaborn介绍
- 75.数据集分布可视化(1) -- 单变量分布、双变量分布
- 76.数据集分布可视化(2) -- 变量关系可视化
- 77.类别数据可视化 -- 类别散布图、类别内数据分布、类别内统计图
- 78.交互式数据可视化工具Bokeh介绍
- 79.Bokeh绘制散点图、柱状图、盒子图、弦图
- 80.Bokeh绘制常用图形元素
- 81.D绘图 -- mplot3d
- 82.D曲线可视化
- 83.D散点图可视化
- 84.D柱状图可视化
- 85.Pandas绘图
- 86.实战:Lending Club借贷数据探索性分析及可视化
- 87.机器学习介绍及应用场景
- 88.机器学习建模介绍 (1) -- 分类
- 89.机器学习建模介绍 (2) -- 回归
- 90.机器学习建模介绍 (3) -- 聚类
- 91.机器学习分类
- 92.机器学习工具scikit-learn
- 93.使用scikit-learn的流程
- 94.数据集准备及划分
- 95.模型选择
- 96.数据预处理及特征工程
- 97.过拟合与欠拟合
- 98.模型调参介绍
- 99.模型调参方法
- 100.模型测试及评价
- 101.实战:通过移动设备行为数据预测性别和年龄
多维数组操作
约 16 分钟
📺 正在播放小象官方高清录播(支持倍速与清晰度调节)
多维数组核心操作:多维切片、布尔掩码条件索引与矩阵转置精讲
小象实战讲义 · Python数据分析实战
在数据分析与清洗流程中,我们绝大部分时间都在对多维数据进行切片筛选、子集提取以及维度转换。与 Python 原生列表繁琐的多重括号切片不同,NumPy 为多维数组提供了极其优雅高效的逗号分隔多维坐标索引语法。更强大的是,NumPy 支持使用布尔掩码(Boolean Masking)进行复杂的业务逻辑条件过滤,以及毫秒级的轴向转置(Transpose)。本节我们将系统攻克多维数组的精准切片、逻辑组合筛选与矩阵轴交换技术。
💡 核心导读
- 多维切片与坐标索引标准范式:
arr[r1:r2, c1:c2]:行与列双轴切片语法(优于低效的arr[r][c]链式索引);- 全切片冒号
:的占位作用:arr[:, 0](提取全量行的第 0 列)、arr[1, :](提取第 1 行全量数据)。
- 布尔条件索引(Boolean Indexing)与位运算逻辑:
- 条件表达式生成布尔掩码矩阵;
- 多条件复合过滤:必须使用
&(与)、|(或)、~(非),严禁使用 Python 关键字and / or; np.where(condition, x, y):三元条件替换神技。
- 矩阵转置与轴交换:
.T属性:快速交换行与列;np.transpose()与np.swapaxes():高维张量轴向自由重排。
1. 多维切片与布尔索引语法规范
┌─────────────────────────────────────────────────────────────┐
│ NumPy 多维切片几何模型 │
├─────────────────────────────────────────────────────────────┤
│ 矩阵切片: arr[0:2, 1:3] │
│ Col 0 Col 1 Col 2 Col 3 │
│ Row 0 : [ 10, [ 20, 30 ], 40 ] │
│ Row 1 : [ 50, [ 60, 70 ], 80 ] ◄── 选中 │
│ Row 2 : [ 90, 100, 110, 120 ] │
└─────────────────────────────────────────────────────────────┘1.1 为什么多条件组合必须用 & 和 |?
- Python 的
and和or运算符会对整个数组对象求布尔真值(引发ValueError: The truth value of an array with more than one element is ambiguous); - 而
&和|是逐位(Element-wise)运算,能够对布尔数组中的每一个对应元素执行逐项逻辑与、逻辑或运算。注意:每个子条件必须用小括号()括起来,以避免运算符优先级错乱。
2. Python 代码实战:切片、布尔过滤与转置
# 示例 1:二维矩阵的高级切片与子矩阵提取
import numpy as np
# 创建 4 行 5 列的测试数据矩阵
data_mat = np.arange(10, 30).reshape((4, 5))
print("=== 1. 原始 4x5 矩阵 ===")
print(data_mat)
# 1. 提取单个元素 (对比 arr[1, 2] 与 arr[1][2])
print("\n• 第 1 行第 2 列元素 (arr[1, 2]):", data_mat[1, 2])
# 2. 提取连续子矩阵 (前 2 行,第 1 到 3 列)
sub_mat = data_mat[0:2, 1:4]
print("• 子矩阵切片 [0:2, 1:4]:\n", sub_mat)
# 3. 提取整行与整列
first_row = data_mat[0, :] # 提取第 0 行所有列
second_col = data_mat[:, 1] # 提取第 1 列所有行
print("• 提取第 0 行 (向量):", first_row)
print("• 提取第 1 列 (向量):", second_col)
# 4. 步长切片:隔行、隔列提取
stride_mat = data_mat[::2, ::2]
print("• 隔行隔列切片 [::2, ::2]:\n", stride_mat)接下来,我们演示利用布尔掩码与 np.where 进行多条件数据筛选与异常值修正:
# 示例 2:布尔掩码条件索引、复合逻辑与 np.where 三元替换
# 1. 单条件筛选:提取矩阵中所有大于 20 的元素
mask_gt_20 = data_mat > 20
print("\n=== 2. 布尔掩码条件索引 ===")
print("布尔掩码矩阵 (data_mat > 20):\n", mask_gt_20)
print("提取大于 20 的所有元素 (降为 1 维):", data_mat[mask_gt_20])
# 2. 多条件复合筛选:筛选大于 15 且小于 25 的偶数
# 注意:多个条件必须加小括号,并使用 &
complex_mask = (data_mat > 15) & (data_mat < 25) & (data_mat % 2 == 0)
print("• 复合条件 (15 < val < 25 且为偶数):", data_mat[complex_mask])
# 3. np.where 三元替换神技:将所有小于 15 的数值标记为 -1,其余保持不变
clipped_data = np.where(data_mat < 15, -1, data_mat)
print("\n• np.where 阈值截断效果 (<15 替换为 -1):\n", clipped_data)
# 4. 矩阵转置 (Transpose) 与轴交换
print("\n=== 3. 矩阵转置与轴向变换 ===")
print("原始矩阵形状:", data_mat.shape)
transposed_mat = data_mat.T # 或 np.transpose(data_mat)
print("转置后矩阵形状 (4x5 -> 5x4):\n", transposed_mat)📝 动手练一练
语法纠错题:以下代码试图筛选数组
arr中大于 5 且小于 10 的所有元素:res = arr[arr > 5 and arr < 10]。这段代码运行时会发生什么?请给出正确写法。👉 点击查看参考答案
参考答案: ① 报错分析:代码会抛出
ValueError,因为 Python 原生关键字and无法处理多元素的布尔数组; ② 正确写法:必须使用位运算符&并将各个子条件用小括号括起来:res = arr[(arr > 5) & (arr < 10)]编程练习:给定一个 3 行 3 列的随机整数矩阵,请编写代码将其对角线上的元素全部替换为 0。
👉 点击查看参考答案
参考答案:
import numpy as np mat = np.random.randint(10, 99, size=(3, 3)) print("原始矩阵:\n", mat) # 方式:使用 np.fill_diagonal 或索引坐标 np.fill_diagonal(mat, 0) print("对角线置 0 后:\n", mat)
本章小结
在本节中,我们全面攻克了多维数组操作的核心利器:
- 掌握了基于逗号分隔的多维切片标准语法
arr[r1:r2, c1:c2]; - 深入掌握了使用
&、|、~构建复杂布尔掩码与np.where条件赋值的高级技巧; - 掌握了
.T与np.transpose()矩阵转置的物理意义与维度变换。
📋 行动清单
- 牢记布尔多条件必须加小括号与使用
&/|的规则。 - 做好准备,进入下一小节学习《NumPy 常用聚合统计方法与轴向计算》!
—— 小象教研组
配套学习资源与课件
- 本节课件:多维数组操作(PDF · 308KB)下载
- 全套课件打包(第1-5章)(ZIP · 12.8MB)下载
- 全套课件打包(第6-8章)(ZIP · 15MB)下载
- 实战数据集:AppleStore 应用商城分析(ZIP · 329KB)下载
- 实战数据集:女性服装电商分析(ZIP · 2.8MB)下载
- Python 数据分析环境搭建指南(PDF · 2MB)下载
- Scrapy 安装教程(PDF · 12.7MB)下载
- 附加实战项目:AppleStore 应用商城数据分析(ZIP · 0.3MB · ipynb + CSV 数据)下载
- 附加实战项目:银行电话营销数据分析(ZIP · 0.4MB · ipynb + CSV 数据)下载
- 附加实战项目:女性服装电商评论数据分析(ZIP · 2.7MB · ipynb + CSV 数据)下载
- 附加实战项目:美国化学学会杂志数据分析(ZIP · 34.2MB · ipynb + SQLite 数据库)下载
🎁 免费学习资源
领取《小象 11GB VIP 课件资料包与大厂真题手册》
包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。
- ✔完整 Python / 数据分析 Jupyter 实战源码
- ✔大厂真实业务数据集与练习题
- ✔微信扫码添加课程顾问,免费获取网盘下载链接
微信扫码添加顾问