← 返回《量化交易 Python 入门:从咖啡馆到华尔街》
📑 查看全课大纲(第 28 / 52 节)
  1. 1.量化分析基本概念:从咖啡馆到华尔街
  2. 2.量化交易员学习路线:从零基础到策略开发
  3. 3.量化策略生命周期:数据分析的五大流程
  4. 4.量化数据类型:数值型与类别型数据
  5. 5.量化沙盒搭建(1):Python与Anaconda安装
  6. 6.量化沙盒搭建(2):Jupyter Notebook与库配置
  7. 7.本地多源数据:量化历史回测的基石
  8. 8.TXT数据流操作:处理金融交易日志
  9. 9.JSON数据流操作:解析股票行情API响应
  10. 10.CSV行情文件操作:读取与存储历史K线
  11. 11.Excel报表操作:清洗财报与财务指标
  12. 12.量化数据库:SQL常用查询语法
  13. 13.量化数据库:Python连接与写入
  14. 14.量化多表连接:关联股票信息与行情
  15. 15.实战:小象咖啡店营业数据与个股财务指标的多源数据分析
  16. 16.量化数据采集:爬虫工作原理与合规
  17. 17.量化爬虫核心:URL管理与去重策略
  18. 18.量化网页下载:防反爬与请求头伪装
  19. 19.网页解析(1):使用XPath定位财经新闻
  20. 20.网页解析(2):使用CSS选择器与ItemLoader
  21. 21.Scrapy框架:构建工业级量化爬虫
  22. 22.Scrapy实战(1):新建项目与数据模型定义
  23. 23.Scrapy实战(2):编写财经爬虫逻辑
  24. 24.Scrapy实战(3):启用数据管道清洗行情
  25. 25.Scrapy实战(4):防反爬中间件配置
  26. 26.实战:构建每日热门个股行情自动采集系统
  27. 27.NumPy与SciPy:加速量化矩阵计算
  28. 28.NumPy数组:构建股票价格矩阵
  29. 29.数组切片:提取特定股票与交易日数据
  30. 30.NumPy常用方法:计算均值与波动率
  31. 31.向量化计算:摆脱缓慢的For循环
  32. 32.通用函数ufunc:计算对数收益率与累计收益
  33. 33.实战:股票组合资产收益率与协方差矩阵计算
  34. 34.Pandas Series:管理单只股票收盘价
  35. 35.Pandas DataFrame:构建多只股票行情面板
  36. 36.Pandas Index:时间序列索引与对齐
  37. 37.Series索引操作:按位置与标签访问行情数据
  38. 38.DataFrame索引操作:loc与iloc定位行情
  39. 39.索引总结:量化多字段筛选与定位
  40. 40.运算与对齐:合并不同交易日的数据
  41. 41.Pandas map:对股票代码与状态做映射
  42. 42.Pandas apply:滚动计算技术指标
  43. 43.文件读写操作:CSV行情数据导入导出
  44. 44.排序操作:按市盈率与收益率对股票排名
  45. 45.数据清洗:填充与剔除停牌股票缺失值
  46. 46.数据清洗:剔除重复报价与异常交易数据
  47. 47.数据清洗:替换异常报价数据
  48. 48.常用统计:量化最大回撤与分位数风险评估
  49. 49.常用统计:sum/mean/median/count聚合指标
  50. 50.极值定位:寻找历史最高价与最低价的发生日
  51. 51.风险与累计收益:计算年化波动率与累计回报
  52. 52.实战:小象咖啡店营业数据与热门个股时间序列清洗分析

NumPy数组:构建股票价格矩阵

NumPy数组:构建股票价格矩阵

小象量化极客小册 · 华尔街量化分析先锋系列

欢迎进入量化矩阵计算的世界!NumPy 是所有 Python 金融库的底层基石。本节你将掌握 ndarray 多维数组的操作,学习如何用高效的向量化计算和广播机制代替缓慢的 Python 循环,计算股票组合的协方差与收益率。

小象量化极客小册 · 华尔街量化分析先锋系列 欢迎进入量化矩阵计算的世界!NumPy 是所有 Python 金融库的底层基石。本节你将掌握 ndarray 多维数组的操作,学习如何用高效的向量化计算和广播机制代替缓慢的 Python 循环,计算股票组合的协方差与收益率。

💡 核心导读

本节将深入探索NumPy最核心的数据结构——多维数组(ndarray)。你将掌握数组的创建方法、维度操作技巧以及高效的批量计算能力,重点学习:数组的轴向操作、广播机制原理、以及结构化数组的特殊应用。通过矩阵运算、图像数据处理等实战案例,理解如何用ndarray替代Python原生循环实现百倍性能提升。


数组创建与基础操作

核心属性解析

ndarray对象包含三个关键属性:

  • shape:描述各维度大小的元组,如(3,4)表示3行4列
  • dtype:数据类型对象,如np.float32
  • strides:内存中跨越各维度所需的字节数元组
import numpy as np

arr = np.array([[1, 2, 3], [4, 5, 6]]) 
print(f"形状: {arr.shape}")  # 输出 (2, 3)
print(f"数据类型: {arr.dtype}")  # 输出 int64

zeros = np.zeros((2,3))  # 全零数组
eye = np.eye(3)  # 单位矩阵
rand_arr = np.random.rand(2,2)  # 随机数组

维度操作魔法

通过reshape和transpose改变数组视图而不复制数据:

original = np.arange(6)  # [0,1,2,3,4,5]
reshaped = original.reshape(2,3)
"""
变形后:
[[0 1 2]
 [3 4 5]]
"""

transposed = reshaped.T 
"""
转置后:
[[0 3]
 [1 4]
 [2 5]]
"""

💡 概念小测:形状属性

如果一个代表股票价格的多维 ndarray 的 shape(100, 5, 4),代表它有 100 只股票,5 个交易日,4 个价格指标。关于该数组的维度操作,以下哪个说法是正确的?

  • 该数组可以通过调用 reshape(500, 2) 转化为 500 行 2 列,因为总元素个数不一致也可以转换。
  • 该数组总共包含 2000 个价格数据点,并且可以在不复制底层数据的前提下 reshape 为 (500, 4)
  • reshape 操作会破坏底层数据,必须重新从零创建。
  • 该数组可以直接与另一个 shape 为 (100, 5) 的权重数组进行直接相加,无需任何扩展。

📝 选择题

💡 概念小测:形状属性 如果一个代表股票价格的多维 ndarray 的 shape(100, 5, 4),代表它有 100 只股票,5 个交易日,4 个价格指标。关于该数组的维度操作,以下哪个说法是正确的?

  • A. 该数组可以通过调用 reshape(500, 2) 转化为 500 行 2 列,因为总元素个数不一致也可以转换。
  • B. 该数组总共包含 2000 个价格数据点,并且可以在不复制底层数据的前提下 reshape 为 (500, 4)
  • C. reshape 操作会破坏底层数据,必须重新从零创建。
  • D. 该数组可以直接与另一个 shape 为 (100, 5) 的权重数组进行直接相加,无需任何扩展。

答案:B(该数组总共包含 2000 个价格数据点,并且可以在不复制底层数据的前提下 reshape 为 (500, 4)。)


高级索引与广播

布尔索引实战

通过条件筛选实现高效数据过滤:

data = np.array([[10, 20], [30, 40]])
mask = data > 15
"""
mask矩阵:
[[False  True]
 [ True  True]]
"""
print(data[mask])  # 输出 [20, 30, 40]

广播机制图解

当数组形状不同时,NumPy会自动扩展较小数组:

矩阵A (3,1)   矩阵B (1,3)    结果 (3,3)
|1|           |1 2 3|       |2 3 4|
|2|    +                  = |3 4 5| 
|3|                         |4 5 6|
a = np.array([[1],[2],[3]])
b = np.array([[1,2,3]])
print(a + b)  # 验证上述广播


结构化数组实战

处理异构数据时,可定义复合数据类型:

dtype = [('name', 'U10'), ('pe_ratio', 'i4'), ('score', 'f4')]
students = np.array([('Alice', 20, 89.5), ('Bob', 22, 92.3)], dtype=dtype)

sorted_students = np.sort(students, order='score')
print(sorted_students['name'])  # 输出 ['Alice' 'Bob']


性能优化技巧

向量化计算对比

演示循环与向量化操作的性能差异:

import time

def slow_add(a, b):
    result = np.zeros_like(a)
    for i in range(a.shape[0]):
        for j in range(a.shape[1]):
            result[i,j] = a[i,j] + b[i,j]
    return result

def fast_add(a, b):
    return a + b

large_arr = np.random.rand(1000,1000)
start = time.time()
slow_add(large_arr, large_arr)
print(f"循环耗时: {time.time()-start:.4f}s")

start = time.time()
fast_add(large_arr, large_arr)
print(f"向量化耗时: {time.time()-start:.4f}s")

💡 代码填空:生成全零矩阵

补全代码,在初始化交易策略前,生成一个 3 行 5 列的代表初始仓位矩阵的 ndarray,初始值全为 0:

import numpy as np

positions = np.{blank}((3, 5))
print(positions.shape)
  • zero
  • zeros
  • empty

✏️ 填空题

💡 代码填空:生成全零矩阵 补全代码,在初始化交易策略前,生成一个 3 行 5 列的代表初始仓位矩阵的 ndarray,初始值全为 0:

import numpy as np
# 生成全零矩阵
positions = np.___((3, 5))
print(positions.shape)

答案:zeros


本章小结

行动清单

  • 创建一个5x5的随机矩阵,使用布尔索引筛选出大于0.5的元素,并计算它们的平均值
  • 用广播机制实现二维数组与一维数组的逐行减法(每行减去相同的向量)
  • 构建包含’证券简称’、‘身高’、‘体重’三个字段的结构化数组,计算每个人的BMI指数

通过掌握ndarray的多维操作能力,你将能够优雅地解决科学计算中的复杂数据操作问题。「小象量化教研组」建议在Jupyter Notebook中实际运行所有示例代码,观察内存布局变化。

🎁 免费学习资源

领取《小象 11GB VIP 课件资料包与大厂真题手册》

包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。

  • 完整 Python / 数据分析 Jupyter 实战源码
  • 大厂真实业务数据集与练习题
  • 微信扫码添加课程顾问,免费获取网盘下载链接
微信二维码:扫码添加课程顾问微信扫码添加顾问