← 返回《量化交易 Python 入门:从咖啡馆到华尔街》
📑 查看全课大纲(第 4 / 52 节)
  1. 1.量化分析基本概念:从咖啡馆到华尔街
  2. 2.量化交易员学习路线:从零基础到策略开发
  3. 3.量化策略生命周期:数据分析的五大流程
  4. 4.量化数据类型:数值型与类别型数据
  5. 5.量化沙盒搭建(1):Python与Anaconda安装
  6. 6.量化沙盒搭建(2):Jupyter Notebook与库配置
  7. 7.本地多源数据:量化历史回测的基石
  8. 8.TXT数据流操作:处理金融交易日志
  9. 9.JSON数据流操作:解析股票行情API响应
  10. 10.CSV行情文件操作:读取与存储历史K线
  11. 11.Excel报表操作:清洗财报与财务指标
  12. 12.量化数据库:SQL常用查询语法
  13. 13.量化数据库:Python连接与写入
  14. 14.量化多表连接:关联股票信息与行情
  15. 15.实战:小象咖啡店营业数据与个股财务指标的多源数据分析
  16. 16.量化数据采集:爬虫工作原理与合规
  17. 17.量化爬虫核心:URL管理与去重策略
  18. 18.量化网页下载:防反爬与请求头伪装
  19. 19.网页解析(1):使用XPath定位财经新闻
  20. 20.网页解析(2):使用CSS选择器与ItemLoader
  21. 21.Scrapy框架:构建工业级量化爬虫
  22. 22.Scrapy实战(1):新建项目与数据模型定义
  23. 23.Scrapy实战(2):编写财经爬虫逻辑
  24. 24.Scrapy实战(3):启用数据管道清洗行情
  25. 25.Scrapy实战(4):防反爬中间件配置
  26. 26.实战:构建每日热门个股行情自动采集系统
  27. 27.NumPy与SciPy:加速量化矩阵计算
  28. 28.NumPy数组:构建股票价格矩阵
  29. 29.数组切片:提取特定股票与交易日数据
  30. 30.NumPy常用方法:计算均值与波动率
  31. 31.向量化计算:摆脱缓慢的For循环
  32. 32.通用函数ufunc:计算对数收益率与累计收益
  33. 33.实战:股票组合资产收益率与协方差矩阵计算
  34. 34.Pandas Series:管理单只股票收盘价
  35. 35.Pandas DataFrame:构建多只股票行情面板
  36. 36.Pandas Index:时间序列索引与对齐
  37. 37.Series索引操作:按位置与标签访问行情数据
  38. 38.DataFrame索引操作:loc与iloc定位行情
  39. 39.索引总结:量化多字段筛选与定位
  40. 40.运算与对齐:合并不同交易日的数据
  41. 41.Pandas map:对股票代码与状态做映射
  42. 42.Pandas apply:滚动计算技术指标
  43. 43.文件读写操作:CSV行情数据导入导出
  44. 44.排序操作:按市盈率与收益率对股票排名
  45. 45.数据清洗:填充与剔除停牌股票缺失值
  46. 46.数据清洗:剔除重复报价与异常交易数据
  47. 47.数据清洗:替换异常报价数据
  48. 48.常用统计:量化最大回撤与分位数风险评估
  49. 49.常用统计:sum/mean/median/count聚合指标
  50. 50.极值定位:寻找历史最高价与最低价的发生日
  51. 51.风险与累计收益:计算年化波动率与累计回报
  52. 52.实战:小象咖啡店营业数据与热门个股时间序列清洗分析

量化数据类型:数值型与类别型数据

量化数据类型:数值型与类别型数据

小象量化极客小册 · 华尔街量化分析先锋系列

欢迎来到华尔街量化分析先锋:从咖啡销量到量化策略的第1章。作为一名在小象咖啡馆摸爬滚打的数据侦探,你即将迈出转型量化交易员的关键一步。本节我们将部署量化计算沙盒,并理解基础的数据分析科学模型。

小象量化极客小册 · 华尔街量化分析先锋系列 欢迎来到华尔街量化分析先锋:从咖啡销量到量化策略的第1章。作为一名在小象咖啡馆摸爬滚打的数据侦探,你即将迈出转型量化交易员的关键一步。本节我们将部署量化计算沙盒,并理解基础的数据分析科学模型。

💡 核心导读

数据类型是数据分析的基础单元,决定了数据的存储方式与操作规则。本节将系统讲解Python中核心的数据类型及其应用场景,包括数值型、文本型、布尔型等基础类型,以及Pandas中的Series和DataFrame扩展类型。通过本章学习,您将掌握:1) 类型识别与转换方法 2) Pandas特殊类型处理技巧 3) 类型相关的内存优化策略。所有知识点均通过可运行的代码示例演示。


基础数据类型体系

标量类型

Python原生支持的四种核心类型:

price = 99.5          # 浮点型(float)
quantity = 3          # 整型(int)
product = "显示器"    # 字符串(str)
in_stock = True       # 布尔型(bool)

print(f"类型检查:\n{type(price)=}\n{type(quantity)=}\n{type(product)=}\n{type(in_stock)=}")

容器类型

复合数据结构的典型代表:

specs = ["4K分辨率", "HDR10", "Type-C接口"]  # 列表(list)
inventory = {"A001": 15, "B205": 3}         # 字典(dict)

str(3.14)      # 浮点转字符串
int("1024")    # 字符串转整型
list("ABCD")   # 字符串转列表

💡 概念小测:数据特征

在多因子策略中,股票的“申万一级行业分类”(如医药、电子)与“近20日年化波动率”(如18.5%)分别属于什么数据类型?

  • 行业分类属于数值型(Numerical),年化波动率属于类别型(Categorical)。
  • 行业分类属于类别型(Categorical),年化波动率属于数值型(Numerical)。
  • 两者都是数值型,因为类别型数据无法被计算机识别。
  • 两者都是类别型,因为波动率可以进行分箱打标签。

📝 选择题

💡 概念小测:数据特征 在多因子策略中,股票的“申万一级行业分类”(如医药、电子)与“近20日年化波动率”(如18.5%)分别属于什么数据类型?

  • A. 行业分类属于数值型(Numerical),年化波动率属于类别型(Categorical)。
  • B. 行业分类属于类别型(Categorical),年化波动率属于数值型(Numerical)。
  • C. 两者都是数值型,因为类别型数据无法被计算机识别。
  • D. 两者都是类别型,因为波动率可以进行分箱打标签。

答案:B(行业分类属于类别型(Categorical),年化波动率属于数值型(Numerical)。)


Pandas扩展类型

Series类型

一维带标签数组的创建与操作:

import pandas as pd

stock_data = {"苹果公司仓": 42, "谷歌公司仓": 37, "亚马逊仓": 59}
series = pd.Series(stock_data, name="库存量")

print("Series数据类型:\n", series.dtypes)
print("\n值数组:\n", series.values)
print("\n索引数组:\n", series.index)

DataFrame类型

二维表格数据的核心操作:

data = {
    "产品ID": ["P1001", "P1002", "P1003"],
    "单价(元)": [2999, 1599, 899],
    "库存状态": ["充足", "缺货", "充足"],
    "是否新品": [True, False, True]
}
df = pd.DataFrame(data)

print("DataFrame概览:")
print(df)
print("\n数据类型明细:")
print(df.dtypes)

执行后输出示例:

        产品ID  单价(元) 库存状态  是否新品
0    P1001   2999   充足   True
1    P1002   1599   缺货  False
2    P1003    899   充足   True

数据类型明细:
产品ID       object
单价(元)      int64
库存状态      object
是否新品       bool


类型优化技巧

内存节省策略

print("优化前内存使用:", df.memory_uspe_ratio(deep=True))

df["产品ID"] = df["产品ID"].astype('category')  # 分类类型
df["是否新品"] = df["是否新品"].astype('int8')   # 8位整型

print("\n优化后内存使用:", df.memory_uspe_ratio(deep=True))

时间类型处理

date_str = ["2023-01-15", "2023-02-20", "2023-03-10"]
dates = pd.to_datetime(date_str)  # 转为datetime64类型

delta = dates.max() - dates.min()
print(f"\n最早与最晚日期相差: {delta.days}天")

💡 代码填空:分箱操作

量化分析中,我们常用分箱操作将连续的市盈率(PE)转化为高、中、低估值三个级别。请填入 Pandas 对应的分箱函数名:

import pandas as pd
import numpy as np

pe_series = pd.Series([12.5, 45.1, 22.3, 85.0])
bins = [0, 20, 50, np.inf]
labels = ['低估值', '合理估值', '高估值']
groups = pd.{blank}(pe_series, bins=bins, labels=labels)
print(groups)
  • qcut
  • cut
  • split

✏️ 填空题

💡 代码填空:分箱操作 量化分析中,我们常用分箱操作将连续的市盈率(PE)转化为高、中、低估值三个级别。请填入 Pandas 对应的分箱函数名:

import pandas as pd
import numpy as np
pe_series = pd.Series([12.5, 45.1, 22.3, 85.0])
# 将PE进行分箱
bins = [0, 20, 50, np.inf]
labels = ['低估值', '合理估值', '高估值']
groups = pd.___(pe_series, bins=bins, labels=labels)
print(groups)

答案:cut


本章小结

行动清单

  • 使用pd.to_numeric()将字符串列”销售数量”转换为数值型,处理其中可能存在的无效字符
  • 创建包含1000个随机整数的Series,对比astype('int32')astype('int8')的内存占用差异
  • pd.Categorical()优化包含重复文本(如省份名称)的DataFrame列,记录内存节省比例

—— 小象量化教研组

🎁 免费学习资源

领取《小象 11GB VIP 课件资料包与大厂真题手册》

包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。

  • 完整 Python / 数据分析 Jupyter 实战源码
  • 大厂真实业务数据集与练习题
  • 微信扫码添加课程顾问,免费获取网盘下载链接
微信二维码:扫码添加课程顾问微信扫码添加顾问