📑 查看全课大纲(第 69 / 101 节)
- 1.数据分析基本概念
- 2.学习数据分析的一般路线
- 3.数据分析的流程
- 4.数据类型
- 5.环境部署(1)
- 6.环境部署(2)
- 7.课程介绍
- 8.TXT文件操作
- 9.JSON文件操作
- 10.CSV文件操作
- 11.Excel文件操作
- 12.数据库及SQL常用语法
- 13.数据库基本操作
- 14.数据库多表连接
- 15.实战:欧洲职业足球数据库分析
- 16.爬虫简介
- 17.URL管理模块
- 18.网页下载模块
- 19.网页解析模块(1)
- 20.网页解析模块(2)
- 21.Scrapy简介
- 22.Scrapy使用步骤(1)
- 23.Scrapy使用步骤(2)
- 24.Scrapy使用步骤(3)
- 25.Scrapy使用步骤(4)
- 26.实战:获取国内城市空气质量指数数据
- 27.NumPy和SciPy介绍
- 28.多维数组
- 29.多维数组操作
- 30.NumPy的常用方法
- 31.向量化介绍
- 32.向量化及通用函数
- 33.实战:2016美国大选分析
- 34.数据结构-Series
- 35.数据结构-DataFrame
- 36.数据结构-Index
- 37.Series的索引操作
- 38.DataFrame的索引操作
- 39.索引操作总结
- 40.运算与对齐
- 41.函数应用操作(1) -- map
- 42.函数应用操作 (2) -- apply applymap
- 43.文件读写操作
- 44.排序操作
- 45.数据清洗--处理缺失数据
- 46.数据清洗--处理重复数据
- 47.数据清洗--替换数据
- 48.常用统计方法(1) -- describe quantile
- 49.常用统计方法(2) -- sum mean median count
- 50.常用统计方法(3) -- max min idxmax idxmin
- 51.常用统计方法(4) -- mad var std cumsum
- 52.实战:全球食品数据分析
- 53.层级索引
- 54.分组与聚合介绍
- 55.分组操作(1) -- GroupBy对象及常用聚合操作
- 56.分组操作(2) -- 自定义分组及聚合操作
- 57.透视表介绍
- 58.透视表操作
- 59.数据规整(1) -- 数据合并concat
- 60.数据规整(2) -- 数据连接merge
- 61.数据重构(3) -- 数据重构stack unstack
- 62.实战:互联网电影资料库分析
- 63.探索性数据分析EDA介绍
- 64.EDA的目的
- 65.EDA常用工具
- 66.Matplotlib绘图基本介绍
- 67.Matplotlib画布
- 68.散点图和柱状图的绘制
- 69.直方图的绘制
- 70.矩阵绘图
- 71.子图的使用
- 72.Matplotlib颜色、标记、线型
- 73.Matplotlib坐标刻度、标签、图例、标题
- 74.Seaborn介绍
- 75.数据集分布可视化(1) -- 单变量分布、双变量分布
- 76.数据集分布可视化(2) -- 变量关系可视化
- 77.类别数据可视化 -- 类别散布图、类别内数据分布、类别内统计图
- 78.交互式数据可视化工具Bokeh介绍
- 79.Bokeh绘制散点图、柱状图、盒子图、弦图
- 80.Bokeh绘制常用图形元素
- 81.D绘图 -- mplot3d
- 82.D曲线可视化
- 83.D散点图可视化
- 84.D柱状图可视化
- 85.Pandas绘图
- 86.实战:Lending Club借贷数据探索性分析及可视化
- 87.机器学习介绍及应用场景
- 88.机器学习建模介绍 (1) -- 分类
- 89.机器学习建模介绍 (2) -- 回归
- 90.机器学习建模介绍 (3) -- 聚类
- 91.机器学习分类
- 92.机器学习工具scikit-learn
- 93.使用scikit-learn的流程
- 94.数据集准备及划分
- 95.模型选择
- 96.数据预处理及特征工程
- 97.过拟合与欠拟合
- 98.模型调参介绍
- 99.模型调参方法
- 100.模型测试及评价
- 101.实战:通过移动设备行为数据预测性别和年龄
直方图的绘制
约 7 分钟
📺 正在播放小象官方高清录播(支持倍速与清晰度调节)
核心统计图表绘制(2):频数直方图 hist、分箱策略与概率密度估计精讲
小象实战讲义 · Python数据分析实战
在探索单个连续变量的统计分布时,直方图(Histogram) 是最为经典且无可替代的可视化工具。直方图通过将连续数值切分为若干个连续的区间区间(称为分箱,Bins),统计每个区间内落入的样本频数或频率,从而将枯燥的数据点转化为清晰的山峰与波谷形态。通过直方图,我们可以一眼看清数据是单峰正态、双峰混合、左偏长尾还是右偏长尾。本节我们将系统讲解直方图的分箱法则、归一化概率密度展示以及累积分布直方图。
💡 核心导读
- 直方图
plt.hist()核心参数解密:bins:分箱数量(整数)或自定义切分边界数组;density=True:归一化为概率密度分布(柱子面积总和等于 1);cumulative=True:绘制累积分布直方图;edgecolor='black':为柱子添加清晰边界线。
- 经典分箱法则:斯特奇斯法则(Sturges’ Rule,)与 Freedman-Diaconis 鲁棒分箱。
- 分布偏态(正偏/负偏)与双峰分布的视觉诊断。
1. 直方图分箱机制与分布形态解析
直方图将连续空间离散化为等宽区间:
┌─────────────────────────────────────────────────────────────┐
│ 直方图分箱 (Bins) 计数原理 │
├─────────────────────────────────────────────────────────────┤
│ 连续数据: [ 12, 15, 18, 22, 25, 29, 31, 35, 38, 42 ] │
│ 切分为 3 个分箱: [10, 20), [20, 30), [30, 45] │
│ 各分箱计数: 3 3 4 │
│ 柱子高度: ■■■ ■■■ ■■■■ │
└─────────────────────────────────────────────────────────────┘import matplotlib.pyplot as plt
import numpy as np
# 解决中文显示
plt.rcParams['font.sans-serif'] = ['SimHei', 'Microsoft YaHei', 'DejaVu Sans']
plt.rcParams['axes.unicode_minus'] = False
# 1. 模拟生成某公司员工年龄分布数据 (包含年轻主力与资深管理层)
np.random.seed(42)
ages_junior = np.random.normal(loc=26, scale=3, size=300)
ages_senior = np.random.normal(loc=42, scale=5, size=100)
all_ages = np.concatenate([ages_junior, ages_senior])
# 2. 绘制频数直方图并对比不同 bins 的效果
fig, ax = plt.subplots(figsize=(8, 4.5))
counts, bin_edges, patches = ax.hist(
all_ages,
bins=25,
color="#3498db",
edgecolor="white",
alpha=0.85
)
ax.set_title("公司员工年龄分布双峰直方图 (Bins=25)", fontsize=13)
ax.set_xlabel("年龄 (岁)")
ax.set_ylabel("员工人数 (频数)")
ax.grid(True, linestyle="--", alpha=0.4)
plt.savefig("hist_demo.png", bbox_inches="tight")
plt.close(fig)
print("✅ 直方图绘制完成!")2. 概率密度直方图与累积分布
设置 density=True 可以将纵轴转为概率密度,从而能够与理论正态曲线完美叠加比对。
# 绘制概率密度与累积分布
fig, (ax1, ax2) = plt.subplots(1, 2, figsize=(10, 4.2))
# 1. 概率密度分布 (density=True)
ax1.hist(all_ages, bins=20, density=True, color="teal", edgecolor="white", alpha=0.7)
ax1.set_title("年龄概率密度估计 (Density=True)")
ax1.set_xlabel("年龄")
ax1.set_ylabel("概率密度")
ax1.grid(True, alpha=0.3)
# 2. 累积分布直方图 (cumulative=True)
ax2.hist(all_ages, bins=20, density=True, cumulative=True, color="coral", edgecolor="white", alpha=0.7)
ax2.set_title("年龄累积分布函数 CDF (Cumulative=True)")
ax2.set_xlabel("年龄")
ax2.set_ylabel("累积概率")
ax2.grid(True, alpha=0.3)
plt.savefig("hist_density_cdf_demo.png", bbox_inches="tight")
plt.close(fig)
import os
for f in ["hist_demo.png", "hist_density_cdf_demo.png"]:
if os.path.exists(f): os.remove(f)
print("✅ 密度与 CDF 直方图生成完毕!")📝 动手练一练
概念思考题:在绘制直方图时,如果 bins 设置过小(如 bins=3)或设置过大(如 bins=1000),分别会导致什么视觉与分析问题?
👉 点击查看参考答案
参考答案:
- bins 过小(欠平滑):会将许多细节特征全部粗暴合并,掩盖双峰分布或长尾特性;
- bins 过大(过平滑/噪声过多):会导致几乎每个区间只有 0 或 1 个样本,柱状图呈现极其杂乱的锯齿状尖刺,无法看出宏观整体分布趋势。
编程练习:给定一组考试成绩数据,请使用
plt.hist()绘制直方图,并指定分箱边界为[0, 60, 70, 80, 90, 100](按不及格、及格、中等、良好、优秀分箱)。👉 点击查看参考答案
参考答案:
import matplotlib.pyplot as plt scores = [55, 68, 72, 85, 92, 78, 88, 95, 62, 79] plt.hist(scores, bins=[0, 60, 70, 80, 90, 100], edgecolor='black') plt.title("Grade Distribution") plt.close()
本章小结
- 深入理解了直方图分箱(Bins)的数学原理与形态诊断意义;
- 掌握了
density=True概率密度归一化与cumulative=True累积分布直方图的绘制; - 掌握了根据数据体量合理选择分箱数量的最佳实践。
📋 行动清单
- 在本地执行示例代码,观察控制台输出并记录关键指标。
- 做好准备,进入下一小节学习《矩阵绘图:二维热力图与相关系数矩阵可视化》!
—— 小象教研组
配套学习资源与课件
- 本节课件:直方图的绘制(PDF · 202KB)下载
- 全套课件打包(第1-5章)(ZIP · 12.8MB)下载
- 全套课件打包(第6-8章)(ZIP · 15MB)下载
- 实战数据集:AppleStore 应用商城分析(ZIP · 329KB)下载
- 实战数据集:女性服装电商分析(ZIP · 2.8MB)下载
- Python 数据分析环境搭建指南(PDF · 2MB)下载
- Scrapy 安装教程(PDF · 12.7MB)下载
- 附加实战项目:AppleStore 应用商城数据分析(ZIP · 0.3MB · ipynb + CSV 数据)下载
- 附加实战项目:银行电话营销数据分析(ZIP · 0.4MB · ipynb + CSV 数据)下载
- 附加实战项目:女性服装电商评论数据分析(ZIP · 2.7MB · ipynb + CSV 数据)下载
- 附加实战项目:美国化学学会杂志数据分析(ZIP · 34.2MB · ipynb + SQLite 数据库)下载
🎁 免费学习资源
领取《小象 11GB VIP 课件资料包与大厂真题手册》
包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。
- ✔完整 Python / 数据分析 Jupyter 实战源码
- ✔大厂真实业务数据集与练习题
- ✔微信扫码添加课程顾问,免费获取网盘下载链接
微信扫码添加顾问