← 返回《Python 数据分析实战》
📑 查看全课大纲(第 29 / 101 节)
  1. 1.数据分析基本概念
  2. 2.学习数据分析的一般路线
  3. 3.数据分析的流程
  4. 4.数据类型
  5. 5.环境部署(1)
  6. 6.环境部署(2)
  7. 7.课程介绍
  8. 8.TXT文件操作
  9. 9.JSON文件操作
  10. 10.CSV文件操作
  11. 11.Excel文件操作
  12. 12.数据库及SQL常用语法
  13. 13.数据库基本操作
  14. 14.数据库多表连接
  15. 15.实战:欧洲职业足球数据库分析
  16. 16.爬虫简介
  17. 17.URL管理模块
  18. 18.网页下载模块
  19. 19.网页解析模块(1)
  20. 20.网页解析模块(2)
  21. 21.Scrapy简介
  22. 22.Scrapy使用步骤(1)
  23. 23.Scrapy使用步骤(2)
  24. 24.Scrapy使用步骤(3)
  25. 25.Scrapy使用步骤(4)
  26. 26.实战:获取国内城市空气质量指数数据
  27. 27.NumPy和SciPy介绍
  28. 28.多维数组
  29. 29.多维数组操作
  30. 30.NumPy的常用方法
  31. 31.向量化介绍
  32. 32.向量化及通用函数
  33. 33.实战:2016美国大选分析
  34. 34.数据结构-Series
  35. 35.数据结构-DataFrame
  36. 36.数据结构-Index
  37. 37.Series的索引操作
  38. 38.DataFrame的索引操作
  39. 39.索引操作总结
  40. 40.运算与对齐
  41. 41.函数应用操作(1) -- map
  42. 42.函数应用操作 (2) -- apply applymap
  43. 43.文件读写操作
  44. 44.排序操作
  45. 45.数据清洗--处理缺失数据
  46. 46.数据清洗--处理重复数据
  47. 47.数据清洗--替换数据
  48. 48.常用统计方法(1) -- describe quantile
  49. 49.常用统计方法(2) -- sum mean median count
  50. 50.常用统计方法(3) -- max min idxmax idxmin
  51. 51.常用统计方法(4) -- mad var std cumsum
  52. 52.实战:全球食品数据分析
  53. 53.层级索引
  54. 54.分组与聚合介绍
  55. 55.分组操作(1) -- GroupBy对象及常用聚合操作
  56. 56.分组操作(2) -- 自定义分组及聚合操作
  57. 57.透视表介绍
  58. 58.透视表操作
  59. 59.数据规整(1) -- 数据合并concat
  60. 60.数据规整(2) -- 数据连接merge
  61. 61.数据重构(3) -- 数据重构stack unstack
  62. 62.实战:互联网电影资料库分析
  63. 63.探索性数据分析EDA介绍
  64. 64.EDA的目的
  65. 65.EDA常用工具
  66. 66.Matplotlib绘图基本介绍
  67. 67.Matplotlib画布
  68. 68.散点图和柱状图的绘制
  69. 69.直方图的绘制
  70. 70.矩阵绘图
  71. 71.子图的使用
  72. 72.Matplotlib颜色、标记、线型
  73. 73.Matplotlib坐标刻度、标签、图例、标题
  74. 74.Seaborn介绍
  75. 75.数据集分布可视化(1) -- 单变量分布、双变量分布
  76. 76.数据集分布可视化(2) -- 变量关系可视化
  77. 77.类别数据可视化 -- 类别散布图、类别内数据分布、类别内统计图
  78. 78.交互式数据可视化工具Bokeh介绍
  79. 79.Bokeh绘制散点图、柱状图、盒子图、弦图
  80. 80.Bokeh绘制常用图形元素
  81. 81.D绘图 -- mplot3d
  82. 82.D曲线可视化
  83. 83.D散点图可视化
  84. 84.D柱状图可视化
  85. 85.Pandas绘图
  86. 86.实战:Lending Club借贷数据探索性分析及可视化
  87. 87.机器学习介绍及应用场景
  88. 88.机器学习建模介绍 (1) -- 分类
  89. 89.机器学习建模介绍 (2) -- 回归
  90. 90.机器学习建模介绍 (3) -- 聚类
  91. 91.机器学习分类
  92. 92.机器学习工具scikit-learn
  93. 93.使用scikit-learn的流程
  94. 94.数据集准备及划分
  95. 95.模型选择
  96. 96.数据预处理及特征工程
  97. 97.过拟合与欠拟合
  98. 98.模型调参介绍
  99. 99.模型调参方法
  100. 100.模型测试及评价
  101. 101.实战:通过移动设备行为数据预测性别和年龄

多维数组操作

约 16 分钟

📺 正在播放小象官方高清录播(支持倍速与清晰度调节)

多维数组核心操作:多维切片、布尔掩码条件索引与矩阵转置精讲

小象实战讲义 · Python数据分析实战

在数据分析与清洗流程中,我们绝大部分时间都在对多维数据进行切片筛选、子集提取以及维度转换。与 Python 原生列表繁琐的多重括号切片不同,NumPy 为多维数组提供了极其优雅高效的逗号分隔多维坐标索引语法。更强大的是,NumPy 支持使用布尔掩码(Boolean Masking)进行复杂的业务逻辑条件过滤,以及毫秒级的轴向转置(Transpose)。本节我们将系统攻克多维数组的精准切片、逻辑组合筛选与矩阵轴交换技术。

💡 核心导读

  • 多维切片与坐标索引标准范式
    • arr[r1:r2, c1:c2]:行与列双轴切片语法(优于低效的 arr[r][c] 链式索引);
    • 全切片冒号 : 的占位作用:arr[:, 0](提取全量行的第 0 列)、arr[1, :](提取第 1 行全量数据)。
  • 布尔条件索引(Boolean Indexing)与位运算逻辑
    • 条件表达式生成布尔掩码矩阵;
    • 多条件复合过滤:必须使用 &(与)、|(或)、~(非),严禁使用 Python 关键字 and / or
    • np.where(condition, x, y):三元条件替换神技。
  • 矩阵转置与轴交换
    • .T 属性:快速交换行与列;
    • np.transpose()np.swapaxes():高维张量轴向自由重排。

1. 多维切片与布尔索引语法规范

┌─────────────────────────────────────────────────────────────┐
│                    NumPy 多维切片几何模型                   │
├─────────────────────────────────────────────────────────────┤
│ 矩阵切片: arr[0:2, 1:3]                                     │
│               Col 0     Col 1     Col 2     Col 3           │
│   Row 0  :   [ 10,     [ 20,       30 ],     40  ]          │
│   Row 1  :   [ 50,     [ 60,       70 ],     80  ] ◄── 选中 │
│   Row 2  :   [ 90,       100,      110,      120 ]          │
└─────────────────────────────────────────────────────────────┘

1.1 为什么多条件组合必须用 &|

  • Python 的 andor 运算符会对整个数组对象求布尔真值(引发 ValueError: The truth value of an array with more than one element is ambiguous);
  • &| 是逐位(Element-wise)运算,能够对布尔数组中的每一个对应元素执行逐项逻辑与、逻辑或运算。注意:每个子条件必须用小括号 () 括起来,以避免运算符优先级错乱。

2. Python 代码实战:切片、布尔过滤与转置

# 示例 1:二维矩阵的高级切片与子矩阵提取

import numpy as np

# 创建 4 行 5 列的测试数据矩阵
data_mat = np.arange(10, 30).reshape((4, 5))
print("=== 1. 原始 4x5 矩阵 ===")
print(data_mat)

# 1. 提取单个元素 (对比 arr[1, 2] 与 arr[1][2])
print("\n• 第 1 行第 2 列元素 (arr[1, 2]):", data_mat[1, 2])

# 2. 提取连续子矩阵 (前 2 行,第 1 到 3 列)
sub_mat = data_mat[0:2, 1:4]
print("• 子矩阵切片 [0:2, 1:4]:\n", sub_mat)

# 3. 提取整行与整列
first_row = data_mat[0, :]      # 提取第 0 行所有列
second_col = data_mat[:, 1]     # 提取第 1 列所有行
print("• 提取第 0 行 (向量):", first_row)
print("• 提取第 1 列 (向量):", second_col)

# 4. 步长切片:隔行、隔列提取
stride_mat = data_mat[::2, ::2]
print("• 隔行隔列切片 [::2, ::2]:\n", stride_mat)

接下来,我们演示利用布尔掩码与 np.where 进行多条件数据筛选与异常值修正:

# 示例 2:布尔掩码条件索引、复合逻辑与 np.where 三元替换

# 1. 单条件筛选:提取矩阵中所有大于 20 的元素
mask_gt_20 = data_mat > 20
print("\n=== 2. 布尔掩码条件索引 ===")
print("布尔掩码矩阵 (data_mat > 20):\n", mask_gt_20)
print("提取大于 20 的所有元素 (降为 1 维):", data_mat[mask_gt_20])

# 2. 多条件复合筛选:筛选大于 15 且小于 25 的偶数
# 注意:多个条件必须加小括号,并使用 &
complex_mask = (data_mat > 15) & (data_mat < 25) & (data_mat % 2 == 0)
print("• 复合条件 (15 < val < 25 且为偶数):", data_mat[complex_mask])

# 3. np.where 三元替换神技:将所有小于 15 的数值标记为 -1,其余保持不变
clipped_data = np.where(data_mat < 15, -1, data_mat)
print("\n• np.where 阈值截断效果 (<15 替换为 -1):\n", clipped_data)

# 4. 矩阵转置 (Transpose) 与轴交换
print("\n=== 3. 矩阵转置与轴向变换 ===")
print("原始矩阵形状:", data_mat.shape)
transposed_mat = data_mat.T # 或 np.transpose(data_mat)
print("转置后矩阵形状 (4x5 -> 5x4):\n", transposed_mat)

📝 动手练一练

  1. 语法纠错题:以下代码试图筛选数组 arr 中大于 5 且小于 10 的所有元素:res = arr[arr > 5 and arr < 10]。这段代码运行时会发生什么?请给出正确写法。

    👉 点击查看参考答案

    参考答案: ① 报错分析:代码会抛出 ValueError,因为 Python 原生关键字 and 无法处理多元素的布尔数组; ② 正确写法:必须使用位运算符 & 并将各个子条件用小括号括起来:

    res = arr[(arr > 5) & (arr < 10)]
  2. 编程练习:给定一个 3 行 3 列的随机整数矩阵,请编写代码将其对角线上的元素全部替换为 0。

    👉 点击查看参考答案

    参考答案

    import numpy as np
    
    mat = np.random.randint(10, 99, size=(3, 3))
    print("原始矩阵:\n", mat)
    
    # 方式:使用 np.fill_diagonal 或索引坐标
    np.fill_diagonal(mat, 0)
    print("对角线置 0 后:\n", mat)

本章小结

在本节中,我们全面攻克了多维数组操作的核心利器:

  • 掌握了基于逗号分隔的多维切片标准语法 arr[r1:r2, c1:c2]
  • 深入掌握了使用 &|~ 构建复杂布尔掩码与 np.where 条件赋值的高级技巧;
  • 掌握了 .Tnp.transpose() 矩阵转置的物理意义与维度变换。

📋 行动清单

  • 牢记布尔多条件必须加小括号与使用 & / | 的规则。
  • 做好准备,进入下一小节学习《NumPy 常用聚合统计方法与轴向计算》!

—— 小象教研组

配套学习资源与课件
  • 本节课件:多维数组操作(PDF · 308KB)
    下载
  • 全套课件打包(第1-5章)(ZIP · 12.8MB)
    下载
  • 全套课件打包(第6-8章)(ZIP · 15MB)
    下载
  • 实战数据集:AppleStore 应用商城分析(ZIP · 329KB)
    下载
  • 实战数据集:女性服装电商分析(ZIP · 2.8MB)
    下载
  • Python 数据分析环境搭建指南(PDF · 2MB)
    下载
  • Scrapy 安装教程(PDF · 12.7MB)
    下载
  • 附加实战项目:AppleStore 应用商城数据分析(ZIP · 0.3MB · ipynb + CSV 数据)
    下载
  • 附加实战项目:银行电话营销数据分析(ZIP · 0.4MB · ipynb + CSV 数据)
    下载
  • 附加实战项目:女性服装电商评论数据分析(ZIP · 2.7MB · ipynb + CSV 数据)
    下载
  • 附加实战项目:美国化学学会杂志数据分析(ZIP · 34.2MB · ipynb + SQLite 数据库)
    下载
🎁 免费学习资源

领取《小象 11GB VIP 课件资料包与大厂真题手册》

包含全套实战 Jupyter 源码、清洗后数据集、大厂高频面试真题与专属学员答疑交流群。

  • 完整 Python / 数据分析 Jupyter 实战源码
  • 大厂真实业务数据集与练习题
  • 微信扫码添加课程顾问,免费获取网盘下载链接
微信二维码:扫码添加课程顾问微信扫码添加顾问