Python大数据与机器学习之NumPy初体验

Posted 2020-11-02 cuiyubo

本文是Python大数据与机器学习系列文章中的第6篇，将介绍学习Python大数据与机器学习所必须的NumPy库。

通过本文系列文章您将能够学到的知识如下：

• 应用Python进行大数据与机器学习

• 应用Spark进行大数据分析

• 实现机器学习算法

• 学习使用NumPy库处理数值数据

• 学习使用Pandas库进行数据分析

• 学习使用Matplotlib库进行Python绘图

• 学习使用Seaborn库进行统计绘图

• 使用Plotly库进行动态可视化

• 使用SciKit-learn处理机器学习任务

• K-Means聚类

• 逻辑回归

• 线性回归

• 随机森林与决策树

• 自然语言处理与垃圾邮件过滤

• 神经网络

• 支持向量机

另外小编也会拥抱变化，根据评论中的需求情况增加其它有意义的内容。例如增加一些相关面试题等等。

什么是NumPy

NumPy是非常重要的Python数值计算扩展库，基本整个Python大数据生态都依赖它，并且由于绑定了C语言库，因此速度非常快。可以说我们要学好Python大数据，必须要学的就是NumPy库了。

安装NumPy

如果你根据之前的文章安装了anaconda，那么你已经默认安装了NumPy库了。如想单独安装请继续往下看。

使用conda安装的命令：

conda install numpy

使用pip安装的命令：

pip install numpy

NumPy array

本系列文章主要用到的是numpy的array（数组）；

numpy array有两种基本形式：vector（向量）和matrics（矩阵）

vector是一维的，而matrics是二维的。

打开Jupyter，输入如下内容：

import numpy as np

my_list = [1,2,3]

arr = np.array(my_list)

arr

运行得到如下结果：

以上就是vector的一般形式

继续输入如下内容：

my_mat = [[1,2,3],[4,5,6],[7,8,9]]

np.array(my_mat)

运行得到如下结果：

以上就是二维matrics矩阵。

numpy有自己的range函数

np.arange(0,10)

运行结果如下：

还可以指定步长np.arange(0,10,2)

运行结果如下：

生成所有元素为0的向量np.zeros(3)

运行结果如下：

生成所有元素为0的矩阵np.zeros((5,5))

运行结果如下：

同样生成所有元素为1的向量和矩阵分表为np.ones(4),np.ones((2,3))

运行结果如下：

np.linspace(0,5,20)

第一个参数是起始点，第二个参数是结束点，第三个参数是从起点到终点距离分成多少份。

运行结果如下：

np.eye(4)生成4*4的主对角线为1的矩阵

运行结果如下：

np.random.rand(5)生成随机向量

运行结果如下：

np.random.rand(5,5)生成5*5的随机向量

运行结果如下：

np.random.randn(2)生成标准正态分布曲线。

运行结果如下：

np.random.randn(4,4)二维的标准正态分布曲线

运行结果如下：

提示：

在Jupyter输入框中按tab键可以提示联想菜单，按shift+tab可以提示函数用法

按tab键

按shift+tab键

np.random.randint(1,100)生成1个1到100之间的随机整数，不包含100

运行结果如下：

np.random.randint(1,100,10)生成10个1到100之间的随机整数，不包含100

运行结果如下：

array类型支持的一些函数：

reshape函数可以修改array的维数。例如：

arr = np.arange(25)

arr.reshape(5,5)

运行结果如下：

max函数：最大值

min函数：最小值

argmax函数：返回最大值的索引

argmin函数：返回最小值的索引

ranarr = np.random.randint(1,100,10)

ranarr.max()

ranarr.min()

ranarr.argmax()

ranarr.argmin()

运行结果如下：

shape函数，返回array的大小

dtype，返回数据类型

调用简化：

from numpy.random import randint

我们就可以直接使用randint了

randint(2,10)

运行结果如下：