数据分析三剑客

China☆狼群 提交于 2019-12-01 12:42:47

数据分析三剑客:

  Numpy,Pandas,Matplotlib

NumPy

  NumPy(Numerical Python) 是 Python 语言的一个扩展程序库,支持大量的维度数组与矩阵运算,此外也针对数组运算提供大量的数学函数库。

一、创建ndarray

1. 使用np.array()创建

  一维数据创建

import numpy as np
arr = np.array([1,2,3,4,5])
arr  
#结果
array([1, 2, 3, 4, 5])

  二维数据创建

import numpy as np
arr = np.array([[1,2,3],[4,5,6]])
arr
#结果
array([[1, 2, 3],
       [4, 5, 6]])

 元素类型相同

arr = np.array([[1,2,3],[4,5.123,6]])
arr
# 结果
array([[1.   , 2.   , 3.   ],
       [4.   , 5.123, 6.   ]])

注意:

  numpy默认ndarray的所有元素的类型是相同的
  如果传进来的列表中包含不同的类型,则统一为同一类型,优先级:str>float>int
  使用matplotlib.pyplot获取一个numpy数组,数据来源于一张图片
图片
import matplotlib.pyplot as plt
img_arr = plt.imread('./cat.jpg')
img_arr    # 三维数组  要先加载数组
plt.imshow(img_arr)  #将三维数组转换图片

 

2. 使用np的routines函数创建

1. np.linspace(start, stop, num=50, endpoint=True, retstep=False, dtype=None) 等差数列

import numpy as np
np.linspace(0,100,num=10)

2. np.arange([start, ]stop, [step, ]dtype=None)

np.arange(0,100,2)

3.  np.random.randint(low, high=None, size=None, dtype='l')

时间种子(随机因子):无时无刻都在变化的值(系统时间)
固定随机因子就可以固定随机函数的随机性
np.random.seed(90) # 固定
np.random.randint(0,100,size=(3,5))  # 随机

4. np.random.random(size=None)

生成0到1的随机数,左闭右开 np.random.seed(3)

二、ndarray的属性

4个必记参数: ndim:维度 shape:形状(各维度的长度) size:总长度

dtype:元素类型

type(img_arr)
img_arr.shape  # 形状
arr.shape
arr.size
arr.dtype
arr.ndim

 

三、ndarray的基本操作

1. 索引

一维与列表完全一致 多维时同理

arr = np.random.randint(0,100,size=(5,8))
arr
# 根据索引修改数据
arr[0]
arr[[0,1]]
arr[1,3]
arr[1,[2,3,4]]

2. 切片

一维与列表完全一致 多维时同理

arr = np.random.randint(0,100,size=(5,8))
arr
#获取二维数组前两行
arr[0:2]
#获取二维数组前两列
arr[:,0:2]  #arr[hang,lie]
#获取二维数组前两行和前两列数据
arr[0:2,0:2]

将数据反转,例如[1,2,3]---->[3,2,1]

::进行切片

#将数组的行倒序
arr[::-1,:]
#列倒序
arr[:,::-1]
#全部倒序
arr[::-1,::-1]
#将图片进行全倒置操作
plt.imshow(img_arr)
plt.imshow(img_arr[:,::-1,:])
plt.imshow(img_arr[:,::-1,:])
plt.imshow(img_arr[::-1,::-1,::-1])
plt.imshow(img_arr[100:360:,150:580,:]) 

 

3. 变形

使用arr.reshape()函数,注意参数是一个tuple!

基本使用

1.将一维数组变形成多维数组

arr_1.reshape((10,4))
arr_1.reshape((5,-1))

2.将多维数组变形成一维数组 (要于二维数量相同)

arr_1 = arr.reshape((40,))
arr_1

4. 级联

np.concatenate()  

级联需要注意的点:

  • 级联的参数是列表:一定要加中括号或小括号
  • 维度必须相同
  • 形状相符:在维度保持一致的前提下,如果进行横向(axis=1)级联,必须保证进行级联的数组行数保持一致。如果进行纵向(axis=0)级联,必须保证进行级联的数组列数保持一致。
  • 可通过axis参数改变级联的方向

 1.一维,二维,多维数组的级联,实际操作中级联多为二维数组

np.concatenate((arr,arr),axis=1)  # arr数组 axis轴向

2.合并两张照片

arr_3 = np.concatenate((img_arr,img_arr,img_arr),axis=1)
arr_9 = np.concatenate((arr_3,arr_3,arr_3),axis=0)
plt.imshow(arr_9)

四、ndarray的聚合操作

1. 求和np.sum

arr.sum(axis=1) # 列的和

2. 最大最小值:np.max/ np.min

同理

3.平均值:np.mean()

arr.mean(axis=0)

五、其他聚合操作

Function Name    NaN-safe Version    Description
np.sum    np.nansum    Compute sum of elements
np.prod    np.nanprod    Compute product of elements
np.mean    np.nanmean    Compute mean of elements
np.std    np.nanstd    Compute standard deviation
np.var    np.nanvar    Compute variance
np.min    np.nanmin    Find minimum value
np.max    np.nanmax    Find maximum value
np.argmin    np.nanargmin    Find index of minimum value
np.argmax    np.nanargmax    Find index of maximum value
np.median    np.nanmedian    Compute median of elements
np.percentile    np.nanpercentile    Compute rank-based statistics of elements
np.any    N/A    Evaluate whether any elements are true
np.all    N/A    Evaluate whether all elements are true
np.power 幂运算

六、ndarray的排序

1. 快速排序

np.sort()与ndarray.sort()都可以,但有区别:

  • np.sort()不改变输入
  • ndarray.sort()本地处理,不占用空间,但改变输入
np.sort(arr,axis=0)arr.sort(axis=1)

 

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!