NumPy数据存取与函数

 

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

数据的CSV文件存取

CSV文件

CSV(Comma-Separated Value,逗号分隔值)

CSV是一种常见的文件格式,用来存储批量数据。

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第1张

 

将数据写入CSV文件

np.savetxt(frame, array, fmt='%.18e', delimiter=None)

-frame: 文件、字符串或产生器,可以是.gz或.bz2的压缩文件

-array: 存入文件的数组

-fmt: 写入文件的格式,例如:%d %.2f %.18e

-delimiter:分割字符串,默认是空格

示例:

import numpy as np
a = np.arange(100).reshape(5, 20)
np.savetxt('a.csv',a,fmt='%d',delimiter = ',')

生成CSV文件内容:

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第2张

 

从CSV文件中读取数据

np.loadtxt(frame, dtype = np.float, delimiter=None,unpack=False)

-frame: 文件、字符串或产生器,可以是.gz或.bz2的压缩文件

-dtype: 数据类型,可选

-delimiter:分割字符串,默认是空格

-unpack:如果True,读入属性将分别写入不同变量

 Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第3张

 

CSV文件的局限性

 

CSV只能有效存储一维和二维数组

np.savetxt() np.loadtxt() 只能有效存取一维和二维数组

 

 

多维数据的存取

 

多维数据存

a.tofile(frame,sep='',format='%s')

-frame: 文件、字符串

-sep: 数据分割字符串,如果是空串,写入文件为二进制

-format:写入数据的格式

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第4张

 

如果使用sep分割的话,生成的将会是二进制文件

 

读多维数据文件

np.fromfile(frame, dtype=float, count=-1,sep='')

-frame: 文件、字符串

-dtype: 读取的数据类型

-count:读入元素个数,-1表示读入整个文件

-sep: 数据分割字符串,如果是空串,写入文件为二进制

 

整数文件:

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第5张

 

二进制文件:

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第6张

 

需要注意:

该方法需要读取时知道存入文件时数组的维度和元素类型

a.tofile() 和 np.fromfile()需要配合使用

可以通过元数据文件来存储额外信息

 

NumPy的便捷文件存取

 

np.save(fname,array) 或 np.savez(fname,array)

-frame: 文件名,以.npy为扩展名,压缩扩展名为.npz

-array:数组数量

 

np.load(fname)

-frame:文件名,以.npy为扩展名,压缩扩展名为.npz

 

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第7张

 

 

NumPy的随机数函数

 

NumPy的随机数函数子库

NumPy的random子库

np.random.*

np.random.rand()

np.random.randn()

np.random.randint()

 

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第8张

函数示例:

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第9张

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第10张

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第11张

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第12张

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第13张

 

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第14张

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第15张

 Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第16张

 

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第17张

 

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数 随笔 第18张

 

 

NumPy的统计函数

 

未完待续...

 

 

 

NumPy的梯度

 

 

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄