对python中大文件的导入与导出方法详解
更新时间：2018年12月28日 11:34:26 作者：pw007992
今天小编就为大家分享一篇对python中大文件的导入与导出方法详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
1、csv文件的导入和导出
通过一个矩阵导出为csv文件，将csv文件导入为矩阵
将csv文件导入到一个矩阵中
import numpy
my_matrix = numpy.loadtxt(open("c:\\1.csv","rb"),delimiter=",",skiprows=0)
将矩阵导出到本地csv中
numpy.savetxt('new.csv', my_matrix, delimiter = ',')
未完待续。。。
也可以使用pickle模块，保存的文件是序列化的
python的pickle模块实现了基本的数据序列和反序列化。通过pickle模块的序列化操作我们能够将程序中运行的对象信息保存到文件中去，永久存储；通过pickle模块的反序列化操作，我们能够从文件中创建上一次程序保存的对象。
pickle.dump(obj, file, [,protocol])
注解：将对象obj保存到文件file中去。
protocol为序列化使用的协议版本，0：ASCII协议，所序列化的对象使用可打印的ASCII码表示；1：老式的二进制协议；2：2.3版本引入的新二进制协议，较以前的更高效。其中协议0和1兼容老版本的python。protocol默认值为0。
file：对象保存到的类文件对象。file必须有write()接口， file可以是一个以'w'方式打开的文件或者一个StringIO对象或者其他任何实现write()接口的对象。如果protocol>=1，文件对象需要是二进制模式打开的。
pickle.load(file)
注解：从file中读取一个字符串，并将它重构为原来的python对象。
file：类文件对象，有read()和readline()接口。
保存数据
tmpdatapath = "E:\\data\\u_i_matrix.csv" savefp = open(tmpdatapath,"w") pickle.dump(u_i_mat,savefp) savefp.close();
导入数据
fp_mat = open("E:\\data\\tmpdata\\u_i_matrix.csv","r")
rMat = pickle.load(fp_mat)
fp_mat.close()
追加：将内容通过print输入到文件中
str=”a string to print to file” f=open(‘out.txt','w') print >>f,str f.close()
以上这篇对python中大文件的导入与导出方法详解就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
这篇文章主要给大家介绍了关于利用Python将每日一句定时推送至微信的实现方法，文中通过示例代码将实现的步骤一步步介绍的非常详细，需要的朋友可以参考借鉴，下面随着小编来一起学习学习吧2018-08-08
这篇文章主要为大家详细介绍了Python中的栈，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下，希望能够给你带来帮助2022-03-03
这篇文章主要为大家详细介绍了Python如何利用flask实现restful接口，文中的示例代码讲解详细，具有一定的借鉴价值，需要的可以参考一下2023-02-02
这篇文章主要介绍了使用SQLAlchemy操作数据库表过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-06-06
在本篇文章里小编给大家整理的是一篇关于python高级内置函数用法实例内容，有兴趣的朋友们可以学参考下。2021-09-09
下面小编就为大家分享一篇Python-OpenCV基本操作方法详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-04-04
这篇文章主要介绍了selenium+Chrome滑动验证码破解二(某某网站)，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2019-12-12
Python有两种错误很容易辨认:语法错误和异常.本文就给大家详细介绍一下Python错误和异常,对正在学习python的小伙伴们很有帮助哦,需要的朋友可以参考下2021-05-05
在Python中,venv是一个用于创建和管理虚拟环境的模块,虚拟环境可以帮助你在项目之间隔离不同的Python包和依赖关系,这篇文章主要介绍了python的virtualenv虚拟环境常见问题和命令,需要的朋友可以参考下2024-07-07
在本文中，我们将会探索使用Python编程语言工具来检索Linux系统各种信息,需要的朋友可以参考下2014-07-07
最新评论