利用python在大量数据文件下删除某一行的例子
更新时间：2019年08月21日 16:06:15 作者：cm940114
今天小编就为大家分享一篇利用python在大量数据文件下删除某一行的例子，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
python修改大数据文件时，如果全加载到内存中，可能会导致内存溢出。因此可借用如下方法，将分件分段读取修改。
with open('file.txt', 'r') as old_file:
with open('file.txt', 'r+') as new_file:
current_line = 0
# 定位到需要删除的行
while current_line < (3 - 1): #(del_line - 1)
old_file.readline()
current_line += 1
# 当前光标在被删除行的行首，记录该位置
seek_point = old_file.tell()
# 设置光标位置
new_file.seek(seek_point, 0)
# 读需要删除的行，光标移到下一行行首
old_file.readline()
# 被删除行的下一行读给 next_line
next_line = old_file.readline()
# 连续覆盖剩余行，后面所有行上移一行
while next_line:
new_file.write(next_line)
next_line = old_file.readline()
# 写完最后一行后截断文件，因为删除操作，文件整体少了一行，原文件最后一行需要去掉
new_file.truncate()
注：truncate（）函数括号可以加数字，表示删除数字之后的字符串，如果不加 就从当前光标处开始截断删除
以上这篇利用python在大量数据文件下删除某一行的例子就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
邮件合并是现代办公中一项显著提升效率的技术,它巧妙地将大量个体数据与预设的文档模板相结合,实现了一次性批量生成定制化文档,下面我们就来看看如何使用Python实现在Word文档中进行邮件合并吧2024-04-04
这篇文章主要介绍了python实现教务管理系统，实现了管理员、教职工、学生三种不同身份的操作，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-03-03
这篇文章主要介绍了详解Python+opencv裁剪/截取图片的几种方式，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2021-04-04
今天小编就为大家分享一篇Python操作Excel插入删除行的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-12-12
最近去笔试，在面试过程中遇到了几个编程题，比较基础。所以想着总结一下，所以下面这篇文章主要给大家分享了几道你可能遇到的python面试题，文中给出了详细的示例代码供大家参考学习，需要的朋友们下面来一起看看吧。2017-07-07
这篇文章主要为大家介绍了Python 异步之如何启动获取事件循环示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-03-03
这篇文章主要介绍了Python3.7 + Yolo3识别语音播报功能,开始之前我们先得解析出来Yolo3的代码，从而获取到被识别出来的物体标签，具体详细过程跟随小编一起看看吧2021-12-12
这篇文章主要介绍了关于Python的各种文件操作,适合刚入门的小白或者对于文件操作基础不太牢固的同学,需要的朋友可以参考下2023-04-04
这篇文章主要介绍了python使用Matplotlib画饼图，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-09-09
Python3+django2.0+apache2+ubuntu14部署网站上线的方法
这篇文章主要介绍了Python3+django2.0+apache2+ubuntu14部署网站上线的方法，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-07-07
最新评论