Python高级应用实例对比：高效计算大文件中的最长行的长度
更新时间：2014年06月08日 09:42:58 作者：
在操作某个很多进程都要频繁用到的大文件的时候，应该尽早释放文件资源（f.close()）,只有这样才能算是一则高效率的代码，下面我们就来分析下这3种方法的优劣
前2种方法主要用到了列表解析，性能稍差，而最后一种使用的时候生成器表达式，相比列表解析，更省内存
列表解析和生成器表达式很相似：
列表解析
[expr for iter_var in iterable if cond_expr]
生成器表达式
(expr for iter_var in iterable if cond_expr)
方法1：最原始
复制代码 代码如下:
longest = 0
f = open(FILE_PATH,"r")
allLines = [line.strip() for line in f.readlines()]
f.close()
for line in allLines:
linelen = len(line)
if linelen>longest:
longest = linelen
方法2：简洁
复制代码 代码如下:
f = open(FILE_PATH,"r")
allLineLens = [len(line.strip()) for line in f]
longest = max(allLineLens)
f.close()
缺点：一行一行的迭代f的时候，列表解析需要将文件的所有行读取到内存中，然后生成列表
方法3：最简洁，最节省内存
复制代码 代码如下:
f = open(FILE_PATH,"r")
longest = max(len(line) for line in f)
f.close()
或者
复制代码 代码如下:
print max(len(line.strip()) for line in open(FILE_PATH))
相关文章
在本篇文章里小编给大家分享了关于python中id函数运行方式及相关实例，需要的朋友们可以参考下。2020-07-07
这篇文章将通过实例给大家分享Python中对象迭代与反迭代的技巧，对大家学习或者使用python具有一定的参考借鉴价值。有需要的下面来一起看看吧。2016-09-09
这篇文章主要为大家详细介绍了python实现贪吃蛇双人大战，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2020-04-04
本文主要介绍了Conda中的环境迁移到另一个服务器，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-03-03
这篇文章主要为大家详细介绍了机器学习python实战之决策树的相关资料 ，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2017-11-11
Python被人诟病最多的大概就是性能差，在这里讲一下 Python 的多进程，多线程与协程。首先声明这不是教程，看完这篇文章，大概能够对 Python 的多进程与多线程有一定的了解。2016-07-07
在工作中难免会碰到这样的需求,监控指定目录,下面小编就来和大家介绍一下如何利用watchfiles 模块实现监控目录的变更,感兴趣的可以了解下2023-09-09
python中字符串String及其常见操作指南(方法、函数)
String方法是用来处理代码中的字符串的,它几乎能搞定你所遇到的所有字符串格式,下面这篇文章主要给大家介绍了关于python中字符串String及其常见操作(方法、函数)的相关资料,需要的朋友可以参考下2022-04-04
这篇文章主要为大家详细介绍了python实现图片数据增强的相关知识,文中的示例代码讲解详细,具有一定的学习价值,感兴趣的小伙伴可以跟随小编一起了解一下2023-10-10
今天主要是给大家推荐一个叫PDM的工具，全称：Python Development Master，它也是非常好用。本文将为大家详细讲讲它的使用，感兴趣的可以了解一下2022-08-08
最新评论