python 实时遍历日志文件
更新时间：2016年04月12日 13:31:44 作者：卑鄙的wo
这篇文章主要介绍了python 实时遍历日志文件 的相关资料,需要的朋友可以参考下
open 遍历一个大日志文件
使用 readlines() 还是 readline() ?
总体上 readlines() 不慢于python 一次次调用 readline()，因为前者的循环在C语言层面，而使用readline() 的循环是在Python语言层面。
但是 readlines() 会一次性把全部数据读到内存中，内存占用率会过高，readline() 每次只读一行，对于读取 大文件， 需要做出取舍。
如果不需要使用 seek() 定位偏移， for line in open('file') 速度更佳。
使用 readlines()，适合量级较小的日志文件
import os
import time
def check():
p =
while True:
f = open("log.txt", "r+")
f = open("result.txt", "a+")
f.seek(p, )
#readlines()方法
filelist = f.readlines()
if filelist:
for line in filelist:
#对行内容进行操作
f.write(line)
#获取当前位置，为下次while循环做偏移
p = f.tell()
print 'now p ', p
f.close()
f.close()
time.sleep()
if __name__ == '__main__':
check()
使用 readline()，避免内存占用率过大
import os
import time
def check():
p =
while True:
f = open("log.txt", "r+")
f = open("result.txt", "a+")
f.seek(p, )
#while readline()方法
while True:
l = f.readline()
#空行同样为真
if l:
#对行内容操作
f.write(l)
else:
#获取当前位置，作为偏移值
p = f.tell()
f.close()
f.close()
break
print 'now p', p
time.sleep()
if __name__ == '__main__':
check()
相关文章
大家好，本篇文章主要讲的是用python爬取中国大学排名网站排名信息，感兴趣的同学赶快来看一看吧，对你有帮助的话记得收藏一下2022-01-01
今天小编就为大家分享一篇Python读写docx文件的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
今天小编就为大家分享一篇python在每个字符后添加空格的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
这篇文章主要介绍了关于SSD目标检测模型的人脸口罩识别问题，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-11-11
本文主要介绍了Python将图片转为漫画风格的示例，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-04-04
定时任务是编程中常见的需求,它可以按照预定的时间表执行特定的任务或操作,在Python中,有多种方法可以实现定时任务,下面小编就来和大家详细讲讲吧2023-11-11
tensorflow 实现从checkpoint中获取graph信息
今天小编就为大家分享一篇tensorflow 实现从checkpoint中获取graph信息，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-02-02
通常我们定义一个函数，然后调用该函数时，函数相关的代码才开始执行。可是很多人并不知道，当我们定义函数时，一些代码就开始执行了。今天就来说说函数这个不为人知的一面2021-11-11
这篇文章主要介绍了python基于xmlrpc实现二进制文件传输的方法,实例分析了xmlrpclib模块的使用技巧,需要的朋友可以参考下2015-06-06
PyTorch中torch.tensor()和torch.to_tensor()的区别
在Pytorch中Tensor和tensor都用于生成新的张量,但二者并不相同,下面这篇文章主要给大家介绍了关于PyTorch中torch.tensor()和torch.to_tensor()区别的相关资料,需要的朋友可以参考下2023-01-01
最新评论