Python使用open函数的buffering设置文件缓冲方式
更新时间：2024年02月10日 10:03:29 作者：AllardZhao
这篇文章主要介绍了Python使用open函数的buffering设置文件缓冲方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
如何设置文件的缓冲
实际案例
将文件内容写到硬件设备时，使用系统调用，这类I/O操作的时间很长。
为了减少I/O操作的次数，文件通常使用缓冲区。
(有足够多的数据才进行系统调用）文件的缓冲行为，分为全缓冲、行缓冲、无缓冲。
如何设置python中文件对象的缓冲行为？
python文件对象默认的缓冲行为4个字节(4096)
解决方案
- 全缓冲：open函数的buffering设置为大于1的整数n，n为缓冲区大小。
- 行缓冲：open函数的buffering设置为1 。
- 无缓冲：pen函数的buffering设置为0。
注意：
都是在python交互模式下进行的操作，如果是用脚本，脚本运行完关闭文件对象，缓冲区内容就会写到磁盘中，这样就观察不了缓冲区不同大小的行为了。
文件缓冲介绍？
对于磁盘这类的块设备，它的读写不是一个字节一个字节完成的，而是按块每次读写一个块，假设一个块的大小是4096个字节，那就意味着写入一个字节和写入4096个字节都需要一次I/O操作，它们的用时是相同的。
在这种情况为了提高效率就要减少I/O操作的次数，使用的手段就是为文件设立一个缓冲区。
当需要写入的字节数不足一个块设备大小的时候，那么都放入缓冲区当中，凑够一个块的大小才调用一次系统调用。
- 全缓冲就是缓冲区有一定大小满足那个数量就进行一次系统调用；
- 行缓冲就是碰到一个换行符就进行一次输出也就是一次系统调用；
- 无缓冲就是不希望有缓冲的实时写入到文件，如串口设备，需要及时的发送到串口上去。
代码演示
f = open('open.txt', 'wb')
'''
使用tail -f open.txt，实时查看文件内容，
python交互模式下，输入以下内容，查看写入4096个字节前后输出变化。
'''
f.write(b'abc')
f.write(b'+' * 4093)
f.write(b'-')
'''
普通文件默认的缓冲行为，缓冲区的大小4096，是根据平台和
块设备自身的属性相关。在某些情况下想改变缓冲区的大小应该怎么做？
通过open函数buffering参数设置缓冲大小。
'''
# 设置全缓冲区的大小为2048
f2 = open('demo2.txt', 'wb', buffering=2048)
f2.write(b'+' * 1024)
f2.write(b'+' * 1023)
f2.write(b'-' * 2)
# 设置行缓冲，buffering为1
f3 = open('demo3.txt', 'wb', buffering=1)
f.write(b'abc')
f.write(b'123')
f.write(b'\n')
# 无缓冲，buffering为0
f4 = open('demo4.txt', 'wb', buffering=0)
f4.write(b'a')
f4.write(b'1234')总结
以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
解决pandas .to_excel不覆盖已有sheet的问题
今天小编就为大家分享一篇解决pandas .to_excel不覆盖已有sheet的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-12-12
这篇文章主要介绍了python 地图经纬度转换、纠偏的实例代码,非常不错，具有一定的参考借鉴价值，需要的朋友可以参考下2018-08-08
下面有一些相对不常见但非常有用的Python技巧，小编来和大家一起学习一下2019-05-05
jieba分词,完全开源,有集成的python库,简单易用。下面这篇文章主要给大家介绍了关于python使用jieba实现中文分词去停用词的相关资料，文中通过示例代码介绍的非常详细，需要的朋友可以参考借鉴，下面来一起看看吧。2018-03-03
这篇文章主要介绍了Django框架验证码用法,结合实例形式分析了Python Django框架验证码的功能、实现方法及相关操作技巧,需要的朋友可以参考下2019-05-05
这篇文章主要为大家详细介绍了Python NumPy中索引的使用方法，文中的示例代码讲解详细，对我们学习Python有一定帮助，需要的可以参考一下2022-08-08
掌握 Python 中的 set 数据结构，是算法和数据结构的基本功，今天我们从一个实战案例出发，探讨如何利用Python集合显著优化算法性能，感兴趣的同学跟着小编一起来探讨吧2023-06-06
这篇文章主要介绍了python 监控logcat关键字功能,本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2020-09-09
Graphviz 是一个自动排版的作图软件，可以生成 png pdf 等格式，这篇文章主要介绍了graphviz 2022最新安装教程适用初学者,需要的朋友可以参考下2023-02-02
Requests是一个功能强大的Python HTTP库，用于发送HTTP请求，获取响应数据，本文主要来和大家聊聊它的用法，需要的小伙伴可以跟随小编一起学习一下2023-07-07
最新评论