linux下如何切割大文件
更新时间：2023年06月02日 08:53:28 作者：wen0220
这篇文章主要介绍了linux下如何切割大文件问题，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
背景
工作传输数据的时候，经常会遇到限制文件大小的情况，这是就要将大文件切割成几个小文件，用过for循环+sed的方法，还有split的方法，刚发现split本身提供了不同场景的切割方法。
整理一下，非常好用。
首先split --help linux会显示命令的帮助，提供了“a”“b”“C”“d”“l”五个选项注意：C是大写，小写报错
我在这里准备了一个6K多，100行的info.txt文件做演示
文件内容如下：
场景一
按文件大小切分 每个1K（也可以选择‘M’‘G’‘T’等）执行split -b 1k info.txt 结果如下，每个文件被均分为1K
的7个文件，第七个小。其中‘1_’做为文件的前缀。
但是看一下每个文件的内容发现，有的行不完整了
执行split -C 1k info.txt 发现文件不是均分成1K但是文件的内容是完整的，所以大家懂了吧
场景二
按行切分（这里一次演示剩下的3个命令）
执行split -l 10 -d -a 3 info.txt 1_
可以看到-l把每个文件切成10行文件的后缀不是aa变成了000这是-d的效果，用数子后缀，-a 3是后缀3个，如果-a 4 后缀就变成了0000
每个都是10行
总结
以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
Ubuntu20的tzselect设置时间失效的问题,树莓派服务器(推荐)
这篇文章主要介绍了Ubuntu20的tzselect设置时间失效的问题，树莓派服务器，本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2020-05-05
在Linux系统中,为了防止客户端程序在分配TCP源端口时使用到服务器程序绑定的特定端口（例如12345）,可以采用多种策略来避免端口冲突,总体而言,优先使用sysctl设置保留端口是最简单有效的解决方案,但也可以采用其他方法来确保端口不会发生冲突2024-10-10
这篇文章主要介绍了从0开始简单部署腾讯云服务器的方法步骤，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-07-07
这篇文章主要介绍了Linux解压JAR包 查看class内容方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2023-11-11
这篇文章主要介绍了Linux使用shell脚本定时删除历史日志文件,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-08-08
这篇文章主要介绍了如何在Apache中设置目录禁止访问，非常的简单实用，有需要的朋友可以参考下2014-11-11
这篇文章主要介绍了ubuntu开启SSH服务远程登录操作的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-08-08
LVS+Keepalived构建高可用负载均衡配置方法(配置篇)
这篇文章主要介绍了LVS+Keepalived构建高可用负载均衡配置方法,需要的朋友可以参考下2013-06-06
本篇文章主要通过实例步骤给大家分享了在学习git文件管理时的心得，有兴趣的朋友学习参考下吧。2017-12-12
这篇文章主要介绍了详解SSH如何配置key免密码登录的相关资料，文中介绍的非常详细，对大家的学习或者工作具有一定的参考价值，需要的朋友们下面来一起看看吧。2017-03-03
最新评论