shell命令按行分割文本文件

港控/mmm° 2022-10-15 12:49 395阅读 0赞

**windows环境**下可以使用 Git Bash![20210525102246529.png][]执行 **split** 命令

## sed ##

常用的分割文本的方法都是通过sed -n 命令来操作

*  优点：是可以指定具体的行
 *  缺点：每次分割要重新读取整个文本，效率比较低。

## split ##

*  缺点：不能将结果一次放在指定的文件夹，此时可以已区别其他文件名的格式命名然后mv就行

用法:

split [-bl] file [prefix]

参数

> **-b size**：对file进行切分，每个小文件大小为size。可以指定单位b、k、m。
> 
> **-C size**：与-b选项类似，但是切割时尽量维持每行的完整性。
> 
> **-l lines**：按行分割,每个文件有 lines行
> 
> **-a num**：以num个数字或字母做尾数
> 
> **-d**：添加数字后缀
> 
> **prefix**：分割后产生的文件名前缀。

## 案例 ##

把**1111.txt** 文件每2000行切割为一个文件，添加数字后缀，以2位数字做尾数，part:分割后的文件的前缀

split -l 2000 -d -a 2 1111.txt part

结果文件：  
![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JhYnlsb3Zld2Vp_size_16_color_FFFFFF_t_70][]

## 升级版 ##

split -l 2000 1111.txt -d -a 2 part_&&ls|grep part_ | xargs -n1 -i {} mv {} {}.txt

在基础版的结果上，先执行ls命令，查找 part\_ 开头的文件，然后逐个重命名为.txt

[20210525102246529.png]: /images/20221014/34b0c57a42544b1bb06055efaf737298.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JhYnlsb3Zld2Vp_size_16_color_FFFFFF_t_70]: /images/20221014/2cbbf69fd14242e0b724719468f16421.png

发表评论取消回复

表情：

评论列表（有 0 条评论，395人围观）

还没有评论，来说两句吧...

相关阅读

相关【java基础：BufferedReader】readLine按行读取文本文件

要求：本项目目录下有一个a.txt文件，内容为静夜思；利用BufferedReader读取文本内容，并输出打印在控制台； ![955c6a834c6e49008f2d

不念不忘少年蓝@/ 2024年04月03日 11:25/ 0 赞/ 83 阅读

相关 java时间按天分割_Java实现按行分割大文件

![8af8eac2eda5aa3ed317b53350551da0.png][] 简介工作的时候，需要将一个大的文本文件按行分割成几个小文件。本来懒得写，想网上copy

￡神魔★判官ぃ/ 2022年11月08日 14:16/ 0 赞/ 217 阅读

相关 shell命令按行分割文本文件

windows环境下可以使用 Git Bash![20210525102246529.png][]执行 split 命令 sed 常用的分割文本的方法都是通过sed -

港控/mmm°/ 2022年10月15日 12:49/ 0 赞/ 396 阅读

相关 shell按行读取文件

方法一： !/bin/bash filename="filename" while read line; do e

系统管理员/ 2022年08月19日 14:16/ 0 赞/ 238 阅读

相关 shell命令统计文本文件

使用shell命令统计文本文件假设某文本文件test\_\是这样的格式：字段1|字段2|………………………… 字段1|字段2|………………………… ………………

系统管理员/ 2022年08月09日 16:47/ 0 赞/ 149 阅读

相关 linux【Shell脚本】逐行处理文本文件

经常会对文体文件进行逐行处理，在Shell里面如何获取每行数据，然后处理该行数据，最后读取下一行数据，循环处理．有多种解决方法如下： 1.通过read命令完成． rea

旧城等待，/ 2022年07月14日 15:49/ 0 赞/ 325 阅读

相关 java分割超大文本文件

因需要处理数据库字段中的json字段，所以把数据库数据导出为sql文件但是因为文件太大，想通过多线程来加快处理速度，需要把文件拆分开来 package util

╰+攻爆jí腚メ/ 2022年06月06日 13:54/ 0 赞/ 217 阅读

相关 Java文本文件的按行读取

package my; import java.io.BufferedReader; import java.io.File; im

Love The Way You Lie/ 2022年05月10日 04:03/ 0 赞/ 211 阅读

相关用linux shell逐行读取文本文件内容

分享一下我老师大神的人工智能教程。零基础！通俗易懂！风趣幽默！还带黄段子！希望你也加入到我们人工智能的队伍中来！[https://blog.csdn.net/jiangjuns

小鱼儿/ 2022年03月17日 09:56/ 0 赞/ 304 阅读

相关 linux shell 按行逐行读取文件

Shell按行读取文件的方法有很多，下面写出三种方法：写法一： !/bin/bash PATH=/bin:/sbin:/usr/bin:/usr

向右看齐/ 2021年08月27日 19:04/ 0 赞/ 610 阅读