linux大文件分割命令 linux分解大文件

linux中怎么将文件合并

方法一：使用cat命令从文件中读入两个文件linux大文件分割命令，然后将重定向到一个新linux大文件分割命令的文件。这种方法可以一次性合并任意多个文件。

用法示例：

将file1.txt和file2.txt合并到file.txt

$ cat file1.txt file2.txt file.txt

方法二：只使用cat命令读入一个文件，然后使用将文本流追加到另一个文件的末位。

用法示例：

将file1.txt追加到file2.txt的末尾

$ cat file1.txt file2.txt

扩展资料：

反之分割文件

linux下文件分割可以通过split命令来实现，可以指定按行数分割和安大小分割两种模式。Linux下文件合并可以通过cat命令来实现，非常简单。

1、在Linux下用split进行文件分割：

模式一：指定分割后文件行数

对与txt文本文件，可以通过指定分割后文件的行数来进行文件分割。

命令：split -l 300 large_file.txt new_file_prefix

模式二：指定分割后文件大小

split -b 10m server.log waynelog

对二进制文件我们同样也可以按文件大小来分隔。

2、将一个大文件分成若干个小文件方法

例如将一个BLM.txt文件分成前缀为 BLM_ 的1000个小文件，后缀为系数形式，且后缀为4位数字形式

先利用wc -l BLM.txt

读出 BLM.txt 文件一共有多少行

再利用 split 命令

split -l 2482 ../BLM/BLM.txt -d -a 4 BLM_

将文件 BLM.txt 分成若干个小文件，每个文件2482行(-l 2482)，文件前缀为BLM_ ，系数不是字母而是数字（-d），后缀系数为四位数（-a 4）

linux切割、备份大的nohup日志文件

nohup.out日志文件太大linux大文件分割命令了，且一直增长，命令查看日志受阻

①切割大文件变成多个小文件

②每天定时保存前一天linux大文件分割命令的日志，重新记录当天日志

1.利用split命令切割

①按文件大小切割大文件：

切割文件：将ohup.out文件每500M切割一个文件放到/home/nginx/logs/newlog/目录下

②按文件行数切割大文件：

查询文件行数：

wc -l b.log

2038711 b.log

按50W行切割一个文件：

split -l 500000 -d -a 4 /home/nginx/logs/b.log /home/nginx/logs/newlog/

2.定时备份前一天日志，重新记录当天日志splitlog.sh

3.定时执行

查看定时任务：

crontab -l

编辑定时任务：

crontab -e

重启定时任务：

删除10天以前linux大文件分割命令的日志文件，此日期为文件本身的时间，非日志内容时间

linux文件拆分命令

Linux中分割文件用split命令，这个命令可以将一个文件分割成指定大小的多个文件，split命令的用法是：

split -b 分割的大小 需要分割的文件名 分割后文件的前导文字

这里解释一下，-b参数表示按照文件大小单位来进行分割（split命令还有一个-l参数，是根据文本文件的行数来进行分割，这个-b参数是根据大小来分割的），-b参数后面跟的是分割的依据——文件大小，文件大小的单位可以是b、k、m，比如300m。“分割后文件的前导文字”是干嘛的呢，其实是在分割后的文件名前面加上一个前缀。下面是一个例子，就假设需要分割的文件是/root/bigfile：

split -b 50m /root/bigfile chunk

这条命令产生的分割文件可能是：chunkaa、chunkab、chunkac，看到前导文字的作用了吧。

那么如何将分割后的文件再合并起来呢，还是接着上面的那个例子，用下面这条命令就可以了（先用cd /root切换到/root目录）：

cat chunk* bigfile

「方法」Linux下将文件打包、压缩并分割成指定大小

tar -zcvf cm-11.tar.gz cm-11

//将cm-11文件夹压缩成cm-11.tar.gz

split -b 4000M -d -a 1 cm-11.tar.gz cm-11.tar.gz.

//使用split命令linux大文件分割命令，-b 4000M 表示设置每个分割包的大小，单位还是可以k

// -d "参数指定生成的分割包后缀为数字的形式

//-a x来设定序列的长度(默认值是2)，这里设定序列的长度为1

执行命令后，生成压缩包如下：

tar -zcvf cm-11.tar.gz cm-11 | split -b 4000M -d -a 1 - cm-11.tar.gz.

//采用管道，其中 - 参数表示将所创建的文件输出到标准输出上

tar -zxvf cm-11.tar.gz

cat cm-11.tar.gz.* | tar -zxv

tar可以用来压缩打包单文件、多个文件、单个目录、多个目录。

Linux打包命令 tar

tar命令可以用来压缩打包单文件、多个文件、单个目录、多个目录。

常用格式：

单个文件压缩打包 tar -czvf my.tar.gz file1

多个文件压缩打包 tar -czvf my.tar.gz file1 file2,...（file ）（也可以给file 文件mv 目录在压缩）

单个目录压缩打包 tar -czvf my.tar.gz dir1

多个目录压缩打包 tar -czvf my.tar.gz dir1 dir2

解包至当前目录：tar -xzvf my.tar.gz

cpio

含子目录find x* | cpio -o /y/z.cpio

不含子目录ls x* | cpio -o /y/z.cpio

解包： cpio -i /y/z.cpio

[root@linux ~]# tar [-cxtzjvfpPN] 文件与目录 ....

参数：

-c ：建立一个压缩文件的参数指令(create 的意思)linux大文件分割命令；

-x ：解开一个压缩文件的参数指令linux大文件分割命令！

-t ：查看 tarfile 里面的文件！

特别注意，在参数的下达中， c/x/t 仅能存在一个！不可同时存在！

因为不可能同时压缩与解压缩。

-z ：是否同时具有 gzip 的属性？亦即是否需要用 gzip 压缩？

-j ：是否同时具有 bzip2 的属性？亦即是否需要用 bzip2 压缩？

-v ：压缩的过程中显示文件！这个常用，但不建议用在背景执行过程！

-f ：使用档名，请留意，在 f 之后要立即接档名喔！不要再加参数！

　例如使用『 tar -zcvfP tfile sfile』就是错误的写法，要写成

　『 tar -zcvPf tfile sfile』才对喔！

-p ：使用原文件的原来属性（属性不会依据使用者而变）

-P ：可以使用绝对路径来压缩！

-N ：比后面接的日期(yyyy/mm/dd)还要新的才会被打包进新建的文件中！

--exclude FILE：在压缩的过程中，不要将 FILE 打包！

linux系统下大文件的分割/搜索/导出

在linux系统下用vim打开大小几个G、甚至几十个G的文件时，是非常慢的。

这时，我们可以利用下面的方法分割文件，然后再打开。

1、查看/导出文件的前多少行

上面命令的意思是：把big.log文件前10000行的数据写入到temp.log文件中。

2 、查看文件的后多少行

上面命令的意思是：把big.log文件后10000行的数据写入到temp.log文件中。

3 、查看文件的几行到几行

上面命令的意思是：把big.log文件第10到10000行的数据写入到temp.log文件中。

4 、根据查询条件导出

5、 实时监控文件输出(查看日志时经常会用到)

linux下将文件按行分割的命令

1）按2行切割 -l 2

2）指定切割后的文件前缀名 data_

3）指定切割后的文件后缀名为数字 -d

4）指定切割后的文件后缀名数字的长度    -a 4，即位宽（10进制），这里长度可根据切割出来的文件有多少估算，到底拆分为几个文件，由总行数，和每个文件的行数决定，不用指定。

如果为-a 4文件的后缀数字从0000开始计算，依次为0001，0002，0003，0004

split -l 2 data.log -d -a 4 data_

将文件data.log进行拆分，每个文件2行，如果文件总共有7行，则分为data_0000，data_0001，data_0002，data_0003

关于linux大文件分割命令和linux分解大文件的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。