linux下如何切割大文件
背景
工作傳輸數(shù)據(jù)的時(shí)候,經(jīng)常會(huì)遇到限制文件大小的情況,這是就要將大文件切割成幾個(gè)小文件,用過(guò)for循環(huán)+sed的方法,還有split的方法,剛發(fā)現(xiàn)split本身提供了不同場(chǎng)景的切割方法。
整理一下,非常好用。
首先split --help linux會(huì)顯示命令的幫助,提供了“a”“b”“C”“d”“l”五個(gè)選項(xiàng)注意:C是大寫(xiě),小寫(xiě)報(bào)錯(cuò)
我在這里準(zhǔn)備了一個(gè)6K多,100行的info.txt文件做演示
文件內(nèi)容如下:
場(chǎng)景一
按文件大小切分 每個(gè)1K(也可以選擇‘M’‘G’‘T’等)執(zhí)行split -b 1k info.txt 結(jié)果如下,每個(gè)文件被均分為1K
的7個(gè)文件,第七個(gè)小。其中‘1_’做為文件的前綴。
但是看一下每個(gè)文件的內(nèi)容發(fā)現(xiàn),有的行不完整了
執(zhí)行split -C 1k info.txt 發(fā)現(xiàn)文件不是均分成1K但是文件的內(nèi)容是完整的,所以大家懂了吧
場(chǎng)景二
按行切分(這里一次演示剩下的3個(gè)命令)
執(zhí)行split -l 10 -d -a 3 info.txt 1_
可以看到-l把每個(gè)文件切成10行文件的后綴不是aa變成了000這是-d的效果,用數(shù)子后綴,-a 3是后綴3個(gè),如果-a 4 后綴就變成了0000
每個(gè)都是10行
總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
Linux系統(tǒng)運(yùn)行級(jí)別詳細(xì)介紹
大家好,本篇文章主要講的是Linux系統(tǒng)運(yùn)行級(jí)別詳細(xì)介紹,感興趣的同學(xué)趕快來(lái)看一看吧,對(duì)你有幫助的話記得收藏一下,方便下次瀏覽2021-12-12使用VMware 15 安裝虛擬機(jī)和使用CentOS 8的步驟詳解
這篇文章主要介紹了使用VMware 15 安裝虛擬機(jī)和使用CentOS 8的詳細(xì)步驟,本文給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-01-01CentOS6.5安裝glibc-2.14后locale出現(xiàn)No?such?file?or?directory解
大家好,本篇文章主要講了CentOS6.5安裝glibc-2.14后locale出現(xiàn)No?such?file?or?directory解決辦法,感興趣的同學(xué)趕快來(lái)看看吧,希望對(duì)你有幫助2021-11-11linux查看硬盤(pán)大小與掛載硬盤(pán)的實(shí)現(xiàn)
這篇文章主要介紹了linux查看硬盤(pán)大小與掛載硬盤(pán)的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-09-09