Linux下常用文本處理命令

Linux下常用文本處理命令大全

成都創(chuàng)新互聯(lián)公司專業(yè)為企業(yè)提供綏棱網(wǎng)站建設(shè)、綏棱做網(wǎng)站、綏棱網(wǎng)站設(shè)計、綏棱網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計與制作、綏棱企業(yè)網(wǎng)站模板建站服務(wù)，10余年綏棱做網(wǎng)站經(jīng)驗，不只是建網(wǎng)站，更提供有價值的思路和整體網(wǎng)絡(luò)服務(wù)。

Linux下面有很多經(jīng)典的非常有用的命令，其中處理文本的命令就有很多。下面就讓我們一起看看這些經(jīng)典的Linux文本處理命令有哪些吧。

一. sort

文件排序, 通常用在管道中當(dāng)過濾器來使用. 這個命令可以依據(jù)指定的關(guān)鍵字或指定的字符位置, 對文件行進行排序. 使用-m選項, 它將會合并預(yù)排序的輸入文件. 想了解這個命令的全部參數(shù)請參考這個命令的info頁.

二. tsort

拓?fù)渑判? 讀取以空格分隔的有序?qū)? 并且依靠輸入模式進行排序.

三. uniq

這個過濾器將會刪除一個已排序文件中的重復(fù)行. 這個命令經(jīng)常出現(xiàn)在sort命令的管道后邊.

四. expand, unexpand

expand命令將會把每個tab轉(zhuǎn)化為一個空格. 這個命令經(jīng)常用在管道中.

unexpand命令將會把每個空格轉(zhuǎn)化為一個tab. 效果與expand命令相反.

五. cut

一個從文件中提取特定域的工具. 這個命令與awk中使用的print $N命令很相似, 但是更受限. 在腳本中使用cut命令會比使用awk命令來得容易一些. 最重要的選項就是-d(字段定界符)和-f(域分隔符)選項.

六. paste

將多個文件, 以每個文件一列的形式合并到一個文件中, 合并后文件中的每一列就是原來的一個文件. 與cut結(jié)合使用, 經(jīng)常用于創(chuàng)建系統(tǒng)log文件.

七. join

這個命令與paste命令屬于同類命令. 但是它能夠完成某些特殊的目地. 這個強力工具能夠以一種特殊的形式來合并兩個文件, 這種特殊的形式本質(zhì)上就是一個關(guān)聯(lián)數(shù)據(jù)庫的簡單版本.

join命令只能夠操作兩個文件. 它可以將那些具有特定標(biāo)記域(通常是一個數(shù)字標(biāo)簽)的行合并起來, 并且將結(jié)果輸出到stdout. 被加入的文件應(yīng)該事先根據(jù)標(biāo)記域進行排序以便于能夠正確的匹配.

八. head

把文件的頭部內(nèi)容打印到stdout上(默認(rèn)為10行, 可以自己修改). 這個命令有一些比較有趣的選項.

九. tail

將一個文件結(jié)尾部分的內(nèi)容輸出到stdout中(默認(rèn)為10行). 通常用來跟蹤一個系統(tǒng)logfile的.修改情況, 如果使用-f選項的話, 這個命令將會繼續(xù)顯示添加到文件中的行.

十. wc

wc可以統(tǒng)計文件或I/O流中的”單詞數(shù)量”:

十一. fold

將輸入按照指定寬度進行折行. 這里有一個非常有用的選項-s, 這個選項可以使用空格進行斷行(譯者: 事實上只有外文才需要使用空格斷行, 中文是不需要的)(請參考例子 12-23和例子 A-1).

十二. fmt

一個簡單的文件格式器, 通常用在管道中, 將一個比較長的文本行輸出進行”折行”.

十三. col

這個命令用來濾除標(biāo)準(zhǔn)輸入的反向換行符號. 這個工具還可以將空白用等價的tab來替換. col工具最主要的應(yīng)用還是從特定的文本處理工具中過濾輸出, 比如groff和tbl. (譯者: 主要用來將man頁轉(zhuǎn)化為文本.)

十四. column

列格式化工具. 通過在合適的位置插入tab, 這個過濾工具會將列類型的文本轉(zhuǎn)化為”易于打印”的表格式進行輸出.

十五. colrm

列刪除過濾器. 這個工具將會從文件中刪除指定的列(列中的字符串)并且寫到文件中, 如果指定的列不存在, 那么就回到stdout. colrm 2 4 filename將會刪除filename文件中每行的第2到第4列之間的所有字符. p="" /filename將會刪除filename文件中每行的第2到第4列之間的所有字符.

Caution: 如果這個文件包含tab和不可打印字符, 那將會引起不可預(yù)期的行為. 在這種情況下, 應(yīng)該通過管道的手段使用expand和unexpand來預(yù)處理colrm.

十六. nl

計算行號過濾器. nl filename將會把filename文件的所有內(nèi)容都輸出到stdout上, 但是會在每個非空行的前面加上連續(xù)的行號. 如果沒有filename參數(shù), 那么就操作stdin.

nl命令的輸出與cat -n非常相似, 然而, 默認(rèn)情況下nl不會列出空行.

十七. pr

格式化打印過濾器. 這個命令會將文件(或stdout)分頁, 將它們分成合適的小塊以便于硬拷貝打印或者在屏幕上瀏覽. 使用這個命令的不同的參數(shù)可以完成好多任務(wù), 比如對行和列的操作, 加入行, 設(shè)置頁邊, 計算行號, 添加頁眉, 合并文件等等. pr命令集合了許多命令的功能, 比如nl, paste, fold, column, 和expand.

pr -o 5 –width=65 fileZZZ | more 這個命令對fileZZZ進行了比較好的分頁, 并且打印到屏幕上. 文件的縮進被設(shè)置為5, 總寬度設(shè)置為65.

一個非常有用的選項-d, 強制隔行打印(與sed -G效果相同).

十八. gettext

GNU gettext包是專門用來將程序的輸出翻譯或者本地化為不同國家語言的工具集. 在最開始的時候僅僅支持C語言, 現(xiàn)在已經(jīng)支持了相當(dāng)數(shù)量的其它程序語言和腳本語言.

想要查看gettext程序如何在shell腳本中使用. 請參考info頁.

十九. msgfmt

一個產(chǎn)生二進制消息目錄的程序. 這個命令主要用來本地化.

二十. iconv

一個可以將文件轉(zhuǎn)化為不同編碼格式(字符集)的工具. 這個命令主要用來本地化.

二十一. recode

可以認(rèn)為這個命令是上邊iconv命令的專業(yè)版本. 這個非常靈活的并可以把整個文件都轉(zhuǎn)換為不同編碼格式的工具并不是Linux標(biāo)準(zhǔn)安裝的一部分.

二十二. TeX, gs

TeX和Postscript都是文本標(biāo)記語言, 用來對打印和格式化的視頻顯示進行預(yù)拷貝.

TeX是Donald Knuth精心制作的排版系統(tǒng). 通常情況下, 通過編寫腳本的手段來把所有的選項和參數(shù)封裝起來一起傳到標(biāo)記語言中是一件很方便的事情.

Linux文本操作常用命令

在Linux系統(tǒng)里常用于文本查看、操作、統(tǒng)計的命令：

通過多敲鍵盤，形成手感 肌肉記憶 ，熟練掌握這些命令，在以后生信分析中游刃有余。以下是每個命令的詳細的介紹（主要是跟著 生信技能樹小郭老師 學(xué)習(xí)做的筆記）

接下來通過示例把10個命令的常用參數(shù)和用法展示出來：

參數(shù)的用法介紹：

注意事項：

用 cat 命令可以 查看文本 ，也可以 編輯文本 ，編輯文本要加 符號，退出時，另起一行，按 control C 退出

zcat可以查看壓縮的文本文件，tac逆向查看

結(jié)合 管道符| 使用

head / tail -n :查看文件的前 / 后 n 行，默認(rèn) 10 行 （在R語言里head和tail默認(rèn)是前6行）。

less命令用得最多 ，more命令用得比較少

3.1 less命令

less [參數(shù)] 文件名

less命令重要的補充用法1 ：

需要注意 退出 ：只要使用less命令， 按q鍵

less命令重要的補充用法2 ：

參數(shù)用法：

less命令 不加參數(shù) 查看文件：

less命令加 -N參數(shù) 查看文件：顯示行號

less命令加 -S參數(shù) 查看文件：單行顯示，非常規(guī)整

對比：less和cat命令顯示文本行號的用法：less -N，cat -n

3.2 more命令

**more ** 逐頁查看，按空格翻頁，按回車換行 ，more命令一般很少用，熟練掌握less命令就好

查看壓縮文件

wc 統(tǒng)計字符是也把換行符統(tǒng)計進去，但是別的命令不一定會把換行符算進去，。

常見參數(shù):

切記：用less命令，按q退出

cut命令是按關(guān)鍵詞來切的

常見參數(shù):

排列前：

排列后：

解釋：1和0比，1大；7和0比，7大…在sort字典排序里，100816比1737小，所以100816排在前面。

命令行查看一個表格結(jié)構(gòu)時，因為制表符對齊的原因，出現(xiàn)一個錯位的現(xiàn)象。還有 字典排序 可能和我們平時的認(rèn)知不一樣，所以 加上-n參數(shù) ， 讓數(shù)值有數(shù)學(xué)意義上的大小來排序 。

uniq命令去重，只有兩行出現(xiàn)重復(fù)，而且是相鄰的兩行，如果不相鄰，即使出現(xiàn)兩行一模一樣，不會去重。

uniq命令通常和sort命令搭配使用

換其它文件試試

總之，uniq命令使用時經(jīng)常和sort一起

常見參數(shù):

常見用法1：

paste file1 file2

-s :按行合并 演示

常見用法2 : paste - -

常見參數(shù):

要養(yǎng)成一個好習(xí)慣，原始數(shù)據(jù)不要輕易修改，修改的東西另外保存，文本保存用 (重定向)或是 (追加)

1. 用 less 查看 example.gtf ，然后管道符傳遞給 wc

2. 截取 example.gtf 第 9 列的內(nèi)容

3. 在第2步的基礎(chǔ)上截取分號分割的第1列

4. 在第3步的基礎(chǔ)上排序、去重復(fù)并統(tǒng)計

5. 在第4步的基礎(chǔ)上，將空格替換成制表符

補充小知識 ：

清屏 ：control L

查看歷史（輸入過的）命令 ：history

“l(fā)inux print”命令是什么？

printf 是linux 下的格式化輸出命令。

有點兒類似于python 和c 語言的printf 命令,但是應(yīng)該沒有c語言的那么強大.。printf 命令常用于linux 下的awk 編程, 平時使用輸出時用 echo 即可。pintf 命令不能接受管道符參數(shù),也不能之直接跟文件名, 但是可以跟系統(tǒng)命令執(zhí)行的結(jié)果,如`df` 或者 $(cat /etc/passwd)。

一、命令格式: printf ?'輸出類型轉(zhuǎn)義符' 輸出內(nèi)容。

二、常用輸出格式:

1、%ns : ?輸出字符串; 輸出n位的字符串；

2、 %ni: ????輸出整數(shù): 輸出n位的整數(shù)；

3、%m.nf: ?輸出浮點數(shù): m位整數(shù) 和 n位小數(shù)；

三、常用轉(zhuǎn)義符：

1、\t ?水平tab 鍵；

2、\v ?垂直tab 鍵；

3、\n ?換行；

4、\r ??回車, Enter鍵；

5、\f ??清除屏幕；

6、\b ?輸出退格鍵；

7、\a ?輸出警告聲音。

注意:

1. printf 命令默認(rèn)輸出結(jié)果沒有換行符,需要手工添加\n。

2. printf 命令后面不能接受管道符參數(shù), 如: ?df ?| print ?'%s' 是錯誤的。

3. print ?命令后面也不能直接跟文件名, 如: print '%5s' ?/etc/passwd ?是錯誤的。

4. print ?命令后可以跟系統(tǒng)命令執(zhí)行的結(jié)果, 如: print '%s' ?$(cat /etc/password)'。

linux print命令

具體參數(shù)及講解如下：

print命令的格式是：

print xxx

p xxx

1. print 操作符

@

是一個和數(shù)組有關(guān)的操作符，在后面會有更詳細的說明。

::

指定一個在文件或是一個函數(shù)中的變量。

{}

表示一個指向內(nèi)存地址的類型為type的一個對象。

2. 察看內(nèi)容

全局變量（所有文件可見的）

靜態(tài)全局變量（當(dāng)前文件可見的）

局部變量（當(dāng)前Scope可見的）

如果你的局部變量和全局變量發(fā)生沖突（也就是重名），一般情況下是局部變量會隱藏全局變量。如果此時你想查看全局變量的值時，你可以使用“::”操作符：

file::variable

function::variable

eg:

查看文件f2.c中的全局變量x的值：

gdb) p 'f2.c'::x

注：如果你的程序編譯時開啟了優(yōu)化選項，那么在用GDB調(diào)試被優(yōu)化過的程序時，可能會發(fā)生某些變量不能訪問，或是取值錯誤碼的情況。對付這種情況時，需要在編譯程序時關(guān)閉編譯優(yōu)化。GCC，你可以使用“-gstabs” 選項來解決這個問題。

3. 察看數(shù)組

(1)動態(tài)數(shù)組：

p *array@len

array:數(shù)組的首地址，len:數(shù)據(jù)的長度

eg:

(gdb) p *array@len

$1 = {2, 4, 6, 8, 10}

(2)靜態(tài)數(shù)組

可以直接用print數(shù)組名，就可以顯示數(shù)組中所有數(shù)據(jù)的內(nèi)容了。

4. 輸出格式

x 按十六進制格式顯示變量。

d 按十進制格式顯示變量。

u 按十六進制格式顯示無符號整型。

o 按八進制格式顯示變量。

t 按二進制格式顯示變量。

a 按十六進制格式顯示變量。

c 按字符格式顯示變量。

f 按浮點數(shù)格式顯示變量。

eg:

(gdb) p i

$21 = 101

(gdb) p/a i

$22 = 0x65

(gdb) p/c i

$23 = 101 'e'

5. 察看內(nèi)存

使用examine（簡寫x）來查看內(nèi)存地址中的值。語法：

x/

n、f、u是可選的參數(shù)。

（1）n 是一個正整數(shù)，表示顯示內(nèi)存的長度，也就是說從當(dāng)前地址向后顯示幾個地址的內(nèi)容。

（2）f 表示顯示的格式，參見上面。如果地址所指的是字符串，那么格式可以是s，如果地十是指令地址，那么格式可以是i。

（3）u 表示從當(dāng)前地址往后請求的字節(jié)數(shù)，如果不指定的話，GDB默認(rèn)是4個bytes。u參數(shù)可以用下面的字符來代替，b表示單字節(jié)，h表示雙字節(jié)，w表示四字 節(jié)，g表示八字節(jié)。當(dāng)我們指定了字節(jié)長度后，GDB會從指內(nèi)存定的內(nèi)存地址開始，讀寫指定字節(jié)，并把其當(dāng)作一個值取出來。

eg:

x/3uh 0x54320 ：從內(nèi)存地址0x54320讀取內(nèi)容，h表示以雙字節(jié)為一個單位，3表示三個單位，u表示按十六進制顯示。

6. 察看寄存器

（1）要查看寄存器的值，很簡單，可以使用如下命令：

info registers

（2）查看寄存器的情況。（除了浮點寄存器）

info all-registers

（3）查看所有寄存器的情況。（包括浮點寄存器）

info registers

（4）查看所指定的寄存器的情況。

寄存器中放置了程序運行時的數(shù)據(jù)，比如程序當(dāng)前運行的指令地址（ip），程序的當(dāng)前堆棧地址（sp）等等。你同樣可以使用print命令來訪問寄存器的情況，只需要在寄存器名字前加一個$符號就可以了。如：p $eip。

7. display自動顯示的變量

（1）格式：display[/i|s] [expression | addr]

eg:

display/i $pc

$pc是GDB的環(huán)境變量，表示著指令的地址，/i則表示輸出格式為機器指令碼，也就是匯編。于是當(dāng)程序停下后，就會出現(xiàn)源代碼和機器指令碼相對應(yīng)的情形，這是一個很有意思的功能。

（2）其他

undisplay

delete display

刪除自動顯示，dnums意為所設(shè)置好了的自動顯式的編號。如果要同時刪除幾個，編號可以用空格分隔，如果要刪除一個范圍內(nèi)的編號，可以用減號表示（如：2-5）

disable display

enable display

disable和enalbe不刪除自動顯示的設(shè)置，而只是讓其失效和恢復(fù)。

info display

查看display設(shè)置的自動顯示的信息。GDB會打出一張表格，向你報告當(dāng)然調(diào)試中設(shè)置了多少個自動顯示設(shè)置，其中包括，設(shè)置的編號，表達式，是否enable。

8. 設(shè)置

（1）set print address

set print address on

打開地址輸出，當(dāng)程序顯示函數(shù)信息時，GDB會顯出函數(shù)的參數(shù)地址。

（2）set print array

set print array on

打開數(shù)組顯示，打開后當(dāng)數(shù)組顯示時，每個元素占一行，如果不打開的話，每個元素則以逗號分隔。

（3）set print elements

這個選項主要是設(shè)置數(shù)組的，如果你的數(shù)組太大了，那么就可以指定一個來指定數(shù)據(jù)顯示的最大長度，當(dāng)?shù)竭_這個長度時，GDB就不再往下顯示了。如果設(shè)置為0，則表示不限制。

（4）set print null-stop

如果打開了這個選項，那么當(dāng)顯示字符串時，遇到結(jié)束符則停止顯示。這個選項默認(rèn)為off。

（5）set print pretty on

如果打開printf pretty這個選項，那么當(dāng)GDB顯示結(jié)構(gòu)體時會比較漂亮。如：

$1 = {

next = 0x0,

flags = {

sweet = 1,

sour = 1

},

meat = 0x54 "Pork"

}

（6）set print union

設(shè)置顯示結(jié)構(gòu)體時，是否顯式其內(nèi)的聯(lián)合體數(shù)據(jù)。

（7）set print object

在C++中，如果一個對象指針指向其派生類，如果打開這個選項，GDB會自動按照虛方法調(diào)用的規(guī)則顯示輸出，如果關(guān)閉這個選項的話，GDB就不管虛函數(shù)表了。

Linux 命令 grep （文檔編輯）-想玩轉(zhuǎn)linux就請一直看下去

Linux 命令大全

Linux grep 命令用于查找文件里符合條件的字符串。

grep 指令用于查找內(nèi)容包含指定的范本樣式的文件，如果發(fā)現(xiàn)某文件的內(nèi)容符合所指定的范本樣式，預(yù)設(shè) grep 指令會把含有范本樣式的那一列顯示出來。若不指定任何文件名稱，或是所給予的文件名為 - ，則 grep 指令會從標(biāo)準(zhǔn)輸入設(shè)備讀取數(shù)據(jù)。

參數(shù) ：

Linux 命令大全

1、在當(dāng)前目錄中，查找后綴有 file 字樣的文件中包含 test 字符串的文件，并打印出該字符串的行。此時，可以使用如下命令：

結(jié)果如下所示：

2、以遞歸的方式查找符合條件的文件。例如，查找指定目錄/etc/acpi 及其子目錄（如果存在子目錄的話）下所有文件中包含字符串"update"的文件，并打印出該字符串所在行的內(nèi)容，使用的命令為：

輸出結(jié)果如下：

3、反向查找。前面各個例子是查找并打印出符合條件的行，通過"-v"參數(shù)可以打印出不符合條件行的內(nèi)容。

查找文件名中包含 test 的文件中不包含test 的行，此時，使用的命令為：

結(jié)果如下所示：

linux查看較長或較短的純文本文件使用哪些命令

在命令行里顯示文本文件內(nèi)容：

cat：在命令行里顯示文本文件內(nèi)容，可以滾屏的（但是不方便把內(nèi)容輸出到其他文件，所以一般腳本內(nèi)部都用cat，less可以在調(diào)用腳本的時候用）。

less：在命令行里編輯文本文件。

vi：在圖形界面打開文本文件。

gedit，kate等等：在圖形界面打開任意文件或者url（gnome）。

命令作用

grep、fgrep和egrep命令這組命令以指定模式搜索文件，并通知用戶在什么文件中搜索到與指定的模式匹配的字符串，并打印出所有包含該字符串的文本行，在該文本行的最前面是該行所在的文件名。grep命令一次只能搜索一個指定的模式；egrep命令檢索擴展的正則表達式（包括表達式組和可選項）；fgrep命令檢索固定字符串，它不識別正則表達式，是快速搜索命令。

文章題目：linux打印文本的命令,Linux 打印
網(wǎng)頁網(wǎng)址：http://redsoil1982.com.cn/article40/dsepiho.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供品牌網(wǎng)站設(shè)計、網(wǎng)站營銷、App設(shè)計、網(wǎng)站策劃、面包屑導(dǎo)航、關(guān)鍵詞優(yōu)化

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)