linux命令對某一列去重/統(tǒng)計

cat file.csv | awk -F '\t' '{print $2}'

榕江ssl適用于網(wǎng)站、小程序/APP、API接口等需要進(jìn)行數(shù)據(jù)傳輸應(yīng)用場景，ssl證書未來市場廣闊！成為成都創(chuàng)新互聯(lián)的ssl證書銷售渠道，可以享受市場價格4-6折優(yōu)惠！如果有意向歡迎電話聯(lián)系或者加微信：028-86922220（備注：SSL證書合作）期待與您的合作！

'\t'指的是file.csv不同列以'\t'分割，如果的是以其他符號分割，換成其她符號；

'{print $2}'是指取第2列，此處從1開始計數(shù)，第1列，第2列；

一般去重之前要進(jìn)行排序

cat file.csv | awk -F '\t' '{print $2}'?| sort | uniq

前半部分與命令1一樣，后面加上| sort | uniq

比如通過命令2發(fā)現(xiàn)，第2列取值有兩種，分別是'neg'和‘pos’，那么我想知道有多少行的第2列取值為'pos'，多少行的第2列取值為'neg'。

cat file.csv | awk -F '\t' '{print $2}'?|?grep -o 'neg'| wc -l

前半部分與命令1一樣，后面加上?|?grep -o 'neg'| wc -l

grep -o 'neg'就是取出取值為'neg'的行

wc -l 是計數(shù)有多少行

2-15 Linux中的文件查看 --- head、tail 和 wc 命令

head / tail：顯示文件頭或尾幾行

-n：指定顯示幾行。默認(rèn)是10行

head /etc/passwd：查看 /etc/passwd 頭 10 行信息。不加選項默認(rèn)前10行。

head -5 /etc/passwd：指定查看 etc/passwd 文件前 5 行。

tail /etc/passwd：查看 /etc/passwd 后 10 行信息。 不加選項默認(rèn)后10行。

tail -5 /etc/passwd：指定查看 etc/passwd 文件后 5 行。

wc：顯示文件的行數(shù)、字?jǐn)?shù)、字節(jié)。

? ? -c：只顯示字節(jié)。

? ? -w：只顯示字?jǐn)?shù)。這里的字?jǐn)?shù)指的是由空格，換行符等分隔的字符串。

? ? -l：只顯示行。

wc -l /etc/passwd：顯示/etc/passwd 文檔行數(shù)。

wc -c /etc/passwd：顯示 /etc/passwd 文檔字節(jié)數(shù)。

wc -w /etc/passwd：顯示etc/passwd 文檔字?jǐn)?shù)。

wc -cl /etc/passwd：-cl 組合選項，查看/etc/passwd 文檔的行數(shù)和字節(jié)數(shù)

linuxwc-l計數(shù)少一行

正常現(xiàn)象。linux下wc-l這個命令統(tǒng)計行數(shù)不包含最后一行沒有回車的數(shù)據(jù)，因為wc–l是按作為行結(jié)束符統(tǒng)計行數(shù)，所以最后一行沒有就會統(tǒng)計丟失。