linux命令對(duì)某一列去重/統(tǒng)計(jì)

cat file.csv | awk -F '\t' '{print $2}'

目前成都創(chuàng)新互聯(lián)已為上千家的企業(yè)提供了網(wǎng)站建設(shè)、域名、網(wǎng)頁(yè)空間、網(wǎng)站托管運(yùn)營(yíng)、企業(yè)網(wǎng)站設(shè)計(jì)、舟曲網(wǎng)站維護(hù)等服務(wù)，公司將堅(jiān)持客戶導(dǎo)向、應(yīng)用為本的策略，正道將秉承"和諧、參與、激情"的文化，與客戶和合作伙伴齊心協(xié)力一起成長(zhǎng)，共同發(fā)展。

'\t'指的是file.csv不同列以'\t'分割，如果的是以其他符號(hào)分割，換成其她符號(hào)；

'{print $2}'是指取第2列，此處從1開始計(jì)數(shù)，第1列，第2列；

一般去重之前要進(jìn)行排序

cat file.csv | awk -F '\t' '{print $2}'?| sort | uniq

前半部分與命令1一樣，后面加上| sort | uniq

比如通過命令2發(fā)現(xiàn)，第2列取值有兩種，分別是'neg'和‘pos’，那么我想知道有多少行的第2列取值為'pos'，多少行的第2列取值為'neg'。

cat file.csv | awk -F '\t' '{print $2}'?|?grep -o 'neg'| wc -l

前半部分與命令1一樣，后面加上?|?grep -o 'neg'| wc -l

grep -o 'neg'就是取出取值為'neg'的行

wc -l 是計(jì)數(shù)有多少行

linux下刪除某一目錄下所有非文件夾的文件命令

$?ls?--file-type?|?grep?-v?"/$"?|?xargs?rm?-f

該命令刪除當(dāng)前目錄下除了文件夾以外的所有文件。

使用 ls --file-type 會(huì)列舉出當(dāng)前目錄下所有的文件和文件夾，且文件夾后面會(huì)帶一個(gè) /

再用 grep -v 將文件夾過濾掉，文件夾的 / 符號(hào)在結(jié)尾，所以使用正則表達(dá)式 "/$" 過濾

最后將其他所有的文件通過 rm 命令刪除，此時(shí)需要將文件名通過 xargs 傳遞到命令行參數(shù)中。

linux 如何快速刪除大文件的第一行

1、使用vim編輯器來打開文件。

2、來看第一種方式，刪除文件中指定的行，當(dāng)使用vim打開文件的時(shí)候，頁(yè)面的右下角會(huì)顯示出當(dāng)前光標(biāo)的位置，比如光標(biāo)停在第一排5的位置，右下角顯示的就是1-5。

3、然后就可以根據(jù)這個(gè)字符找到指定的列，在vim編輯器的普通模式下，按下鍵盤上的x鍵，就會(huì)刪除這個(gè)字符。然后再移動(dòng) j 鍵，光標(biāo)就會(huì)移動(dòng)到下一行，就這樣依次按下j 、x鍵，就能很快刪除不同行中的同一列。

4、還有一種方法，將光標(biāo)移動(dòng)到未刪除的第5列數(shù)字上，然后在鍵盤上按下ctrl+v鍵。如下面圖中所示，編輯頁(yè)面的左下角會(huì)出現(xiàn)一個(gè)VISUAL BLOCK字樣。。

5、然后這時(shí)，再按鍵盤上的 j 鍵往下移動(dòng)，這個(gè)時(shí)候會(huì)發(fā)現(xiàn)，所有第5列的字符都被選中了。

6、這個(gè)時(shí)候再按刪除的 x 鍵，第5列的字符就瞬間被刪除了。就完成了。