Linux/超算中PBS常用命令

新手，純純搬運(yùn)工【出處引用自： 】

創(chuàng)新互聯(lián)于2013年成立，先為澤普等服務(wù)建站，澤普等地企業(yè)，進(jìn)行企業(yè)商務(wù)咨詢服務(wù)。為澤普企業(yè)網(wǎng)站制作PC+手機(jī)+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問題。

1. Linux常用命令

最常用：

ls（英文全拼：list files）：列出目錄及文件名

ls -l：列出目錄及文件名，可查看更多

ls -al：可以看到隱藏文件

cd（英文全拼：change directory）：切換目錄

cd .. ：返回上一級

cd 文件夾名：進(jìn)入目錄

pwd（英文全拼：print work directory）：顯示目前的目錄

mkdir 文件夾名（英文全拼：make directory）：創(chuàng)建一個新的目錄

rmdir 文件夾名（英文全拼：remove directory）：刪除一個空的目錄

cp xxx xxx（英文全拼：copy file）: 復(fù)制文件或目錄

mv xxx xxx（英文全拼：move file）: 移動文件或目錄，或修改文件或目錄的名稱

rm（英文全拼：remove）: 刪除文件

rm -r 文件夾名：遞歸刪除某目錄

clear：清空terminal的所有內(nèi)容（或者使用Ctrl+L）

tab按鍵：補(bǔ)充完整文件名或文件夾名

次常用：

vim/vi 某文件 （編輯文件）

nano 某文件 （編輯文件）

touch 文件 （新建空文件）

sudo -s （切換到root模式）

exit （退出root模式等）

sudo chmod -R 755 文件名/文件夾名 （獲取文件/文件夾的755權(quán)限）

chown [用戶] [文件或目錄] （改變文件或目錄的所有者）

chgrp [用戶組] [文件或目錄] （改變文件或目錄的所屬組）

make （編譯成.exe）

解壓/解包：

tar文件?（注：tar是打包，不是壓縮?。?/p>

解包：tar?xvf?FileName.tar

打包：tar?cvf?FileName.tar?DirName

.gz文件

解壓1：gunzip?FileName.gz

解壓2：gzip?-d?FileName.gz

壓縮：gzip?FileName

.tar.gz?和?.tgz文件

解壓：tar?zxvf?FileName.tar.gz

壓縮：tar?zcvf?FileName.tar.gz?DirName

安裝和卸載deb軟件包：

安裝：sudo dpkg -i deb文件

查看：sudo dpkg -l

卸載：sudo dpkg -r 軟件名

參考資料：

[1]? Linux?教程

[2]? Linux常用命令

[3]? linux中tar命令的用法

[4]? 全網(wǎng)最全Linux命令總結(jié)

2. vim/vi里的操作

:q 退出

:wq 保存并退出

:w 保存

:q! 強(qiáng)行退出（不保存退出）

:w! 強(qiáng)行保存

i 進(jìn)入編輯，轉(zhuǎn)為輸入模式（光標(biāo)前面）

a 進(jìn)入編輯，轉(zhuǎn)為輸入模式（光標(biāo)后面）

o 進(jìn)入編輯，轉(zhuǎn)為輸入模式（光標(biāo)下方新建一行）

Esc 退出i（插入）命令

3. 超算中PBS常用命令

pbsnodes （查看所有節(jié)點(diǎn)）

pbsnodes -l free （查看空閑節(jié)點(diǎn)）

pbsnodes 某節(jié)點(diǎn) （查看某節(jié)點(diǎn)狀態(tài)）

ssh 某節(jié)點(diǎn) （轉(zhuǎn)到某節(jié)點(diǎn)）

exit （離開節(jié)點(diǎn)）

qsub 文件名.pbs/sh （提交任務(wù)）

qstat （列出狀態(tài)）

qstat -q （列出隊列）

qstat -n （列出隊列中使用的節(jié)點(diǎn)）

qstat -f jobid （查看jobid任務(wù)的詳細(xì)信息）

qdel jobid （取消任務(wù)）

4. 其他

（1）Linux開機(jī)自啟

sh文件中包含：

#!/bin/bash#chkconfig: 2345 80 90#description:auto_run

sh文件移動到/etc/init.d后，分別輸入命令：

chkconfig --add xxx.sh

chkconfig --list???

chkconfig xxx.sh on?

service xxx.sh start

參考資料： linux 開機(jī)啟動 .sh 文件 - 自己的太陽 - 博客園

（2）Linux環(huán)境變量

方法1：臨時使用環(huán)境變量：export PATH="/home/www/anaconda3/bin:$PATH"

方法2：修改.bashrc文件

參考資料： Linux PATH 作用以及查看和修改方法_haozhepeng的專欄

（3）兩個sh文件

a.sh文件（用于提交任務(wù)，執(zhí)行a.py文件）

#!/bin/sh#PBS -N task#PBS -l nodes=1:ppn=1#PBS -q scorecd $PBS_O_WORKDIRexport OMP_NUM_THREADS=1python a.py

a.sh文件（用于提交任務(wù)，執(zhí)行a.exe文件）

#!/bin/sh#PBS -N task#PBS -l nodes=1:ppn=1#PBS -q scorecd $PBS_O_WORKDIRexport OMP_NUM_THREADS=1./a.exe

（4）一個makefile文件

makefile文件（用于編譯Fortran文件）

INC := -I/public/software/compiler/intel/composer_xe_2015.2.164/mkl/include/intel64/lp64

LIB := -L/public/software/compiler/intel/composer_xe_2015.2.164/mkl/lib/intel64

mpi:= -I/public/software/mpi/mpich/3.1.4/intel/include /public/software/mpi/mpich/3.1.4/intel/lib -lmpich -limf -lsvml -lintlc

src:=Console1exec:=a

all: $(src).f90

ifort? $(src).f90? $(INC) $(LIB) -openmp -lmkl_intel_lp64 -Wl,--start-group -lmkl_intel_thread -lmkl_lapack95_lp64 -lmkl_core -lmkl_blas95_lp64? -Wl,--end-group -liomp5 -lpthread -O2 -o $(exec).exe

Linux查看文件內(nèi)容、創(chuàng)建、查看軟硬鏈接命令

命令1：查看文件內(nèi)容

"cat

文件名"

查看文件內(nèi)容，頁面停留在最后。

"more

文件名"

分頁查看文件內(nèi)容

回車

下一行

空格

翻頁

q

退出

"head

文件名"

查看文件內(nèi)容的前幾行，默認(rèn)前10行，如果想制定看前n行，加選項-n

例如

"head

-5"

查看前五行

tail

和head相反，"tail

-5"

最后五行。

tail

-f

動態(tài)顯示最后十行，例如查看日志文件

命令2：創(chuàng)建軟連接

"ln

-s

xxx

路徑1"

在路徑1創(chuàng)建xxx的軟連接

特點(diǎn)：

1.文件類型

l

2.相當(dāng)于windows的快捷方式

命令3：創(chuàng)建硬鏈接

"ln

xxx

路徑1"

在路徑1創(chuàng)建xxx的軟連接

特點(diǎn)：

1.文件類型

-

2.相遇于拷貝，但是可以同步更新。

注1：硬鏈接的i節(jié)點(diǎn)相同，軟連接的i節(jié)點(diǎn)不同，查看i節(jié)點(diǎn)的命令是：ls

-i。

注2：創(chuàng)建硬鏈接不能跨分區(qū)(文件系統(tǒng))，軟鏈接可以。

Linux下文件搜索、查找、查看命令

1、最強(qiáng)大的搜索命令：find 查找各種文件的命令　

2、在文件資料中查找文件：locate

3、搜索命令所在的目錄及別名信息：which　

4、搜索命令所在的目錄及幫助文檔路徑：whereis

5、在文件中搜尋字符串匹配的行并輸出：grep

6、分頁顯示一個文件或任何輸出結(jié)果：more

7、分頁顯示一個文件并且可以回頭：less

8、指定顯示前多少行文件內(nèi)容：head

9、指定顯示文件后多少行內(nèi)容：tail

10、查看一個文件：cat

11、查看文件內(nèi)容多少字符多少行多少字節(jié)：wc

12、排序文件內(nèi)容：sort

一、根據(jù) 文件或目錄名稱 搜索

find 【搜索目錄】【-name或者-iname】【搜索字符】：-name和-iname的區(qū)別一個區(qū)分大小寫，一個不區(qū)分大小寫

eg：在/etc 目錄下搜索名字為init的文件或目錄

①、find /etc -name init (精準(zhǔn)搜索，名字必須為 init 才能搜索的到)

②、find /etc -iname init (精準(zhǔn)搜索，名字必須為 init或者有字母大寫也能搜索的到)

③、find /etc -name *init (模糊搜索，以 init 結(jié)尾的文件或目錄名)

④、find /etc -name init??? (模糊搜索，？ 表示單個字符，即搜索到 init___)

二、根據(jù) 文件大小 搜索

eg：在根目錄下查找大于 100M 的文件

find / -size +204800

這里 +n 表示大于，-n 表示小于，n 表示等于

1 數(shù)據(jù)塊 == 512 字節(jié) 0.5KB，也就是1KB等于2數(shù)據(jù)塊

100MB == 102400KB204800數(shù)據(jù)塊

三、根據(jù) 所有者和所屬組 搜索

①、在home目錄下查詢所屬組為 root 的文件

find /home -group root

②、在home目錄下查詢所有者為 root 的文件

find /home -user root

四、根據(jù) 時間屬性 搜索

find 【路徑】【選項】【時間】

選項有下面三種：-amin 訪問時間

-cmin 文件屬性被更改

-mmin 文件內(nèi)容被修改

時間：+n,-n,n分別表示超過n分鐘，n分鐘以內(nèi)和n分鐘

eg：在 /etc 目錄下查找5 分鐘內(nèi)被修改過屬性的文件和目錄

find /etc -cmin -5

五、根據(jù) 文件類型或i節(jié)點(diǎn) 搜索

　-type 根據(jù)文件類型查找：

　f表示文件，d表示目錄，l表示軟鏈接

eg：查找 /home 目錄下文件類型是目錄的

find /home -type d

-inum 根據(jù)i節(jié)點(diǎn)查找

eg：查找 /tmp 目錄下i節(jié)點(diǎn)為400342的文件或目錄

　 find /tmp -inum 400342

六、組合條件 搜索

這里有兩個參數(shù)：

①、-a 表示兩個條件同時滿足（and）

②、-o 表示兩個條件滿足任意一個即可（or）

范例：查找/etc目錄下大于80MB同時小于100MB的文件

find /etc -size +163840 -a -size -204800

語法：locate【文件名】 -i 不區(qū)分大小寫

注意：這里和 find 命令是有區(qū)別的，find是全盤檢索，而locate 是在文件資料庫中進(jìn)行搜索。所以locate命令的執(zhí)行要比find命令執(zhí)行速度快很多。但是這里有個問題，文件資料庫是需要不斷更新的。我們新創(chuàng)建的文件如果不更新 文件資料庫，使用 locate 是查找不到的。

updatedb 手動更新資料庫，但是對于/tmp目錄下的新建文件，是更新不到文件資料庫的，因為/tmp目錄不屬于文件資料庫的收錄范圍。

eg：locate hcf

功能描述：搜索命令所在的目錄及別名信息

　語法：which【命令】

　eg：which ls

功能描述：搜索命令所在的目錄及幫助文檔路徑

　語法：whereis【命令】

　eg：whereis ls

功能描述：在文件中搜尋字符串匹配的行并輸出

　語法：grep -iv 【指定字符串】【文件】

-i 不區(qū)分大小寫

-v 排除指定字符串

　eg：查找 /root/install.log 文件中包含 mysql 字符串的行，并輸出

grep mysql /root/install.log

本搜索工具，根據(jù)用戶指定的模式，對目標(biāo)文件逐行進(jìn)行匹配檢查，打印匹配到的行

grep是在文件中搜索匹配的字符串，是在文件中進(jìn)行內(nèi)容搜索，這個命令后面用到的比較多

描述：

分頁顯示一個文件或任何輸出結(jié)果

用于查看純文本文件(較長的)格式

格式：

more[選項] 文件

less 與 more 類似，但使用 less 可以隨意瀏覽文件，而 more 僅能向前移動，卻不能向后移動，而且 less 在查看之前不會加載整個文件。

head[必要參數(shù)][選擇參數(shù)][文件]

用于顯示指定文件開始多少行內(nèi)容

命令參數(shù)：

-n 10 顯示前10行

-n -10 正常輸出但不顯示最后的10行

eg：顯示new.txt的前兩行內(nèi)容

head -n 2 new.txt

head -2 new.txt

tail[必要參數(shù)][選擇參數(shù)][文件]

用于顯示指定文件末尾多少行內(nèi)容

命令參數(shù)：

-n 10 顯示后面10行

-f 持續(xù)刷新顯示的內(nèi)容

eg：顯示new.txt的末尾兩行內(nèi)容

tail -n 2 new.txt

tail -2 new.txt

eg：指定從第二行開始顯示

tail -n +2 new.txt

描述：一次顯示整個文件內(nèi)容

cat 命令 用于查看純文本文件(較短)

　cat [選項] [文件]…

描述：wc 命令默認(rèn)情況下會打印換行符數(shù)、單詞數(shù)和字符數(shù)。

　用法：wc [選項] [文件]

用法：sort [選項] [文件]

轉(zhuǎn)自： Linux下文件搜索、查找、查看命令_黃小小的博客-CSDN博客_linux 搜索

查看master節(jié)點(diǎn)有哪些進(jìn)程的命令

進(jìn)入到當(dāng)前Linux系統(tǒng)登錄用戶的主目錄（或主文件夾）。在 Linux 系統(tǒng)中，~代表的是用戶的主文件夾，即“/home/用戶名”這個目錄，如果當(dāng)前登錄用戶名為 hadoop，則~就代表“/home/hadoop/”這個目錄

ls#查看當(dāng)前目錄中的文件

ls -l#查看文件和目錄的權(quán)限信息

mkdirinput#在當(dāng)前目錄下創(chuàng)建input子目錄

mkdir -psrc/main/scala# 在當(dāng)前目錄下，創(chuàng)建多級子目錄src/main/scala

cat/home/hadoop/word.txt`#把/home/hadoop/word.txt這個文件全部內(nèi)容顯示到屏幕上

catfile1 file2file3#把當(dāng)前目錄下的file1和file2兩個文件進(jìn)行合并生成文件file3

head -5word.txt#把當(dāng)前目錄下的word.txt文件中的前5行內(nèi)容顯示到屏幕上，可以顯示前n行，自定義

cp/home/hadoop/word.txt /usr/local/#把/home/hadoop/word.txt文件復(fù)制到“/usr/local”目錄下,前面是文件后面三文件夾,后面三文件則進(jìn)行重命名

rm ./word.txt#刪除當(dāng)前目錄下的word.txt文件

rm –r ./test#刪除當(dāng)前目錄下的test目錄及其下面的所有文件

rm –r test*#刪除當(dāng)面目錄下所有以test開頭的目錄和文件

tar -zxf~/下載/spark-2.1.0.tgz-C/usr/local/ #把spark-2.1.0.tgz這個壓縮文件解壓到/usr/local目錄下。* x : 從 tar 包中把文件提取出來；* z : 表示 tar 包是被 gzip 壓縮過的，所以解壓時需要用gunzip解壓；* f : 表示后面跟著的是文件；* C：表示文件解壓后轉(zhuǎn)到指定的目錄下。

mvspark-2.1.0 spark #把spark-2.1.0目錄重新命名為spark

chown -R hadoop:hadoop ./spark # hadoop是當(dāng)前登錄Linux系統(tǒng)的用戶名，把當(dāng)前目錄下的spark子目錄的所有權(quán)限，賦予給用戶hadoop