Shell腳本學習筆記（從入門到精通）

@TOC

第1章 shell概述

大數據程序員為什么要學習Shell呢？

1）需要看懂運維人員編寫的Shell程序。

2）偶爾會編寫一些簡單Shell程序來管理集群、提高開發效率。

第2章 Shell解析器

（1）Linux提供的Shell解析器有：

[root@master ~]$ cat /etc/shells /bin/sh #是bash的一個快捷方式 /bin/bash #bash是大多數Linux默認的shell，包含的功能幾乎可以涵蓋shell所有的功能 /sbin/nologin #表示非交互，不能登錄操作系統 /bin/dash #小巧，高效，功能相比少一些 /bin/csh #具有C語言風格的一種shell，具有許多特性，但也有一些缺陷 /bin/tcsh #是csh的增強版，完全兼容csh

（2）bash和sh的關系

[root@master bin]$ ll | grep bash -rwxr-xr-x. 1 root root 941880 5月 11 2016 bash lrwxrwxrwx. 1 root root 4 5月 27 2017 sh -> bash

（3）Centos默認的解析器是bash

[root@master bin]$ echo $SHELL /bin/bash

第3章 Shell腳本入門

1）腳本格式

腳本以#!/bin/bash開頭（指定解析器）

2）第一個Shell腳本：helloworld

（1）需求：創建一個Shell腳本，輸出helloworld

（2）案例實操：

[root@master datas]$ touch helloworld.sh [root@master datas]$ vi helloworld.sh

在helloworld.sh中輸入如下內容

#!/bin/bash echo "helloworld"

（3）腳本的常用執行方式

第一種：采用bash或sh+腳本的相對路徑或絕對路徑（不用賦予腳本+x權限）

sh+腳本的相對路徑

[root@master datas]$ sh helloworld.sh Helloworld

sh+腳本的絕對路徑

[root@master datas]$ sh /home/atguigu/datas/helloworld.sh helloworld

bash+腳本的相對路徑

[root@master datas]$ bash helloworld.sh Helloworld

bash+腳本的絕對路徑

[root@master datas]$ bash /home/atguigu/datas/helloworld.sh Helloworld

第二種：采用輸入腳本的絕對路徑或相對路徑執行腳本（必須具有可執行權限+x）

（a）首先要賦予helloworld.sh 腳本的+x權限

[root@master datas]$ chmod 777 helloworld.sh

（b）執行腳本

相對路徑（推薦使用）

[root@master datas]$ ./helloworld.sh Helloworld

絕對路徑

[root@master datas]$ /home/atguigu/datas/helloworld.sh Helloworld

注意：第一種執行方法，本質是bash解析器幫你執行腳本，所以腳本本身不需要執行權限。第二種執行方法，本質是腳本需要自己執行，所以需要執行權限

3）第二個Shell腳本：多命令處理

（1）需求： 在/home/atguigu/目錄下創建一個cls.txt,在cls.txt文件中增加“I love cls”。

（2）案例實操：

[root@master datas]$ touch batch.sh [root@master datas]$ vi batch.sh

在batch.sh中輸入如下內容

#!/bin/bash cd /home/atguigu touch cls.txt echo "I love cls" >>cls.txt

第4章 Shell中的變量

4.1 系統變量

1）常用系統變量

H

O

M

E

、

HOME、

HOME、PWD、

S

H

E

L

L

、

SHELL、

SHELL、USER等

2）案例實操

（1）查看系統變量的值

[root@master datas]$ echo $HOME /home/atguigu

（2）顯示當前Shell中所有變量：set

[root@master datas]$ set BASH=/bin/bash BASH_ALIASES=() BASH_ARGC=() BASH_ARGV=()

4.2 自定義變量

1．基本語法

（1）定義變量：變量=值

（2）撤銷變量：unset 變量

（3）聲明靜態變量：readonly 變量，注意：不能unset

2．變量定義規則

（1）變量名稱可以由字母、數字和下劃線組成，但是不能以數字開頭，環境變量名建議大寫

（2）等號兩側不能有空格!

（3）在bash中，變量默認類型都是字符串類型，無法直接進行數值運算。

（4）變量的值如果有空格，需要使用雙引號或單引號括起來。

3．案例實操

（1）定義變量A

[root@master datas]$ A=5 [root@master datas]$ echo $A 5

（2）給變量A重新賦值

[root@master datas]$ A=8 [root@master datas]$ echo $A 8

（3）撤銷變量A

[root@master datas]$ unset A [root@master datas]$ echo $A

（4）聲明靜態的變量B=2，不能unset（重啟自動消失）

[root@master datas]$ readonly B=2 [root@master datas]$ echo $B 2 [root@master datas]$ B=9 -bash: B: readonly variable

（5）在bash中，變量默認類型都是字符串類型，無法直接進行數值運算

[root@master ~]$ C=1+2 [root@master ~]$ echo $C 1+2

（6）變量的值如果有空格，需要使用雙引號或單引號括起來

[root@master ~]$ D=I love banzhang -bash: world: command not found [root@master ~]$ D="I love banzhang" [root@master ~]$ echo $D I love banzhang

（7）可把變量提升為全局環境變量，可供其他Shell程序使用

格式：export 變量名

[root@master datas]$ vim helloworld.sh

在helloworld.sh文件中增加echo $B

#!/bin/bash echo "helloworld" echo $B

[root@master datas]$ ./helloworld.sh Helloworld

發現并沒有打印輸出變量B的值。

[root@master datas]$ export B [root@master datas]$ ./helloworld.sh helloworld 2

4.3 特殊變量：$n

1．基本語法

$n（功能描述：n為數字，$0代表該腳本名稱，$1-$9代表第一到第九個參數，十以上的參數，十以上的參數需要用大括號包含，如${10}）

2．案例實操

（1）輸出該腳本文件名稱、輸入參數1和輸入參數2 的值

[root@master datas]$ touch parameter.sh [root@master datas]$ vim parameter.sh #!/bin/bash echo "$0 $1 $2" [root@master datas]$ chmod 777 parameter.sh [root@master datas]$ ./parameter.sh 1 2 parameter.sh 1 2

4.4 特殊變量：$#

1．基本語法

$# （功能描述：獲取所有輸入參數個數，常用于循環）。

2．案例實操

（1）獲取輸入參數的個數

[root@master datas]$ vim parameter.sh #!/bin/bash echo "$0 $1 $2" echo $# [root@master datas]$ chmod 777 parameter.sh [root@master datas]$ ./parameter.sh cls xz parameter.sh cls xz 2

4.5 特殊變量：$*、$@

1．基本語法

$* （功能描述：這個變量代表命令行中所有的參數，$*把所有的參數看成一個整體）

$@ （功能描述：這個變量也代表命令行中所有的參數，不過$@把每個參數區分對待）

2．案例實操

（1）打印輸入的所有參數

[root@master datas]$ vim parameter.sh #!/bin/bash echo "$0 $1 $2" echo $# echo $* echo $@ [root@master datas]$ bash parameter.sh 1 2 3 parameter.sh 1 2 3 1 2 3 1 2 3

4.6 特殊變量：$？

1．基本語法

$？ （功能描述：最后一次執行的命令的返回狀態。如果這個變量的值為0，證明上一個命令正確執行；如果這個變量的值為非0（具體是哪個數，由命令自己來決定），則證明上一個命令執行不正確了。）

2．案例實操

（1）判斷helloworld.sh腳本是否正確執行

[root@master datas]$ ./helloworld.sh hello world [root@master datas]$ echo $? 0

第5章 運算符

1．基本語法

（1）“$((運算式))”或“$[運算式]”

（2）expr + , - , *, /, % 加，減，乘，除，取余

注意：expr運算符間要有空格

2．案例實操：

（1）計算3+2的值

[root@master datas]$ expr 2 + 3 5

（2）計算3-2的值

[root@master datas]$ expr 3 - 2 1

（3）計算（2+3）X 4的值

（a）expr一步完成計算

[root@master datas]$ expr `expr 2 + 3` \* 4 #這個小·是tab上面那個鍵，不是單引號 20

（b）采用$[運算式]方式

[root@master datas]$ S=$[(2+3)*4] [root@master datas]$ echo $S 20

第6章 條件判斷

1．基本語法

[ condition ]（`注意condition前后要有空格`）

注意：條件非空即為true，[ atguigu ]返回true，[] 返回false。

2.常用判斷條件

（1）兩個整數之間比較

= 字符串比較

-lt 小于（less than）

-le 小于等于（less equal）

-eq 等于（equal）

-gt 大于（greater than）

-ge 大于等于（greater equal）

-ne 不等于（Not equal）

（2）按照文件權限進行判斷

-r 有讀的權限（read）

-w 有寫的權限（write）

-x 有執行的權限（execute）

（3）按照文件類型進行判斷

-f 文件存在并且是一個常規的文件（file）

-e 文件存在（existence）

-d 文件存在并是一個目錄（directory）

3．案例實操

（1）23是否大于等于22

[root@master datas]$ [ 23 -ge 22 ] [root@master datas]$ echo $? 0

（2）helloworld.sh是否具有寫權限

[root@master datas]$ [ -w helloworld.sh ] [root@master datas]$ echo $? 0

（3）/home/atguigu/cls.txt目錄中的文件是否存在

[root@master datas]$ [ -e /home/atguigu/cls.txt ] [root@master datas]$ echo $? 1

（4）多條件判斷（&& 表示前一條命令執行成功時，才執行后一條命令，|| 表示上一條命令執行失敗后，才執行下一條命令）

[root@master datas]$ [ condition ] && echo OK || echo notok OK [root@master datas]$ [ condition ] && [ ] || echo notok notok

第7章 流程控制（重點）

7.1 if 判斷

1．基本語法

if [ 條件判斷式 ];then 程序 fi

或者

if [ 條件判斷式 ] then 程序 fi

注意事項：

[ 條件判斷式 ]，中括號和條件判斷式之間必須有空格

if 后要有空格

2．案例實操

（1）輸入一個數字，如果是1，則輸出banzhang zhen shuai，如果是2，則輸出cls zhen mei，如果是其它，什么也不輸出。

[root@master datas]$ touch if.sh [root@master datas]$ vim if.sh #!/bin/bash if [ $1 -eq "1" ] then echo "banzhang zhen shuai" elif [ $1 -eq "2" ] then echo "cls zhen mei" fi [root@master datas]$ chmod 777 if.sh [root@master datas]$ ./if.sh 1 banzhang zhen shuai

7.2 case 語句

1．基本語法

case $變量名 in "值1"） 如果變量的值等于值1，則執行程序1 ;; "值2"） 如果變量的值等于值2，則執行程序2 ;; …省略其他分支… *） 如果變量的值都不是以上的值，則執行此程序 ;; esac

注意事項：

case行尾必須為單詞“in”，每一個模式匹配必須以右括號“)”結束。

雙分號“;;”表示命令序列結束，相當于java中的break。

最后的“*）”表示默認模式，相當于java中的default。

2．案例實操

（1）輸入一個數字，如果是1，則輸出banzhang，如果是2，則輸出cls，如果是其它，輸出renyao。

[root@master datas]$ touch case.sh [root@master datas]$ vim case.sh !/bin/bash case $1 in "1") echo "banzhang" ;; "2") echo "cls" ;; *) echo "renyao" ;; esac [root@master datas]$ chmod 777 case.sh [root@master datas]$ ./case.sh 1 banzhang

7.3 for 循環

1．基本語法1

for (( 初始值;循環控制條件;變量變化 )) do 程序 done

2．案例實操

（1）從1加到100

[root@master datas]$ touch for1.sh [root@master datas]$ vim for1.sh #!/bin/bash s=0 for((i=0;i<=100;i++)) do s=$[$s+$i] done echo $s [root@master datas]$ chmod 777 for1.sh [root@master datas]$ ./for1.sh 5050

3．基本語法2

for 變量 in 值1 值2 值3… do 程序 done

4．案例實操

（1）打印所有輸入參數

[root@master datas]$ touch for2.sh [root@master datas]$ vim for2.sh #!/bin/bash #打印數字 for i in $* do echo "ban zhang love $i " done [root@master datas]$ chmod 777 for2.sh [root@master datas]$ bash for2.sh cls xz bd ban zhang love cls ban zhang love xz ban zhang love b

（2）比較$*和$@區別

（a）$*和$@都表示傳遞給函數或腳本的所有參數，不被雙引號“”包含時，都以$1 $2 …$n的形式輸出所有參數。

[root@master datas]$ touch for.sh [root@master datas]$ vim for.sh #!/bin/bash for i in $* do echo "ban zhang love $i " done for j in $@ do echo "ban zhang love $j" done [root@master datas]$ bash for.sh cls xz bd ban zhang love cls ban zhang love xz ban zhang love bd ban zhang love cls ban zhang love xz ban zhang love bd

（b）當它們被雙引號“”包含時，“$*”會將所有的參數作為一個整體，以“$1 $2 …$n”的形式輸出所有參數；“$@”還是會將各個參數分開，以“$1” “$2”…”$n”的形式輸出所有參數。

[root@master datas]$ vim for.sh #!/bin/bash for i in "$*" #$*中的所有參數看成是一個整體，所以這個for循環只會循環一次 do echo "ban zhang love $i" done for j in "$@" #$@中的每個參數都看成是獨立的，所以“$@”中有幾個參數，就會循環幾次 do echo "ban zhang love $j" done [root@master datas]$ chmod 777 for.sh [root@master datas]$ bash for.sh cls xz bd ban zhang love cls xz bd ban zhang love cls ban zhang love xz ban zhang love bd

7.4 while 循環

1．基本語法

while [ 條件判斷式 ] do 程序 done

2．案例實操

（1）從1加到100

[root@master datas]$ touch while.sh [root@master datas]$ vim while.sh #!/bin/bash s=0 i=1 while [ $i -le 100 ] #i的值小于100，并不是i小于100，所以用$i do s=$[$s+$i] i=$[$i+1] done echo $s [root@master datas]$ chmod 777 while.sh [root@master datas]$ ./while.sh 5050

第8章 read讀取控制臺輸入

1．基本語法

read(選項)(參數)

選項：

-p：指定讀取值時的提示符；

-t：指定讀取值時等待的時間（秒）。

參數

變量：指定讀取值的變量名

2．案例實操

（1）提示7秒內，讀取控制臺輸入的名稱

[root@master datas]$ touch read.sh [root@master datas]$ vim read.sh #!/bin/bash read -t 7 -p "Enter your name in 7 seconds " NAME echo $NAME [root@master datas]$ ./read.sh Enter your name in 7 seconds xiaoze xiaoze

第9章 函數

9.1 系統函數

1．basename基本語法（返回文件名）

basename [string / pathname] [suffix]

（功能描述：basename命令會刪掉所有的前綴包括最后一個（‘/’）字符，然后將字符串顯示出來。

選項：suffix為后綴，如果suffix被指定了，basename會將pathname或string中的suffix去掉。

2．案例實操

（1）截取該/home/atguigu/banzhang.txt路徑的文件名稱

[root@master datas]$ basename /home/atguigu/banzhang.txt banzhang.txt [root@master datas]$ basename /home/atguigu/banzhang.txt .txt banzhang

3 . dirname基本語法（返回路徑）

dirname 文件絕對路徑

（功能描述：從給定的包含絕對路徑的文件名中去除文件名（非目錄的部分），然后返回剩下的路徑（目錄的部分））

4．案例實操

（1）獲取banzhang.txt文件的路徑

[root@master ~]$ dirname /home/atguigu/banzhang.txt /home/atguigu

9.2 自定義函數

1．基本語法

[ function ] funname[()] { Action; [return int;] } funname

2．經驗技巧

必須在調用函數地方之前，先聲明函數，shell腳本是逐行運行。不會像其它語言一樣先編譯。

函數返回值，只能通過$?系統變量獲得，可以顯示加：return返回，如果不加，將以最后一條命令運行結果，作為返回值。return后跟數值n(0-255)

3．案例實操

（1）計算兩個輸入參數的和

[root@master datas]$ touch fun.sh [root@master datas]$ vim fun.sh #!/bin/bash function sum() { s=0 s=$[ $1 + $2 ] echo "$s" } read -p "Please input the number1: " n1; read -p "Please input the number2: " n2; sum $n1 $n2; [root@master datas]$ chmod 777 fun.sh [root@master datas]$ ./fun.sh Please input the number1: 2 Please input the number2: 5 7

第10章 輸入/輸出重定向

10.1 重定向介紹

大多數 UNIX系統命令從你的終端接受輸入并將所產生的輸出發送回 到您的終端。一個命令通常從一個叫標準輸入的地方讀取輸入，默認情況下，這恰好是你的終端。同樣，一個命令通常將其輸出寫入到標準輸出，默認情況下，這也是你的終端。

重定向命令列表如下：

注意：文件描述符 0 通常是標準輸入（STDIN），1 是標準輸出（STDOUT），2 是標準錯誤輸出（STDERR）

10.2 輸出重定向

重定向一般通過在命令間插入特定的符號來實現。特別的，這些符號的語法如下所示:

command1 > file1

上面這個命令執行command1然后將輸出的內容存入file1。

注意：任何file1內的已經存在的內容將被新內容替代。如果要將新內容添加在文件末尾，請使用>>操作符。

實例：

1）執行下面的 who 命令，它將命令的完整的輸出重定向在用戶文件中(users):

$ who > users

執行后，并沒有在終端輸出信息，這是因為輸出已被從默認的標準輸出設備（終端）重定向到指定的文件。

你可以使用 cat 命令查看文件內容：

$ cat users _mbsetupuser console Oct 31 17:35 tianqixin console Oct 31 17:35 tianqixin ttys000 Dec 1 11:33

2）輸出重定向會覆蓋文件內容，請看下面的例子：

$ echo "你好！??！" > users $ cat users 你好??！ $

3）如果不希望文件內容被覆蓋，可以使用 >> 追加到文件末尾，例如：

$ echo "你好??！" >> users $ cat users 你好?。?你好??！ $

10.3 輸入重定向

和輸出重定向一樣，Unix 命令也可以從文件獲取輸入，語法為：

command1 < file1

這樣，本來需要從鍵盤獲取輸入的命令會轉移到文件讀取內容。

注意：輸出重定向是大于號(>)，輸入重定向是小于號(<)。

實例：

1）接著以上實例，我們需要統計 users 文件的行數,執行以下命令：

$ wc -l users 2 users

2）也可以將輸入重定向到 users 文件：

$ wc -l < users 2

注意：上面兩個例子的結果不同：第一個例子，會輸出文件名；第二個不會，因為它僅僅知道從標準輸入讀取內容。

3）同時替換輸入和輸出，執行command1，從文件infile讀取內容，然后將輸出寫入到outfile中。

command1 < infile > outfile

10.4 重定向深入講解

一般情況下，每個 Unix/Linux 命令運行時都會打開三個文件：

標準輸入文件(stdin)：stdin的文件描述符為0，Unix程序默認從stdin讀取數據。

標準輸出文件(stdout)：stdout 的文件描述符為1，Unix程序默認向stdout輸出數據。

標準錯誤文件(stderr)：stderr的文件描述符為2，Unix程序會向stderr流中寫入錯誤信息。

默認情況下，command > file 將 stdout 重定向到 file，command < file 將stdin 重定向到 file。

如果希望 stderr 重定向到 file，可以這樣寫：

$ command 2>file

如果希望 stderr 追加到 file 文件末尾，可以這樣寫：

$ command 2>>file

2 表示標準錯誤文件(stderr)。

如果希望將 stdout 和 stderr 合并后重定向到 file，可以這樣寫：

$ command > file 2>&1

或者

$ command >> file 2>&1

如果希望對 stdin 和 stdout 都重定向，可以這樣寫：

$ command < file1 >file2

command 命令將 stdin 重定向到 file1，將 stdout 重定向到 file2。

10.5 Here Document

Here Document 是 Shell 中的一種特殊的重定向方式，用來將輸入重定向到一個交互式 Shell 腳本或程序。

它的基本的形式如下：

command << delimiter document delimiter

它的作用是將兩個 delimiter 之間的內容(document) 作為輸入傳遞給 command。

注意：

結尾的delimiter 一定要頂格寫，前面不能有任何字符，后面也不能有任何字符，包括空格和 tab 縮進。

開始的delimiter前后的空格會被忽略掉。

實例：

1）在命令行中通過 wc -l 命令計算 Here Document 的行數：

$ wc -l << EOF 歡迎 光臨 EOF 2 # 輸出結果為 2 行 $

2）我們也可以將 Here Document 用在腳本中，例如：

#!/bin/bash cat << EOF 歡迎 光臨 EOF

執行以上腳本，輸出結果：

歡迎 光臨

10.6 /dev/null 文件

/dev/null 是一個特殊的文件，寫入到它的內容都會被丟棄；如果嘗試從該文件讀取內容，那么什么也讀不到。但是 /dev/null 文件非常有用，將命令的輸出重定向到它，會起到"禁止輸出"的效果。

如果希望執行某個命令，但又不希望在屏幕上顯示輸出結果，那么可以將輸出重定向到 /dev/null：

$ command > /dev/null

如果希望屏蔽 stdout 和 stderr，可以這樣寫：

$ command > /dev/null 2>&1

注意：

0 是標準輸入（STDIN），1 是標準輸出（STDOUT），2 是標準錯誤輸出（STDERR）。

這里的 2 和 > 之間不可以有空格，2> 是一體的時候才表示錯誤輸出。

第11章 Shell工具（重點）

11.1 cut

cut 的工作就是“剪”，具體的說就是在文件中負責剪切數據用的。cut 命令從文件的每一行剪切字節、字符和字段并將這些字節、字符和字段輸出。

1.基本用法

cut [選項參數] filename

說明：默認分隔符是制表符

2.選項參數說明

3.案例實操

（0）數據準備

[root@master datas]$ touch cut.txt [root@master datas]$ vim cut.txt dong shen guan zhen wo wo lai lai le le

（1）切割 cut.txt 第一列

[root@master datas]$ cut -d " " -f 1 cut.txt dong guan wo lai le

（2）切割 cut.txt 第二、三列

[root@master datas]$ cut -d " " -f 2,3 cut.txt shen zhen wo lai le

（3）在 cut.txt 文件中切割出guan

[root@master datas]$ cat cut.txt | grep "guan" | cut -d " " -f 1 guan

（4）選取系統PATH變量值，第2個“ ：”開始后的所有路徑：

[root@master datas]$ echo $PATH /usr/lib64/qt-3.3/bin:/usr/local/bin:/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/sbin:/home/atguigu/bin [atguigu@hadoop102 datas]$ echo $PATH | cut -d : -f 3- #3-：表示第三列開始后面的所有 /bin:/usr/bin:/usr/local/sbin:/usr/sbin:/sbin:/home/atguigu/bin

（5）切割 ifconfig 后打印的IP地址

[root@master datas]$ ifconfig eth0 | grep "inet addr" | cut -d : -f 2 | cut -d " " -f1 192.168.1.102

11.2 sed

sed是一種流編輯器，它一次處理一行內容。處理時，把當前處理的行存儲在臨時緩沖區中，稱為“模式空間”，接著用sed命令處理緩沖區中的內容，處理完成后，把緩沖區的內容送往屏幕。接著處理下一行，這樣不斷重復，直到文件末尾。文件內容并沒有改變，除非你使用重定向存儲輸出。

1.基本用法

sed [選項參數] ‘command’ filename

2.選項參數說明

3.命令功能描述

4.案例實操

（0）數據準備

[root@master datas]$ touch sed.txt [root@master datas]$ vim sed.txt dong shen guan zhen wo wo lai lai le le

（1）將“mei nv”這個單詞插入到sed.txt第二行下，打?。ㄔ募⒉桓淖儯?。

[root@master datas]$ sed '2a mei nv' sed.txt #2a：表示第二行下 dong shen guan zhen mei nv wo wo lai lai le le [root@master datas]$ cat sed.txt dong shen guan zhen wo wo lai lai le le

注意：文件并沒有改變

（2）刪除sed.txt文件所有包含wo的行

[root@master datas]$ sed '/wo/d' sed.txt dong shen guan zhen lai lai le le

（3）將sed.txt文件中wo替換為ni

[root@master datas]$ sed 's/wo/ni/g' sed.txt #g:表示全局替換 dong shen guan zhen ni ni lai lai le le

注意：‘g’表示global，全部替換

（4）將sed.txt文件中的第二行刪除并將wo替換為ni

[root@master datas]$ sed -e '2d' -e 's/wo/ni/g' sed.txt dong shen ni ni lai lai le le

11.3 awk

一個強大的文本分析工具，把文件逐行的讀入，以空格為默認分隔符將每行切片，切開的部分再進行分析處理。

1.基本用法

awk [選項參數] ‘pattern1{action1} pattern2{action2}...’ filename

pattern：表示AWK在數據中查找的內容，就是匹配模式

action：在找到匹配內容時所執行的一系列命令

2.選項參數說明

3.案例實操

（0）原數據

（1）搜索passwd文件以root關鍵字開頭的所有行，并輸出該行的第7列。正則表達式不會的看第13章?。?！

[root@master datas]$ awk -F : '/^root/{print $7}' passwd #/^：表示開頭 /bin/bash

（2）搜索passwd文件以root關鍵字開頭的所有行，并輸出該行的第1列和第7列，中間以“,”號分割。

[root@master datas]$ awk -F : '/^root/{print $1","$7}' passwd root,/bin/bash

注意：只有匹配了pattern的行才會執行action

（3）只顯示/etc/passwd的第一列和第七列，以逗號分割，且在所有行前面添加列名user，shell在最后一行添加"dahaige，/bin/zuishuai"。

[root@master datas]$ awk -F : 'BEGIN{print "user, shell"} {print $1","$7} END {print "dahaige,/bin/zuishuai"}' passwd #BEGIN：表示開頭位置 user, shell root,/bin/bash bin,/sbin/nologin 。。。 atguigu,/bin/bash dahaige,/bin/zuishuai

注意：BEGIN 在所有數據讀取行之前執行；END 在所有數據執行之后執行。

（4）將passwd文件中的用戶id增加數值1并輸出

[root@master datas]$ awk -v i=1 -F : '{print $3+i}' passwd 1 2 3 4

4.awk的內置變量

5.案例實操

（1）統計passwd文件名，每行的行號，每行的列數

[root@master datas]$ awk -F : '{print "filename:" FILENAME ", linenumber:" NR ",columns:" NF}' passwd filename:passwd, linenumber:1,columns:7 filename:passwd, linenumber:2,columns:7 filename:passwd, linenumber:3,columns:7

（2）切割IP

[root@master datas]$ ifconfig eth0 | grep "inet addr" | awk -F : '{print $2}' | awk -F " " '{print $1}' 192.168.1.102

（3）查詢sed.txt中空行所在的行號

[root@master datas]$ awk '/^$/{print NR}' sed.txt #/^$：表示空行 5

11.4 sort

sort命令是在Linux里非常有用，它將文件進行排序，并將排序結果標準輸出。

1.基本語法

sort(選項)(參數) filename

參數：指定待排序的文件列表

2 . 案例實操

（0）數據準備

[root@master datas]$ touch sort.sh [root@master datas]$ vim sort.sh bb:40:5.4 bd:20:4.2 xz:50:2.3 cls:10:3.5 ss:30:1.6

（1）按照“：”分割后的第三列倒序排序。

[root@master datas]$ sort -t : -nrk 3 sort.sh bb:40:5.4 bd:20:4.2 cls:10:3.5 xz:50:2.3 ss:30:1.6

第12章 企業真實面試題（重點）

12.1 京東

問題1：使用Linux命令查詢file1中空行所在的行號

答案：

[root@master datas]$ awk '/^$/{print NR}' sed.txt 5

問題2：有文件chengji.txt內容如下:

張三 40 李四 50 王五 60 使用Linux命令計算第二列的和并輸出 [atguigu@hadoop102 datas]$ cat chengji.txt | awk -F " " '{sum+=$2} END {print sum}' 150

12.2 搜狐&和訊網

問題1：Shell腳本里如何檢查一個文件是否存在？如果不存在該如何處理？

#!/bin/bash if [ -e file.txt ]; then echo "文件存在!" else echo "文件不存在!" fi

12.3 新浪

問題1：用shell寫一個腳本，對文本中無序的一列數字排序，并求和

[root@master ~]$ cat test.txt 9 8 7 6 5 4 3 2 10 1 [root@master ~]$ sort -n test.txt | awk '{a+=$0;print $0} END {print "SUM="a}' 1 2 3 4 5 6 7 8 9 10 SUM=55

12.3 金和網絡

問題1：請用shell腳本寫出查找當前文件夾（/home）下所有的文本文件內容中包含有字符”shen”的文件名稱

[root@master datas]$ grep -r "shen" /home | cut -d ":" -f 1 /home/atguigu/datas/sed.txt /home/atguigu/datas/cut.txt

第13章 正則表達式語法大全

Shell

版權聲明：本文內容由網絡用戶投稿，版權歸原作者所有，本站不擁有其著作權，亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容，請聯系我們jiasou666@gmail.com 處理，核實后本網站將在24小時內刪除侵權內容。