[开启大数据的大门] 第二天:Linux shell编程

短命女 2022-02-21 17:57 191阅读 0赞

**什么是Shell**

*  Shell是用户与内核进行交互操作的一种接口，目前最流行的Shell称为bash Shell
 *  Shell也是一门编程语言<解释型的编程语言>，即shell脚本
 *  一个系统可以存在多个shell，可以通过 `cat /etc/shells` 命令查看系统中安装的shell，不同的shell可能支持的命令语法是不相同的

**Shell脚本的执行方式**

*  第一种：输入脚本的绝对路径或相对路径  
    首先要赋予+x权限  
    /root/helloWorld.sh  
    ./helloWorld.sh

或者，不用赋予+x权限，而用解释器解释执行  
       sh [helloworld.sh][]

*  第二种：bash或sh +脚本  
    sh /root/helloWorld.sh  
    sh [helloWorld.sh][]
 *  第三种：在脚本的路径前再加". "  
    . /root/helloWorld.sh  
    . ./helloWorld.sh

> 区别：第一种和第二种会新开一个bash，不同bash中的变量无法共享

**Shell中的变量**

*  Linux Shell中的变量分为“系统变量”和“用户自定义变量”，可以通过set命令查看那系统变量
 *  系统变量：$ HOME、$ PWD、$ SHELL、$ USER等等

显示当前shell中所有变量 : set

**定义变量**

*  变量＝值 （例如STR=abc）
 *  等号两侧不能有空格
 *  变量名称一般习惯为大写  
    双引号和单引号有区别，`双引号仅将空格脱意`，`单引号会将所有特殊字符脱意`  
    例如 : STR=“hello world”

A=9

*  unset A              撤销变量 A
 *  readonly B=2     声明静态的变量 B=2 ，就不能 unset
 *  export   变量名     可把变量提升为全局环境变量，可供其他shell程序使用(不管使用哪个用户登录都是不变的)

**将命令的返回值赋给变量**

*  A=‘ls -la’ 反引号，运行里面的`命令`，并把结果返回给变量A(键盘里面的 ! 左边的反引号 \`\`)
 *  A=$(ls -la) 等价于反引号

**Shell中的特殊变量**

*  $? 表示上一个命令退出的状态
 *  $$ 表示当前进程编号
 *  $0 表示当前脚本名称
 *  $n 表示n位置的输入参数（n代表数字，n>=1）
 *  $\# 表示参数的个数，常用于循环
 *  $ \* 和 $@ 都表示参数列表

**$ \* 与 $@ 区别**

*  $\* 和 $@ 都表示传递给函数或脚本的所有参数，不被 双引号 " " 包含时，都以$1 $2 … $n 的形式输出所有参数
 *  当它们被 双引号 " " 包含时，"$\*" 会将所有的参数作为一个整体，以"$1 $2 …  n " 的 形 式 输 出 所 有 参 数 ； " n"的形式输出所有参数；" n"的形式输出所有参数；"@" 会将各个参数分开，以"$1" " $2 " … " $n" 的形式输出所有参数

**运算符**

*  格式 : `expr m + n` 或`$((m+n))` 注意expr运算符间要有空格
 *  例如计算（2 ＋3 ）×4 的值  
    1 .分步计算 S=`expr 2 + 3` expr $S \* 4  
    2.一步完成计算  
    expr `expr 2 + 3` \* 4  
    echo `expr \`expr 2 + 3\` \* 4\`  
    或  
    $(((2+3)\*4))

**for循环**

*  第一种：

for N in 1 2 3
        do
        	echo $N
        done

**或**

for N in 1 2 3; 
    do 
    	echo $N; 
    done

**或**

for N in {1..3}; 
    do 
    	echo $N; 
    done

*  第二种：

for ((i = 0; i <= 5; i++))
    do
    	echo "welcome $i times"
    done

或

for ((i = 0; i <= 5; i++)); do echo "welcome $i times"; done

**while循环**

*  第一种

while expression
    do
    	command
    …
    done

*  第二种

i=1
    while ((i<=3))
    do
      echo $i;
      let i++;
    done

**case语句**

*  格式

case $1 in
    start)
    	echo "starting"
    	;;
    stop)
    	echo "stoping"
    	;;
    *)
    	echo "Usage: {start|stop} “
    esac

**read命令(提示语句)**

*  read -p(提示语句)-n(字符个数) -t(等待时间)  
    read -p "please input your name: " NAME

使用示例：

![在这里插入图片描述][20190411104730828.png]**if判断**

*  语法

if condition 
    then     
    	statements
    	
    [elif condition     
    	then statements. ..]
    [else     
    	statements ] 
     fi

例子:

#!/bin/bash
    read -p "please input your name:" NAME
    #printf '%s\n' $NAME
    if [ $NAME = root ]
            then
                    echo "hello ${NAME},  welcome !"
            elif [ $NAME = itcast ]
                    then
                            echo "hello ${NAME},  welcome !"
            else
                    echo "SB, get out here !"
    fi

**判断语句**

*  \[ condition \] `(注意condition前后要有空格)`  
    \#非空返回true，可使用$?验证（0为true，>1为false）  
    \[ itcast \]

\#空返回false  
        \[ \]

*  \[ condition \] && echo OK || echo notok  
    条件满足，执行后面的语句

**常用判断条件**

*  = 字符串比较
 *  \-lt 小于
 *  \-le 小于等于
 *  \-eq 等于
 *  \-gt 大于
 *  \-ge 大于等于
 *  \-ne 不等于
 *  \-r 有读的权限
 *  \-w 有写的权限
 *  \-x 有执行的权限
 *  \-f 文件存在并且是一个常规的文件
 *  \-s 文件存在且不为空
 *  \-d 文件存在并是一个目录
 *  \-b文件存在并且是一个块设备
 *  \-L 文件存在并且是一个链接

**Shell自定义函数**

*  语法

[ function ] funname [()]
    {
        action;
        [return int;]
    }
    
    function start()  / function start / start()

注意  
1.必须在调用函数地方之前，先声明函数，shell脚本是逐行运行。不会像其它语言一样先预编译  
2.函数返回值，只能通过$? 系统变量获得，可以显示加：return 返回，如果不加，将以最后一条命令运行结果，作为返回值。 return后跟数值n(0-255)

**脚本调试**

*  sh -vx [helloWorld.sh][]
 *  或者在脚本中增加set -x

**sed命令**

*  sed全称是：Stream EDitor即流编辑器，是一个很好的文本处理工具，本身是一个管道命令，处理时，把当前处理的行存储在临时缓冲区中，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行。它是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作。

**sed选项**

*  \-n ：使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
 *  \-e ：直接在命令列模式上进行 sed 的动作编辑；
 *  \-i ：直接修改读取的文件内容，而不是输出到终端。

**sed function**

*  a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)
 *  d ：删除，因为是删除啊，所以 d 后面通常不接任何内容
 *  i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)
 *  p ：列印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行
 *  s ：取代，可以直接进行取代的工作！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g

**awk命令**

*  AWK是一种优良的文本处理工具。其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母，AWK 提供了极其强大的功能：可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有精美特性。实际上 AWK 的确拥有自己的语言：AWK 程序设计语言， 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序，这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表，还有无数其他的功能。

**awk命令格式**

awk 'pattern1 {action1} pattern2 {action2} ...' filename

[helloworld.sh]: http://helloworld.sh
[helloWorld.sh]: http://helloWorld.sh
[20190411104730828.png]: /images/20220221/be51586f1833440487fc61b4cd2ad02e.png