ShellLearn

---

title: Shell学习 date: 2018-12-15 12:10:46 tags: - Shell categories: - Linux

目录 start

1. 学习Shell
   1. shell类别
   2. 执行方式
   3. 输入输出
      1. 输入
      2. 输出
   4. 变量
      1. 变量作用域
      2. 嵌套
   5. 数据类型
      1. 整型
      2. 字符串
      3. 数组
   6. 结构
      1. 传递参数
      2. 判断
         1. if
         2. case
      3. 循环
   7. 函数
   8. 文件处理
      1. 配置文件
         1. ini和conf
   9. 多线程
   10. 脚本的参数自动补全
       1. Bash
       2. Zsh
   11. 常用模块
       1. 时间
   12. 工具
       1. shyaml
2. Tips
   1. 常用代码片段

目录 end|2020-11-05 16:05|

---

学习Shell

Shell 编程之语法基础 | Shell 编程之执行过程

菜鸟教程: Shell 教程
C语言中文网: Shell教程

参考: 编写 Bash Shell 脚本的最佳实践

shellcheckShell语法检测

shell类别

切换shell chsh -s /bin/bash

• sh
  • 大多Linux都支持的shell类别
• bash
• zsh
  • 高扩展性 配置oh my zsh
• dash
  • 它主要是为了执行脚本而出现，而不是交互，它速度更快，但功能相比bash要少很多，语法严格遵守POSIX标准
  • 速度确实要快,输入上的交互确实交互不了
• fish
  • 交互式的, 补全功能比较好

参考: 常见shell类型
Github: zsh guide

---

执行方式

• source命令 | 点和source命令

• 文件头部 #!/bin/sh表示要使用sh解释器来执行, 可以替换成bash dash

  • 只要该文件具有执行权限就可以直接运行了 ./a.sh 或者绝对路径

---

输入输出

输入

• read answer

处理管道的输入也是使用 read

while read line; do
  echo $line
done

• select

  echo "What is your favourite OS?"
  select var in "Linux" "Gnu Hurd" "Free BSD" "Other"; do
    break;
  done
  echo "You have selected $var"

输出

echo printf

---

变量

变量作用域

比Python的作用域更加恶心

嵌套

  # 实现了读取 A_host变量的值
  perfix='A_'
  name=${perfix}host
  host=${!name}

shell将变量当命令执行问题

1. ${command}
2. echo ${command}|awk '{run=$0;system(run)}' 最好

---

数据类型

整型

• 自增：
  • i=$(( $i + 1 )) dash sh 都有效
  • ((a++))
  • i=`expr $i + 1`;
  • let i+=1;
  • i=$[$i+1];
• 取余
  • i=$(( $i % 3))

取随机数

• 四则运算 参考博客
  • ((i=$j+$k)) 等价于 i=expr $j + $k
  • ((i=$j-$k)) 等价于 i=expr $j -$k
  • ((i=$j*$k)) 等价于 i=expr $j \*$k
  • ((i=$j/$k)) 等价于 i=expr $j /$k

判断变量是否为数值

博客 判断是否为数值

  if [ "$1" -gt 0 ] 2>/dev/null ;then 
    echo "$1 is number." 
  else 
    echo 'no.' 
  fi 

---

字符串

• 字符串截取 | Blog:变量字符串截取 | Shell正则

字符串操作

Pattern	描述
${varible#*str}	截取 首个	str 右 的字符串
${varible##*str}	截取 最末	str 右 的字符串
${varible%%str*}	截取 首个	str 左 的字符串
${varible%str*}	截取 最末	str 左 的字符串

1. ${varible:start:end} 定长截取
2. ls -al | cut -d "." -f 2 取常规文件后缀名

---

获取命令的输出

• 使用 保存结果的变量名=需要执行的linux命令 这种方式来获取命令的输出时，注意的情况总结如下：

• 1）保证反单引号内的命令执行时成功的，也就是所命令执行后$?的输出必须是0，否则获取不到命令的输出

• 2）即便是命令的返回值是0，也需要保证结果是通过标准输出来输出的，而不是标准错误输出，否则需要重定向

• 因此我们推荐使用 保存结果的变量名=需要执行的linux命令 2>&1 的方式来获取命令的执行结果。

• 输出变量时: $var会丢失换行和空格 "$var"不会

字符串的包含问题

  isGithub=`expr match "$line" ".*"$2`
  # 简单的就是使用grep
  isGithub=`echo $line | grep "github" `
  # return 0 is $1 is substring of $2, otherwise 1
  strIsSubstring(){
      local x=1
      case "$2" in
          *$1*) x=0;;
      esac
      echo $x
  }

求长 ${#var}

字符串拆分成数组

修改分隔符 | 三种方法概述

1. 如果是空格分割的字符串
   • 直接 for element in $target

---

数组

---

结构

传递参数

参考博客 命令行选项 参数处理

参数	说明
$#	传递到脚本的参数个数
$*	以一个单字符串显示所有向脚本传递的参数。以"$1 $2 … $n"的形式输出所有参数。
$$	脚本运行的当前进程ID号
$!	后台运行的最后一个进程的ID号
$@	与$*相同，但是使用时加引号 以"$1" "$2" … "$n" 的形式输出所有参数。
$-	显示Shell使用的当前选项，与set命令功能相同。
$?	显示最后命令的退出状态。0表示没有错误，其他任何值表明有错误。

读取脚本参数

  # 1. 简单的方式
  case $1 in 
    -h | h)
      echo "help"
    ;;
    *)
      echo "default"
    ;;
  esac

  # 2. 规范化的参数
  while getopts "hup:" opt; do
    case "$opt" in
      h)
        usage
        exit 0
        ;;
      u)
        UPCASE=true
        ;;
      d)
        DATE=$OPTARG
        ;;
    esac
  done

判断

if

• 参考博客

判断文件

• 文件 if [ -f path ]

• 链接 if [ -L path ]

• 目录 if [ -d path ]

• 整数比较

  • -eq 等于,如:if [ "$a" -eq "$b" ]
  • -ne 不等于,如:if [ "$a" -ne "$b" ]
  • -gt 大于,如:if [ "$a" -gt "$b" ]
  • -ge 大于等于,如:if [ "$a" -ge "$b" ]
  • -lt 小于,如:if [ "$a" -lt "$b" ]
  • -le 小于等于,如:if [ "$a" -le "$b" ]
  • 大于 (需要双括号),如:(("$a" > "$b"))
  • >= 大于等于(需要双括号),如:(("$a" >= "$b"))

case

  case $content in 
    -h|h)
      echo "help"
    ;;
    *)
      echo "前面全部不匹配才会执行"
    ;;
  esac

循环

• 参考博客

for

  for i in $(seq 1 5); do
    echo $i
  done

  for (( a=0; a<10; a++)) do
    echo $a;
  done

while

    i=1
    while [ "$i" -le 10 ];do
        echo $i
        i=$(($i+1))
    done

1. break continue: break能跳出多层循环，只需带上数字 break num，也可以理解为无参的break默认带了1参数
2. done 后面可以接重定向，将循环的输出转到文件而不是终端

---

函数

Shell的函数只能返回整型数据类型

• 定义函数
  • function a {}
  • a(){}
  • 注意：
    • Shell是解释执行，必须先定义，然后调用，而且函数没有重载，只覆盖
    • 命令行内定义函数: function hi { echo hi;}; 注意左括号和命令的空格，以及命令;结尾

    simple(){
        echo "simple"
    }

    zero(){
        return 0
    }
    # 函数退出状态码（0-255）
    echo "return "$?
    
    # 使用输出返回值
    result=$(simple)

• 引用 shell 文件 source shell文件相对路径 source可以简写为 .

---

文件处理

    # 1
    while IFS= read -r -u3 line; do
        echo "$line"
    done 3< "$2"

    # 2
    cat a.log | while read line; do
        echo "line: "$line;
    done

1. 当前目录创建临时文件，并输出创建的文件名 mktmp data.XXXXXX

• -t 在 /tmp/目录下创建，并返回全路径
• -d 创建目录

1. 输出到终端并写入文件 echo "test" | tee a.log

配置文件

ini和conf

  [block]
  name=myth

• 如果没有 [block] 这样的声明就可以当sh用, 直接 source file 就加载了配置内容

多线程

参考: shell如何实现多线程

---

脚本的参数自动补全

参考: 命令行自动补全原理

Bash

Zsh

更为直观, 简单

学习怎么使用的话, 可以看上面的博客(虽然有点简陋), 但是如果是 oh-my-zsh 的用户, 可以直接看别人的插件, 模仿就行了, 例如 redis-cli 插件的自动补全, 就很简单直接

1. #compdef redis-cli rec 这第一行很重要, 定义了是对哪个命令或脚本的自动补全

---

常用模块

时间

shell处理时间格式

---

工具

更多工具

shyaml

参考

---

Tips

常用代码片段

1. 获取命名或函数标准输出 ` 反引号包裹命令 或者 $()
2. 检查当前用户为Root用户

       if [ $(id -u) != "0" ]; then
           printf $red"Please use root to run this script\n"$end
           exit 1
       fi

3. kill 脚本进程

       id=`ps -ef | grep "WithRedis.py" | grep -v "grep" | grep -v "\-d" | awk '{print $2}'`
       if [ "${id}1" = "1" ];then
           printf $red"not exist background running script\n"$end
       else
           kill -9 $id
       fi

4. 得到脚本绝对路径; 如果只是执行 pwd 只是得到执行脚本时的当前绝对路径而已

       basepath=$(cd \`dirname $0\`; pwd)