《Bash编程基础》PPT课件.ppt

Bash编程基础,乐视网 技术与研发中心 运维部 陈真,我可能是位开发， 想从应用log分析出每天用户请求的成功、失败、超时 情况各是多少（我昨天上线的新版本应该不会有bug吧，怕怕） 干脆写个shell吧，或许几行就够了，每天早晨上班路上拿手机收个邮件就能看到它的自动报告,场景1,我可能新来实习， 老大交给一堆的css文件，要求把每个css内引用的图片全部抠出来，重新上传得到新URL然后全部替换掉 （哭吧哭吧不是罪！不过是机械式ctrl+c/ctrl+f/ctrl+v而已） 写个shell脚本吧，帮你按照列表中新旧对应关系自动替换了，让老大也敬仰我一次吧！,场景2,我可能是位美女助理， 手上2份公司人员名单，一份是上季度800人(A)，一份是现在1045人(B)，要找出都谁离职了、谁新加入、谁一直都在。 （你懂的，写个shell脚本吧 _） while read a; do grep -wq “$a” B |echo $a;done A,场景3,男人女人，都需要摆脱机械式动作！ Bash脚本，谁用谁知道！ ,结论,Bash脚本用途,数据分析统计,进程监控,命令组合使用,定时任务执行,用途,内容导航,Bash基础 Bash语法 常用命令 经验分享,Bash基础,Shell的特性 Shell的种类 Shell与Bash、sh Bash与Vim配置,Shell的特性,Shell是一个命令解释器 Shell也是一种编程语言 解析语法 执行命令,Shell的种类,/bin/bash /bin/ksh /bin/sh /bin/tcsh /bin/zsh,Shell与Bash、sh,Bash: Shell的一种具体实现 Bourne Again shell (bash) Sh: Bourne shell (sh) Bash向后兼容sh Linux上sh为bash的链接,Bash的种类,Login Bash Interactive Bash Non-interactive bash ( bash脚本 ),Login Bash,登录的时候启动的Bash（ /etc/passwd最后一列中指定 ） 读取配置文件： /etc/profile 读取配置文件： .bash_profile - .bash_login - .profile login sh只读取 /etc/profile, .profile 配置文件都是通过 source 命令读取生效,Interactive Bash,一般在（伪）终端、控制台下启动，与用户交互的shell 运行“bash”这个命令可以启动 bash读取配置： .bashrc,Non-Interactive Bash,Bash脚本一般为可读、可执行的文本文件 Bash首行使用 #! /bin/bash 或#! /bin/sh 包含若干变量、命令、程序逻辑以实现一定的目的,Bash脚本优点,简单、快速,不需要 编译,灵活 高效,Bash脚本与Vim配置,/etc/vimrc 或 /.vimrc中配置 syntax on “ 语法高亮 set number “ 显示行数 set shiftwidth=4 “ 四格缩进 set tabstop=4 “ 四格缩进 set expandtab “ tab转space set bg=light “ 背景为亮色 color murphy “ 配色方案,内容导航,Bash基础 Bash语法 常用命令 经验分享,变量 数值运算 流程控制 命令 函数,Bash语法,变量,变量定义： name=value 变量引用： $name 注意： =号两边不允许空格，也不像php需要加$ $name是$name的简写 (变量值后如需紧跟其他字符,则必须用大括号将变量名括起来),常用变量,$? 最后一个命令的退出状态 $! 最后一个后台进程的pid $ 当前进程的pid $0 当前程序名称 $n n为1,2.n, 脚本或函数的参数 $#: 所给的参数个数 $*: 所有给出的参数 “$” 双引号必须,类似$*,但结果被替换为”$1”,”$2”,常用变量,$(command) 保存括号内命令的执行结果,同command $(experssion) 括号内部为变量和运算符构成的算术表达式 $HOME 用户主目录 $PATH 以:分隔的命令搜索路径名 $PWD 当前目录的全路径 $UID 用户ID，0代表超级用户,命令替换,作用： 将命令的输出结果赋值给变量 语法： var= command var=$( command ) 例： today=$( date +%F ),变量的要点,子进程不能改变父进程的变量,反之亦然 (用export name导出可使子进程继承父进程) 大部分的环境变量都是在login时设置的 当一个变量被引用时， 要尽量加上双引号 要注意检查变量是否合法,数值运算,方法 let, expr ( ) bc 常用运算 + - * / % (加,减,乘,除,取模) 例 i=10; j=20; ( i+ ); ( cnt = i + j ) cnt=$( echo “$i + $j“ | bc ),流程控制,条件判断 if case 循环 for, while break, continue,if条件判断表达式,if test $foo = bar;then echo ok;fi if $foo = bar ;then echo ok;fi if $foo = bar ;then echo ok;fi if ( $? = 0 );then echo ok;fi if grep foo myfile /dev/null; then echo ok;fi 返回值为0是true, 测试文件,if . else .,if expression ;then elif expression ;then else fi,#example read answer if $answer = “Y“ ; then echo “answer Y“ elif $answer = “N“ ; then echo “answer N“ else echo “ooh .“ fi,case,case “$var“ in condition1) statments1; condition2) statments2; . *) default statments; esac,# example read keypress case “$keypress“ in a-z) echo “lowercase“; A-Z) echo “uppercase“; 0-9) echo “digit“; *) echo “other“; esac,for循环,for $var in var1 var2 . do statments done break 中断循环 continue 继续循环,# example for DAY in 1 2 3 4 5 do echo $DAY if ( DAY = 3 );then break else continue fi done,while循环,形式1 while condition ; do statments done 形式2 until condition ; do statements done,#example i=1 sum=0 while ( i = 100 ); do ( sum += i ) ( i+ ) done echo “sum: $sum”,函数,调用: 需要先定义后调用。名字参数 参数: $1, $2 . $#, $* 返回值: 标准输出 退出状态：return $num；或最后一个命令的退出状态,函数,func_name() statements local可指定局部变量,#example add() local sum ( sum = $1 + $2 ) echo $sum cnt=$( add 10 20 ),函数,check_suseos() if -f “/etc/SuSE-release“ ; then return 0 else return 1 fi if check_suseos; then echo “SUSE running .” fi,Bash命令,BASH命令类型： 内部命令: bash内建的命令，如cd,pwd,echo 外部命令: 可执行文件/程序 自定义命令: alias别名，函数等 BASH执行命令时的查找顺序： 如果命令带路径，则根据路径直接运行,否则- alias-function-builtin-外部命令(查hash，再查$PATH),命令分隔符,换行: 一行一个命令 cmd_2 # cmd_1执行完后接着cmd_2,管道命令,管道命令： cmd_1 | cmd_2 | cmd_3 | . | cmd_n cmd_2将cmd_1的输出内容做为其输入 如 cat file | grep line,重定向,输入重定向 while read line; do echo $line done /dev/null 标准错误 grep xxx $file 2 /dev/null 追加 grep xxx $file result,命令的退出状态,检查 $? 的值是否为0, 0为真,非0为假,grep -q admin /etc/passwd if ( $? = 0 );then echo “found” else echo “not found” fi,if grep -q admin /etc/passwd; then echo “found” else echo “not found” fi,内容导航,Bash基础 Bash语法 常用命令 经验分享,常用命令,资源使用状态 进程与作业 排列与计数 查找修改和分析,资源使用状态,df -h du -sh, du -sm - * | sort -n free -k, free -m top vmstat netstat iptraf,进程与作业,ps -efww pstree -ahp pidof, pgrep kill, killall nohup,排列与计数,cut （-f1-5 -d ,） sort （-n -r -k -u） uniq （-c -d -u） wc （ grep -c 比 grep |wc -l 高效）,查找修改和分析,grep: 查找、分拣 sed: 替换、修改 awk: 格式、统计,grep,grep -i 忽略大小写 grep -v 只显示未匹配的 grep -w 整个单词匹配 grep -n 同时打印所在行数 grep -E 正则匹配 grep -help,sed,直接修改file文件，删除#开头的行 sed -i /#/d file 先删除头三行再替换字符串 sed -e 1,3d -e s/moding/moden/g file 直接把fileb文件内容追加到filea中匹配位置 sed /text/ r fileb filea,awk,确保整个awk命令用单引号括起 确保命令内所有引号成对出现 确保用花括号括起动作语句 确保用圆括号括起条件语句 awk BEGINcode=400 ($9=code) i+ ENDprint i“/“NR“=“i/NR access.log,内容导航,Bash基础 Bash语法 常用命令 经验分享 ,经验分享,常见错误 调试技巧 脚本规范 其他工具 推荐书目,常见错误,赋值时等号有空格 测试时没有空格 使用未定义的变量或环境变量不一致 使用带空格的变量时没有加双引号 使用了错误的引号 文件名包含空格或- 定时任务堆积致系统资源耗尽,调试技巧,打印出变量的值观察 打印出要执行的命令观察 观察命令的返回值 把crontab中执行的脚本做重定向观察错误提示 set -x 观察脚本的执行过程,脚本规范,#!/bin/bash # # Description: # Author: # Version: # History: # export PATH=“$PATH:/usr/local/sbin:/usr/local/bin:/sbin:/bi