起源:进击云原生

1、检测两台服务器指定目录下的文件一致性

#!/bin/bash  ######################################  检测两台服务器指定目录下的文件一致性  #####################################  #通过比照两台服务器上文件的md5值,达到检测一致性的目标  dir=/data/web  b_ip=192.168.88.10  #将指定目录下的文件全副遍历进去并作为md5sum命令的参数,进而失去所有文件的md5值,并写入到指定文件中  find $dir -type f|xargs md5sum > /tmp/md5_a.txt  ssh $b_ip "find $dir -type f|xargs md5sum > /tmp/md5_b.txt"  scp $b_ip:/tmp/md5_b.txt /tmp  #将文件名作为遍历对象进行一一比对  for f in `awk '{print 2} /tmp/md5_a.txt'`do  #以a机器为规范,当b机器不存在遍历对象中的文件时间接输入不存在的后果  if grep -qw "$f" /tmp/md5_b.txt  then  md5_a=`grep -w "$f" /tmp/md5_a.txt|awk '{print 1}'`  md5_b=`grep -w "$f" /tmp/md5_b.txt|awk '{print 1}'`  #当文件存在时,如果md5值不统一则输入文件扭转的后果  if [ $md5_a != $md5_b ]then  echo "$f changed."  fi  else  echo "$f deleted."  fi  done  

2、定时清空文件内容,定时记录文件大小

#!/bin/bash  #################################################################  每小时执行一次脚本(工作打算),当工夫为0点或12点时,将目标目录下的所有文件内#容清空,但不删除文件,其余工夫则只统计各个文件的大小,一个文件一行,输入到以时#间和日期命名的文件中,须要思考目标目录下二级、三级等子目录的文件  ################################################################  logfile=/tmp/`date +%H-%F`.log  n=`date +%H`  if [ $n -eq 00 ] || [ $n -eq 12 ]  then  #通过for循环,以find命令作为遍历条件,将目标目录下的所有文件进行遍历并做相应操作  for i in `find /data/log/ -type f`  do  true > $i  done  else  for i in `find /data/log/ -type f`  do  du -sh $i >> $logfile  done  fi  

3、检测网卡流量,并按规定格局记录在日志中

#!/bin/bash  #######################################################  #检测网卡流量,并按规定格局记录在日志中#规定一分钟记录一次  #日志格局如下所示:  #2019-08-12 20:40  #ens33 input: 1234bps  #ens33 output: 1235bps  ######################################################3  while :  do  #设置语言为英文,保障输入后果是英文,否则会呈现bug  LANG=en  logfile=/tmp/`date +%d`.log  #将上面执行的命令后果输入重定向到logfile日志中  exec >> $logfile  date +"%F %H:%M"  #sar命令统计的流量单位为kb/s,日志格局为bps,因而要*1000*8  sar -n DEV 1 59|grep Average|grep ens33|awk '{print $2,"\t","input:","\t",$5*1000*8,"bps","\n",$2,"\t","output:","\t",$6*1000*8,"bps"}'  echo "####################"  #因为执行sar命令须要59秒,因而不须要sleep  done  

4、计算文档每行呈现的数字个数,并计算整个文档的数字总数

#!/bin/bash  #########################################################  #计算文档每行呈现的数字个数,并计算整个文档的数字总数  ########################################################  #应用awk只输入文档行数(截取第一段)  n=`wc -l a.txt|awk '{print $1}'`  sum=0  #文档中每一行可能存在空格,因而不能间接用文档内容进行遍历  for i in `seq 1 $n`do  #输入的行用变量示意时,须要用双引号  line=`sed -n "$i"p a.txt`#wc -L选项,统计最长行的长度  n_n=`echo $line|sed s'/[^0-9]//'g|wc -L`  echo $n_nsum=$[$sum+$n_n]  done  echo "sum:$sum"  

杀死所有脚本

#!/bin/bash  ################################################################  #有一些脚本退出到了cron之中,存在脚本尚未运行结束又有新工作须要执行的状况,  #导致系统负载升高,因而可通过编写脚本,筛选出影响负载的过程一次性全副杀死。  ################################################################  ps aux|grep 指定过程名|grep -v grep|awk '{print $2}'|xargs kill -9  

5、从 FTP 服务器下载文件

#!/bin/bash  if [ $# -ne 1 ]; then      echo "Usage: $0 filename"  fi  dir=$(dirname $1)  file=$(basename $1)  ftp -n -v << EOF   # -n 主动登录  open 192.168.1.10  # ftp服务器  user admin password  binary   # 设置ftp传输模式为二进制,防止MD5值不同或.tar.gz压缩包格局谬误  cd $dir  get "$file"  EOF  

6、间断输出5个100以内的数字,统计和、最小和最大

#!/bin/bash  COUNT=1  SUM=0  MIN=0  MAX=100  while [ $COUNT -le 5 ]; do      read -p "请输出1-10个整数:" INT          if [[ ! $INT =~ ^[0-9]+$ ]]; then          echo "输出必须是整数!"          exit 1      elif [[ $INT -gt 100 ]]; then          echo "输出必须是100以内!"          exit 1      fi      SUM=$(($SUM+$INT))      [ $MIN -lt $INT ] && MIN=$INT      [ $MAX -gt $INT ] && MAX=$INT      let COUNT++      done  echo "SUM: $SUM"  echo "MIN: $MIN"  echo "MAX: $MAX  

用户猜数字

#!/bin/bash  # 脚本生成一个 100 以内的随机数,提醒用户猜数字,依据用户的输出,提醒用户猜对了,  # 猜小了或猜大了,直至用户猜对脚本完结。  # RANDOM 为零碎自带的零碎变量,值为 0‐32767的随机数  # 应用取余算法将随机数变为 1‐100 的随机数num=$[RANDOM%100+1]echo "$num"   # 应用 read 提醒用户猜数字  # 应用 if 判断用户猜数字的大小关系:‐eq(等于),‐ne(不等于),‐gt(大于),‐ge(大于等于),  # ‐lt(小于),‐le(小于等于)    while :    do           read -p "计算机生成了一个 1‐100 的随机数,你猜: " cai          if [ $cai -eq $num ]          then                  echo "祝贺,猜对了"                     exit              elif [ $cai -gt $num ]             then                      echo "Oops,猜大了"               else                      echo "Oops,猜小了"           fi    done  

7、监测 Nginx 拜访日志 502 状况,并做相应动作

假如服务器环境为 lnmp,近期拜访经常出现 502 景象,且 502 谬误在重启 php-fpm 服务后隐没,因而须要编写监控脚本,一旦呈现 502,则主动重启 php-fpm 服务。

#场景:  #1.拜访日志文件的门路:/data/log/access.log  #2.脚本死循环,每10秒检测一次,10秒的日志条数为300条,呈现502的比例不低于10%(30条)则须要重启php-fpm服务  #3.重启命令为:/etc/init.d/php-fpm restart  #!/bin/bash  ###########################################################  #监测Nginx拜访日志502状况,并做相应动作  ###########################################################  log=/data/log/access.log  N=30 #设定阈值  while :do   #查看拜访日志的最新300条,并统计502的次数      err=`tail -n 300 $log |grep -c '502" '`   if [ $err -ge $N ]   then  /etc/init.d/php-fpm restart 2> /dev/null   #设定60s提早避免脚本bug导致有限重启php-fpm服务       sleep 60   fi   sleep 10   done  

8、将后果别离赋值给变量

利用场景:心愿将执行后果或者地位参数赋值给变量,以便后续应用。

办法1:

for i in $(echo "4 5 6"); do     eval a$i=$idone  echo $a4 $a5 $a6  

办法2:将地位参数192.168.1.1{1,2}拆分为到每个变量

num=0  for i in $(eval echo $*);do   #eval将{1,2}合成为1 2     let num+=1     eval node${num}="$i"  done  echo $node1 $node2 $node3  # bash a.sh 192.168.1.1{1,2}  192.168.1.11 192.168.1.12    办法3:arr=(4 5 6)  INDEX1=$(echo ${arr[0]})  INDEX2=$(echo ${arr[1]})  INDEX3=$(echo ${arr[2]})  

9、批量批改文件名

示例:

# touch article_{1..3}.html  # lsarticle_1.html  article_2.html  article_3.html  目标:把article改为bbs  

办法1:

for file in $(ls *html); do      mv $file bbs_${file#*_}      # mv $file $(echo $file |sed -r 's/.*(_.*)/bbs\1/')      # mv $file $(echo $file |echo bbs_$(cut -d_ -f2)  

办法2:

for file in $(find . -maxdepth 1 -name "*html"); do       mv $file bbs_${file#*_}done  

办法3:

# rename article bbs *.html  把一个文档前五行中蕴含字母的行删掉,同时删除6到10行蕴含的所有字母    1)筹备测试文件,文件名为2.txt    第1行1234567不蕴含字母  第2行56789BBBBBB  第3行67890CCCCCCCC  第4行78asdfDDDDDDDDD  第5行123456EEEEEEEE  第6行1234567ASDF  第7行56789ASDF  第8行67890ASDF  第9行78asdfADSF  第10行123456AAAA  第11行67890ASDF  第12行78asdfADSF  第13行123456AAAA  

2)脚本如下:

#!/bin/bash  ###############################################################  把一个文档前五行中蕴含字母的行删掉,同时删除6到10行蕴含的所有字母  ##############################################################  sed -n '1,5'p 2.txt |sed '/[a-zA-Z]/'d  sed -n '6,10'p 2.txt |sed s'/[a-zA-Z]//'g  sed -n '11,$'p 2.txt  #最终后果只是在屏幕上打印后果,如果想间接更改文件,可将输入后果写入临时文件中,再替换2.txt或者应用-i选项  

10、统计当前目录中以.html结尾的文件总大

办法1:

# find . -name "*.html" -exec du -k {} \; |awk '{sum+=$1}END{print sum}'    办法2:  

for size in $(ls -l *.html |awk '{print $5}'); do

sum=$(($sum+$size))  

done
echo $sum

### 11、扫描主机端口状态

!/bin/bash

HOST=$1
PORT="22 25 80 8080"
for PORT in $PORT; do

if echo &>/dev/null > /dev/tcp/$HOST/$PORT; then      echo "$PORT open"  else      echo "$PORT close"  fi  

done
用 shell 打印示例语句中字母数小于6的单词

示例语句:

Bash also interprets a number of multi-character options.

!/bin/bash

shell打印示例语句中字母数小于6的单词

for s in Bash also interprets a number of multi-character options.
do
n=echo $s|wc -c
if [ $n -lt 6 ]
then
echo $s
fi
done

### 12、输出数字运行相应命令

!/bin/bash

输出数字运行相应命令

echo "cmd menu 1-date 2-ls 3-who 4-pwd 0-exit "
while :
do

捕捉用户键入值

read -p "please input number :" n
n1=echo $n|sed s'/[0-9]//'g

空输出检测

if [ -z "$n" ]
then
continue
fi

非数字输出检测

if [ -n "$n1" ]
then
exit 0
fi
break
done
case $n in
1)
date
;;
2)
ls
;;
3)
who
;;
4)
pwd
;;
0)
break
;;

#输出数字非1-4的提醒  

*)
echo "please input number is [1-4]"
esac

### 13、Expect 实现 SSH 免交互执行命令Expect是一个主动交互式应用程序的工具,如telnet,ftp,passwd等。需先装置expect软件包。办法1:EOF规范输入作为expect规范输出

!/bin/bash

USER=root
PASS=123.com
IP=192.168.1.120
expect << EOFset timeout 30spawn ssh $USER@$IP expect { "(yes/no)" {send "yes\r"; exp_continue} "password:" {send "$PASS\r"}
}
expect "$USER@*" {send "$1\r"}
expect "$USER@*" {send "exit\r"}
expect eof
EOF

办法2:

!/bin/bash

USER=root
PASS=123.com
IP=192.168.1.120
expect -c "

spawn ssh $USER@$IP  expect {      \"(yes/no)\" {send \"yes\r\"; exp_continue}      \"password:\" {send \"$PASS\r\"; exp_continue}      \"$USER@*\" {send \"df -h\r exit\r\"; exp_continue}  }"  
办法3:将expect脚本独立进去

登录脚本:

cat login.exp

!/usr/bin/expect

set ip [lindex $argv 0]
set user [lindex $argv 1]
set passwd [lindex $argv 2]
set cmd [lindex $argv 3]
if { $argc != 4 } {
puts "Usage: expect login.exp ip user passwd"
exit 1
}
set timeout 30
spawn ssh $user@$ip
expect {

"(yes/no)" {send "yes\r"; exp_continue}  "password:" {send "$passwd\r"}  

}
expect "$user@*" {send "$cmd\r"}
expect "$user@*" {send "exit\r"}
expect eof

执行命令脚本:写个循环能够批量操作多台服务器

!/bin/bash

HOST_INFO=user_info.txt
for ip in $(awk '{print $1}' $HOST_INFO)
do

user=$(awk -v I="$ip" 'I==$1{print $2}' $HOST_INFO)  pass=$(awk -v I="$ip" 'I==$1{print $3}' $HOST_INFO)  expect login.exp $ip $user $pass $1  

done
Linux主机SSH连贯信息:

cat user_info.txt

192.168.1.120 root 123456
创立10个用户,并别离设置明码,明码要求10位且蕴含大小写字母以及数字,最初须要把每个用户的明码存在指定文件中

#!/bin/bash  ##############################################################  #创立10个用户,并别离设置明码,明码要求10位且蕴含大小写字母以及数字  #最初须要把每个用户的明码存在指定文件中#前提条件:装置mkpasswd命令  ##############################################################  #生成10个用户的序列(00-09)  for u in `seq -w 0 09`do   #创立用户   useradd user_$u   #生成明码   p=`mkpasswd -s 0 -l 10`    #从规范输出中读取明码进行批改(不平安)   echo $p|passwd --stdin user_$u   #惯例批改明码   echo -e "$p\n$p"|passwd user_$u   #将创立的用户及对应的明码记录到日志文件中   echo "user_$u $p" >> /tmp/userpassworddone  

14、监控 httpd 的过程数,依据监控状况做相应解决

#!/bin/bash  ###############################################################################################################################  #需要:  #1.每隔10s监控httpd的过程数,若过程数大于等于500,则主动重启Apache服务,并检测服务是否重启胜利  #2.若未胜利则须要再次启动,若重启5次仍旧没有胜利,则向管理员发送告警邮件,并退出检测  #3.如果启动胜利,则期待1分钟后再次检测httpd过程数,若过程数失常,则恢复正常检测(10s一次),否则放弃重启并向管理员发送告警邮件,并退出检测  ###############################################################################################################################  #计数器函数  check_service()  {   j=0   for i in `seq 1 5`    do   #重启Apache的命令   /usr/local/apache2/bin/apachectl restart 2> /var/log/httpderr.log          #判断服务是否重启胜利   if [ $? -eq 0 ] then   break   else   j=$[$j+1] fi      #判断服务是否已尝试重启5次   if [ $j -eq 5 ] then   mail.py exit   fi   done }while :do   n=`pgrep -l httpd|wc -l`    #判断httpd服务过程数是否超过500   if [ $n -gt 500 ] then   /usr/local/apache2/bin/apachectl restart    if [ $? -ne 0 ]    then   check_service    else   sleep 60   n2=`pgrep -l httpd|wc -l`    #判断重启后是否仍旧超过500               if [ $n2 -gt 500 ]    then    mail.py exit   fi   fi   fi   #每隔10s检测一次   sleep 10done  

15、批量批改服务器用户明码

Linux主机SSH连贯信息:旧明码

# cat old_pass.txt   192.168.18.217  root    123456     22  192.168.18.218  root    123456     22  内容格局:IP User Password Port    SSH近程批改明码脚本:新密码随机生成  https://www.linuxprobe.com/books  #!/bin/bash  OLD_INFO=old_pass.txt  NEW_INFO=new_pass.txt  for IP in $(awk '/^[^#]/{print $1}' $OLD_INFO); do      USER=$(awk -v I=$IP 'I==$1{print $2}' $OLD_INFO)      PASS=$(awk -v I=$IP 'I==$1{print $3}' $OLD_INFO)      PORT=$(awk -v I=$IP 'I==$1{print $4}' $OLD_INFO)      NEW_PASS=$(mkpasswd -l 8)  # 随机明码      echo "$IP   $USER   $NEW_PASS   $PORT" >> $NEW_INFO      expect -c "      spawn ssh -p$PORT $USER@$IP      set timeout 2      expect {          \"(yes/no)\" {send \"yes\r\";exp_continue}          \"password:\" {send \"$PASS\r\";exp_continue}          \"$USER@*\" {send \"echo \'$NEW_PASS\' |passwd --stdin $USER\r exit\r\";exp_continue}      }"  done  生成新密码文件:    # cat new_pass.txt   192.168.18.217  root    n8wX3mU%      22  192.168.18.218  root    c87;ZnnL      22  

16、iptables 主动屏蔽拜访网站频繁的IP

场景:歹意拜访,平安防备

1)屏蔽每分钟拜访超过200的IP

办法1:依据拜访日志(Nginx为例)

#!/bin/bash  DATE=$(date +%d/%b/%Y:%H:%M)  ABNORMAL_IP=$(tail -n5000 access.log |grep $DATE |awk '{a[$1]++}END{for(i in a)if(a[i]>100)print i}')  #先tail避免文件过大,读取慢,数字可调整每分钟最大的访问量。awk不能间接过滤日志,因为蕴含特殊字符。  for IP in $ABNORMAL_IP; do      if [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; then          iptables -I INPUT -s $IP -j DROP    fidone  

办法2:通过TCP建设的连贯

#!/bin/bash  ABNORMAL_IP=$(netstat -an |awk '$4~/:80$/ && $6~/ESTABLISHED/{gsub(/:[0-9]+/,"",$5);{a[$5]++}}END{for(i in a)if(a[i]>100)print i}')  #gsub是将第五列(客户端IP)的冒号和端口去掉  for IP in $ABNORMAL_IP; do      if [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; then          iptables -I INPUT -s $IP -j DROP              fi  done  

2)屏蔽每分钟SSH尝试登录超过10次的IP

办法1:通过lastb获取登录状态:

#!/bin/bash  DATE=$(date +"%a %b %e %H:%M") #星期月天时候  %e单数字时显示7,而%d显示07  ABNORMAL_IP=$(lastb |grep "$DATE" |awk '{a[$3]++}END{for(i in a)if(a[i]>10)print i}')for IP in $ABNORMAL_IP; do      if [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; then          iptables -I INPUT -s $IP -j DROP    fidone  

办法2:通过日志获取登录状态

#!/bin/bash  DATE=$(date +"%b %d %H")  ABNORMAL_IP="$(tail -n10000 /var/log/auth.log |grep "$DATE" |awk '/Failed/{a[$(NF-3)]++}END{for(i in a)if(a[i]>5)print i}')"  for IP in $ABNORMAL_IP; do      if [ $(iptables -vnL |grep -c "$IP") -eq 0 ]; then          iptables -A INPUT -s $IP -j DROP                  echo "$(date +"%F %T") - iptables -A INPUT -s $IP -j DROP" >>~/ssh-login-limit.log          fi  done  

17、依据web拜访日志,封禁申请量异样的IP,如IP在半小时后恢复正常,则解除封禁

#!/bin/bash  ####################################################################################  #依据web拜访日志,封禁申请量异样的IP,如IP在半小时后恢复正常,则解除封禁  ####################################################################################  logfile=/data/log/access.log  #显示一分钟前的小时和分钟  d1=`date -d "-1 minute" +%H%M`  d2=`date +%M`  ipt=/sbin/iptables  ips=/tmp/ips.txt  block()  {   #将一分钟前的日志全副过滤出来并提取IP以及统计拜访次数   grep '$d1:' $logfile|awk '{print $1}'|sort -n|uniq -c|sort -n > $ips   #利用for循环将次数超过100的IP顺次遍历进去并予以封禁   for i in `awk '$1>100 {print $2}' $ips`    do   $ipt -I INPUT -p tcp --dport 80 -s $i -j REJECT    echo "`date +%F-%T` $i" >> /tmp/badip.log    done  }  unblock()  {   #将封禁后所产生的pkts数量小于10的IP顺次遍历予以解封   for a in `$ipt -nvL INPUT --line-numbers |grep '0.0.0.0/0'|awk '$2<10 {print $1}'|sort -nr`    do    $ipt -D INPUT $a   done   $ipt -Z  }  #当工夫在00分以及30分时执行解封函数  if [ $d2 -eq "00" ] || [ $d2 -eq "30" ]    then   #要先解再封,因为刚刚封禁时产生的pkts数量很少   unblock   block    else   block  fi  

18、判断用户输出的是否为IP地址

办法1:

#!/bin/bash  function check_ip(){      IP=$1      VALID_CHECK=$(echo $IP|awk -F. '$1< =255&&$2<=255&&$3<=255&&$4<=255{print "yes"}')      if echo $IP|grep -E "^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$">/dev/null; then          if [ $VALID_CHECK == "yes" ]; then              echo "$IP available."          else              echo "$IP not available!"          fi      else          echo "Format error!"      fi  }  check_ip 192.168.1.1  check_ip 256.1.1.1  

办法2:

#!/bin/bash  function check_ip(){      IP=$1      if [[ $IP =~ ^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$ ]]; then          FIELD1=$(echo $IP|cut -d. -f1)          FIELD2=$(echo $IP|cut -d. -f2)          FIELD3=$(echo $IP|cut -d. -f3)          FIELD4=$(echo $IP|cut -d. -f4)          if [ $FIELD1 -le 255 -a $FIELD2 -le 255 -a $FIELD3 -le 255 -a $FIELD4 -le 255 ]; then              echo "$IP available."          else              echo "$IP not available!"          fi      else          echo "Format error!"      fi  }  check_ip 192.168.1.1  check_ip 256.1.1.1  

减少版:

加个死循环,如果IP可用就退出,不可用提醒持续输出,并应用awk判断。

#!/bin/bash  function check_ip(){      local IP=$1      VALID_CHECK=$(echo $IP|awk -F. '$1< =255&&$2<=255&&$3<=255&&$4<=255{print "yes"}')      if echo $IP|grep -E "^[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}$" >/dev/null; then          if [ $VALID_CHECK == "yes" ]; then              return 0          else              echo "$IP not available!"              return 1          fi      else          echo "Format error! Please input again."          return 1      fi  }  while true; do      read -p "Please enter IP: " IP      check_ip $IP      [ $? -eq 0 ] && break || continue  done  

近期热文举荐:

1.1,000+ 道 Java面试题及答案整顿(2022最新版)

2.劲爆!Java 协程要来了。。。

3.Spring Boot 2.x 教程,太全了!

4.别再写满屏的爆爆爆炸类了,试试装璜器模式,这才是优雅的形式!!

5.《Java开发手册(嵩山版)》最新公布,速速下载!

感觉不错,别忘了顺手点赞+转发哦!