繁依Fanyi0

这个屌丝很懒，什么也没留下！

热门标签

shell常用脚本（转）

作者：繁依Fanyi0 | 2024-08-10 21:13:55

踩

d3tt3.xyz

Menu
1、用shell脚本批量建立Linux用户
2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：
3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。
4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。
5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告
6、自动ftp上传
7、编写shell脚本，获取本机的网络地址。
8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：
(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；
(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；
(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;
(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;
(5)在早上8：00 前开机后启动。
9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30
10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

Answer:

1、用shell脚本批量建立Linux用户

实现要求：创建用户student1到student50,指定组为student组！而且每个用户需要设定一个不同的密码！
脚本实现如下：

not this is a test


#!/bin/bash
for i in `seq 1 50`
do
    useradd -G student student$i ;
    echo student$i | passwd student$i --stdin;
done

【说明：Linux下 Passwd有参数

　　--stdin

　　This option is used to indicate that passwd should read the new password from standard input, which can be a pipe.

　　所以linux下自动改变用户密码的办法就是:

　　Echo 密码 |passwd –stdin 用户名
】

设置相同的密码


#!/bin/bash
password="123456"
for USER in user1 user2 user3
do
     useradd -m $USER
     echo -e "${password}\n${password}" | passwd $USER
done

【说明：
echo -n 不换行输出：
$echo -n "123"
$echo "456"

最终输出
123456
而不是
123
456
echo -e 处理特殊字符：
\n 换行且光标移至行首】

ok,就这么一个简单的脚本，就可以再系统里批量生成账号了。而且密码跟账号的名字一样。
这就是for do done语句用法。

2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：


!/bin/bash
 
for FILE in `ls /usr/local/test`
do
    if [ -f $FILE ] ; then
        if [ `ls -l  $FILE | awk `{print $5}` -gt 100000 ] ; then
            mv $FILE  /tmp/
        fi
    fi
done

================


#!/bin/bash
for FileName in `ls -l  /usr/local/test | awk '$5>102400' {print $9}`
do
        mv $FileName  /tmp/
done
ls -al  /tmp/
echo  "done!"

3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。

日志格式样例如下：
192.168.1.247 ---【02/jul/2010:23:44:59 + 8080 】 "GET /HTTP/1/1" 200 19

答案：

cat access.log | awk '{print $1}' |sort| uniq -c |sort -rn |head -10


 （uniq 参数说明：– c 显示输出中，在每行行首加上本行在文件中连续出现的次数。
  sort参数说明：sort默认的排序方式是升序，-r 参数就会改变成倒叙；你有没有遇到过10比2小的情况。我反正遇到过。
  出现这种情况是由于排序程序将这些数字按字符来排序了，排序程序会先比较1和2，显然1小，所以就将
  10放在2前面喽。这也是sort的一贯作风。）

4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

a、首先两台机器要建立服务器间的信任关系。
b、脚本：


#！/bin/bash
 
FSMAX="80"
remote_user='root'
remote_ip=(IP地址列表)
ip_num='0'
 
while [ "$ip_num" -le "$(expr ${#remote_ip[@]} -l)"]
do
read_num='1'
ssh "$remote_user"@"${remote_ip[$ip_num]}"  df -h > /tmp/diskcheck_tmp
grep '^/dev/*'  /tmp/diskcheck_tmp | awk '{print $5}'|sed 's/\%//g'  > /tmp/diskcheck_num_tmp
 
 
while [ "$read_num" -le $(wc -l < /tmp/diskcheck_num_tmp) ]
do
size=$(sed -n "$read_num" 'p'  /tmp/diskcheck_num_tmp)
 
if [ "size" -gt "$FSMAX" ]
then
$(grep '^/dev/*'  /tmp/diskcheck_tmp |sed -n $read_num'p'  > /tmp/disk_check_mail)
 
$(echo ${remote_ip[$ip_num]}) >> /tmp/disk_check_mail)
$(mail  -s "diskcheck_alert"  admin  <  /tmp/disk_check_mail)
fi
 
read_num=$(expr  $read_num + 1)
 
done
 
ip_num=$(expr  $ip_num + 1)
done

===================写入crontab=====================
0/10 * * * * /home/diskcheck.sh 2&>1

5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告


#!/bin/bash
#monitor available disk space
 
#提取本服务器的IP地址信息
IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "`
SPACE=` df -hP | awk '{print int($5)}'`
if [ $SPACE -ge 90 ]
then
  echo "$IP 服务器 磁盘空间 使用率已经超过90%，请及时处理。"|mail -s "$IP 服务器硬盘告警"   fty89@163.com
fi

6、自动ftp上传


   #! /bin/bash
    ftp -n << END_FTP
    open 192.168.1.22
    user  test testing      //用户名test  密码：testing
    binary
    prompt  off    //关闭提示
    mput   files     //上传files文件
    close
    bye
    END_FTP

7、编写shell脚本，获取本机的网络地址。比如：本机的ip地址是：

192.168.100.5/255.255.255.0,
那么他的网络地址是：
192.168.100.1/255.255.255.0

方法一：


#！/bin/bash
IP=ifconfig eth0|grep 'inet addr'|sed 's/^.*addr://g'|awk  '{print $1}'
NETMASK=ifconfig eth0 |grep "inet addr"|sed 's/^.*Mask://g'
 
echo "$IP/&NETMASK"
exit

方法二：


#!/bin/bash
 #This script print ip and network
 file="/etc/sysconfig/network-scripts/ifcfg-eth0"
 if [ -f $file ] ;then
     IP=`grep "IPADDR" $file|awk -F"=" '{ print $2 }'`
     MASK=`grep "NETMASK" $file|awk -F"=" '{ print $2 }'`
 echo "$IP/$MASK"
 exit 1
 fi

IP地址也可这样获取：

IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "

子网掩码：

NETMASK= `ifconfig eth0 | grep "inet addr"|cut -f 4 -d ":"

8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：

(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；

(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；

(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;

(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;

(5)在早上8：00 前开机后启动。

答案：

（a）用vi创建编辑一个名为prgx的crontab文件；

（b）prgx文件的内容：


50 16 * * * rm -r /abc/*
0 8-18/1 * * * cut -f1 /xyz/x1 >>  /backup/bak01.txt
50 17 * * * tar zcvf backup.tar.gz /data
55 17 * * * umount /dev/hdc

（c）由超级用户登录，用crontab执行 prgx文件中的内容：

root@xxx:#crontab prgx；
在每日早晨8:00之前开机后即可自动启动crontab

9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

参考答案：


#!/bin/sh
i=1
groupadd class1
 
while [ $i -le 30 ]
do
if [ $i -le 9 ] ;then
USERNAME=stu0${i}
else
USERNAME=stu${i}
fi
 
useradd $USERNAME
 
mkdir /home/$USERNAME
 
chown -R $USERNAME /home/$USERNAME
 
chgrp -R class1 /home/$USERNAME
 
i=$(($i+1))
 
done

10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

参考程序：


#!/bin/sh
 
i=1
 
while [ $i -le 50 ]
 
do
 
userdel -r stud${i}
 
i=$(($i+1 ))
 
done

11．设计一个shell程序，在每月第一天备份并压缩/etc目录的所有内容，存放在/root/bak目录里，且文件名为如下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

参考答案：

（1）编写shell程序fileback：


#!/bin/sh
DIRNAME=`ls /root | grep bak`
if [ -z "$DIRNAME" ] ; then
mkdir /root/bak
cd /root/bak
fi
BACKETC=$(date +%Y%m%d)_etc.tar.gz
tar zcvf  $BACKETC  /etc
echo "fileback finished!"

（2）编写任务定时器：


echo "0 0 1 * * /bin/sh /usr/bin/fileback" >; /root/etcbakcron
 
crontab /root/etcbakcron

或使用crontab -e 命令添加定时任务：

0 1 * * * /bin/sh /usr/bin/fileback

12．有一普通用户想在每周日凌晨零点零分定期备份/user/backup到/tmp目录下，该用户应如何做？

参考答案：

（1）第一种方法：

用户应使用crontab –e 命令创建crontab文件。
格式如下：

0 0 * * sun cp –r /user/backup /tmp

（2）第二种方法：

用户先在自己目录下新建文件file，文件内容如下：

0 * * sun cp –r /user/backup /tmp

然后执行 crontab file 使生效。

13．设计一个Shell程序，在/userdata目录下建立50个目录，即user1～user50，并设置每个目录的权限，其中其他用户的权限为：读；文件所有者的权限为：读、写、执行；文件所有者所在组的权限为：读、执行。

参考答案:

建立程序 Pro16如下：


#!/bin/sh
 
i=1
 
while [ i -le 50 ]
 
do
 
if [ -d /userdata ];then
 
mkdir -p -m 754 /userdata/user$i   加上-m 754 就不用写下面那一句了  -p 是递归建立目录
 
#chmod 754 /userdata/user$i
 
echo "user$i"
 
let "i = i + 1" （或i=$(($i+1))
 
else
 
mkdir /userdata
 
mkdir -p -m /userdata/user$i
 
#chmod 754 /userdata/user$i
 
echo "user$i"
 
let "i = i + 1" （或i=$（（$i＋1））
 
fi
 
done

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件


#!/bin/sh
 
#auto backup mysql
#wugk  2012-07-14
#PATH DEFINE
 
BAKDIR=/data/backup/mysql/`date +%Y-%m-%d`
MYSQLDB=www
MYSQLPW=backup
MYSQLUSR=backup
 
if[ $UID -ne 0 ];then
echo This script must use administrator or root user ,please exit!
sleep 2
exit 0
fi
 
if[ ! -d $BAKDIR ];then
mkdir -p $BAKDIR
else
echo This is $BAKDIR exists ,please exit ….
sleep 2
exit
fi
 
###mysqldump backup mysql
 
/usr/bin/mysqldump -u$MYSQLUSR -p$MYSQLPW -d $MYSQLDB >/data/backup/mysql/`date +%Y-%m-%d`/www_db.sql
 
cd $BAKDIR ; tar -czf  www_mysql_db.tar.gz *.sql
 
cd $BAKDIR ;find  . -name “*.sql” |xargs rm -rf[ $? -eq 0 ]&&echo “This `date +%Y-%m-%d` RESIN BACKUP is SUCCESS”
 
cd /data/backup/mysql/ ;find . -mtime +30 |xargs rm -rf

13.2 批量解压tar脚本，批量解压zip并且建立当前目录


#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `ls ${PATH1}/*`
do
tar xvf  $i  -C $PATH2
done

这个脚本是针对所有tar文件在一个目录，但是实际情况中，有可能在下级或者更深的目录，我们可以使用find查找


#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `find  $PATH1  -name  “*.tar” `
do
tar xvf  $i  -C $PATH2
done

如果是zip文件，例如123189.zip 132342.zip 等等批量文件，默认unzip直接解压不带自身目录，意思是解压123189.zip完当前目录就是图片，不能创建123189目录下并解压，可以用shell脚本实现


#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
cd $PATH1
 
for i in `find  . -name  ”*.zip”|awk  -F.  {print $2} `
do
 
mkdir -p   PATH2$i
 
unzip -o  .$i.zip  -d   PATH2$i
done

13.3 14.从1叠加到100


    echo $[$(echo +{1..100})]
    echo $[(100+1)*(100/2)]
    seq -s '+' 100 |bc

15.判断参数是否为空-空退出并打印null


    #!/bin/sh
    echo $1
    name=${1:?"null"}
    echo $name

16.循环数组


 for ((i=0;i<${#o[*]};i++))
    do
        echo ${o[$i]}
    done

17. 判断路径是否存在


if [ -d /root/desktop/text/123 ];then
        echo "找到了123"
        if [ -d /root/desktop/text ]
        then echo "找到了text"
        else echo "没找到text"
        fi
else echo "没找到123文件夹"
 
fi

18.找出出现次数最多

awk '{print $1}' file|sort |uniq -c|sort -k1r

19. 判断脚本参数是否正确

./test.sh -p 123 -p 3306 -h 127.0.0.1 -u root


#!/bin/sh
    if [ $# -ne 8 ];then
        echo "usage: $0 -u user -p passwd -p port -h host"
        exit 1
    fi
 
    while getopts :u:p:p:h: name
    do
        case $name in
        u)
            mysql_user=$optarg
        ;;
        p)
            mysql_passwd=$optarg
        ;;
        p)
            mysql_port=$optarg
        ;;
        h)
            mysql_host=$optarg
        ;;
        *)
            echo "usage: $0 -u user -p passwd -p port -h host"
            exit 1
        ;;
        esac
    done
 
    if [ -z $mysql_user ] || [ -z $mysql_passwd ] || [ -z $mysql_port ] || [ -z $mysql_host ]
    then
        echo "usage: $0 -u user -p passwd -p port -h host"
        exit 1
    fi
 
    echo $mysql_user $mysql_passwd $mysql_port  $mysql_host

20.打印表格


#!/bin/sh
    clear
    awk 'begin{
    print "+--------------------+--------------------+";
    printf "|%-20s|%-20s|\n","name","number";
    print "+--------------------+--------------------+";
    }'
    a=`grep "^[a-z]" a.txt |sort +1 -n |awk '{print $1":"$2}'`
    #cat a.txt |sort +1 -n |while read list
    for list in $a
    do
        name=`echo $list |awk -f: '{print $1}'`
        number=`echo $list |awk -f: '{print $2}'`
        awk 'begin{printf "|%-20s|%-20s|\n","'"$name"'","'"$number"'";
        print "+--------------------+--------------------+";
        }'
    done
    awk 'begin{
    print "              *** the end ***              "
    print "                                           "
    }'

21.判断日期是否合法


#!/bin/sh
    while read a
    do
      if echo $a | grep -q "-" && date -d $a +%y%m%d > /dev/null 2>&1
      then
        if echo $a | grep -e '^[0-9]\{4\}-[01][0-9]-[0-3][0-9]$'
        then
            break
        else
            echo "您输入的日期不合法，请从新输入！"
        fi
      else
        echo "您输入的日期不合法，请从新输入！"
      fi
    done
    echo "日期为$a"

22.打印日期段所有日期


#!/bin/bash
    qsrq=20010101
    js rq=20010227
    n=0
    >tmp
    while :;do
    current=$(date +%y%m%d -d"$n day $qsrq")
    if [[ $current == $js rq ]];then
        echo $current >>tmp;break
    else
        echo $current >>tmp
        ((n++))
    fi
    done
    rq=`awk 'nr==1{print}' tmp`

23.打印提示


cat <<eof
        #内容
eof

24. 取用户的根目录


#! /bin/bash
    while read name pass uid gid gecos home shell
    do
        echo $home
    done < /etc/passwd

25. 查找连续多行，在不连续的行前插入


#/bin/bash
    lastrow=null
    i=0
    cat incl|while read line
    do
    i=`expr $i + 1`
    if echo "$lastrow" | grep "#include <[a-z].h>"
    then
        if echo "$line" | grep -v  "#include <[a-z].h>"
        then
            sed -i ''$i'i\\/\/all header files are include' incl
            i=`expr $i + 1`
        fi
    fi
    lastrow="$line"
    done

26.查询其他数据库其它引擎


#/bin/bash
    path1=/data/mysql/data/
    dbpasswd=db123
    #myisam或innodb
    engine=innodb
 
    if [ -d $path1 ];then
 
    dir=`ls -p $path1 |awk '/\/$/'|awk -f'/' '{print $1}'`
        for db in $dir
        do
        number=`mysql -uroot -p$dbpasswd -a -s "$path1"mysql.sock -e "use ${db};show table status;" |grep -c $engine`
            if [ $number -ne 0 ];then
            echo "${db}"
            fi
        done
    fi

27.批量修改其他数据库引擎


#/bin/bash
    for db in test test1 test3
    do
        tables=`mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;show tables;" |awk 'nr != 1{print}'`
 
        for table in $tables
        do
            mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;alter table $table engine=myisam;"
        done
    done

28.将shell取到的数据插入mysql其他数据库


mysql -u$username -p$passwd -h$dbhost -p$dbport -a -e "
    use $dbname;
    insert into data values ('','$ip','$date','$time','$data')
    "

29.两日期间隔天数


d1=`date -d '20070409' +"%s"`
    d2=`date -d '20070304 ' +"%s"`
    d3=$(($d1 - $d2))
    echo $(($d3/60/60/24))

30. ssh批量执行命令


#版本1
    #!/bin/bash
    while read line
    do
    ip=`echo $line|awk '{print $1}'`
    passwd=`echo $line|awk '{print $2}'`
    ssh -n localhost "cat -"
    sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
    done<iplist.txt
 
 
#版本2
    #!/bin/bash
    iplist=`awk '{print $1}' iplist.txt`
    for ip in $iplist
    do
    passwd=`awk '/'$ip'/{print $2}' iplist.txt`
    sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
    done

31.多进程后台并发控制


#!/bin/bash
    test () {
        echo $a
        sleep 5
    }
    for a in `seq 1 30`
    do
        test &
        echo $!
        ((num++))
        if [ $num -eq 6 ];then
        echo "wait..."
        wait
        num=0
        fi
    done
    wait

32.恢复rm删除的文件

debugfs针对 ext2
ext3grep针对 ext3
extundelete针对 ext4


    df -t   # 首先查看磁盘分区格式
    umount /data/     # 卸载挂载,数据丢失请首先卸载挂载,或重新挂载只读
    ext3grep /dev/sdb1 --ls --inode 2         # 记录信息继续查找目录下文件inode信息
    ext3grep /dev/sdb1 --ls --inode 131081    # 此处是inode
    ext3grep /dev/sdb1 --rest ore-inode 49153  # 记录下inode信息开始恢复目录

this is a failure to select atom!

don't open vim mode

don't open vim-mode

instant vim not installed

it is pity that the vim-instant function can't be

installed correctly!

good night boy!

ace in beijin

参考<http://guoyueheng148.blog.163.com/blog/static/6016709120140209413480/>

转载于:https://www.cnblogs.com/pennli/p/8795106.html

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/繁依Fanyi0/article/detail/960451

shell常用脚本（转）

1、用shell脚本批量建立Linux用户

设置相同的密码

2、 编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。

4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告

6、自动ftp上传

7、编写shell脚本，获取本机的网络地址。比如：本机的ip地址是：

8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：

9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

11．设计一个shell程序，在每月第一天备份并压缩/etc目录的所有内容，存放在/root/bak目录里，且文件名为如下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

12．有一普通用户想在每周日凌晨零点零分定期备份/user/backup到/tmp目录下，该用户应如何做？

13．设计一个Shell程序，在/userdata目录下建立50个目录，即user1～user50，并设置每个目录的权限，其中其他用户的权限为：读；文件所有者的权限为：读、写、执行；文件所有者所在组的权限为：读、执行。

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件

13.2 批量解压tar脚本，批量解压zip并且建立当前目录

13.3

14.从1叠加到100

15.判断参数是否为空-空退出并打印null

16.循环数组

17. 判断路径是否存在

18.找出出现次数最多

19. 判断脚本参数是否正确

20.打印表格

21.判断日期是否合法

22.打印日期段所有日期

23.打印提示

24. 取用户的根目录

25. 查找连续多行，在不连续的行前插入

26.查询其他数据库 其它引擎

27.批量修改其他数据库引擎

28.将shell取到的数据插入mysql其他数据库

29.两日期间隔天数

30. ssh批量执行命令

31.多进程后台并发控制

32.恢复rm删除的文件

this is a failure to select atom!

don't open vim mode

don't open vim-mode

instant vim not installed

it is pity that the vim-instant function can't be

2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

26.查询其他数据库其它引擎