shell编程(八)

shell编程(八)

evobot 886 2018-07-20
  1. expect脚本同步文件
  2. expect脚本指定host和要同步的文件
  3. 构建文件分发系统
  4. 批量远程执行命令

expect脚本同步文件

  • 在expect中实现使用rsync自动同步文件,脚本的内容如下:

    #!/usr/bin/expect
    
    set passwd "123456"
    spawn rsync -av root@192.168.67.130:/tmp/12.txt /tmp
    expect {
    "yes/no" {send "yes\r"}
    "password:" { send "$passwd\r" }
    }
    expect eof
    

    执行结果:

    [root@load-balancer sbin]# ./sync.expect 
    spawn rsync -av root@192.168.67.130:/tmp/12.txt /tmp
    root@192.168.67.130's password: 
    receiving incremental file list
    12.txt
    
    sent 43 bytes  received 96 bytes  92.67 bytes/sec
    total size is 5  speedup is 0.04
    

    这里最后使用expect eof是为了防止文件还没传输完毕脚本就执行结束。

expect脚本指定host及要同步的文件

  • 对某个命令设置超时时间,只需要在send的命令之后增加一行set timeout -1表示永久不超时,或者set timeout 3`表示三秒后超时;

  • 指定host及需要同步的文件的脚本如下:

    #!/usr/bin/expect
    
    set passwd "123456"
    set host [lindex $argv 0]
    set file [lindex $argv 1]
    spawn rsync -av $file root@$host:$gile
    expect {
    "yes/no" { send "yes\r" }
    "password" { send "$passwd\r" }
    }
    expect eof
    
    

    执行结果:

    [root@load-balancer sbin]# ./host.expect 192.168.67.130 "/tmp/12.txt"
    spawn rsync -av /tmp/12.txt root@192.168.67.130:/tmp/12.txt
    root@192.168.67.130's password: 
    sending incremental file list
    
    sent 44 bytes  received 12 bytes  112.00 bytes/sec
    total size is 5  speedup is 0.09
    
    

    需要注意的是,这种方式一次只能同步一个文件。


构建文件分发系统

  • 需求:

    对于线上业务来说,会经常更新网站代码或者配置文件,而且是大量服务器需要更新,少则几台,多则几十台,所以自动同步文件非常重要;

  • 实现:

    需要一台模板机器,将要分发的文件准备好,然后使用expect脚本批量把要同步的文件分发到目标机器上即可。

  • 核心命令:

    rsync -av --files-from=list.txt / root@host:/

    --files-from指定保存有文件路径的文件,list.txt内保存需要同步的文件路径,文件路径必须使用绝对路径。

  • 脚本如下:

    #!/usr/bin/expect
    
    set passwd "123456"
    set host [lindex $argv 0]
    set file [lindex $argv 1]
    
    # 源目录为根目录,目的目录也是根目录
    spawn rsync -av --files-from=$file / root@$host:/
    expect {
    "yes/no" { send "yes\r" }
    "password" { send "$passwd\r" }
    }
    expect eof
    
    

    list.txt的内容如下:

    /tmp/12.txt
    # 目录内的文件都会自动同步
    /usr/local/sbin/
    

    源目录的文件所在的目录,在目标机器上也必须有相同的路径和目录存在,如果目标机器没有相同的目录,可以在rsync中使用rsync -avR来自动创建不存在的目录。

  • 存在多台服务器需要分发文件的时候,还需要创建一个ip.txt的文件来存储需要更新的服务器的IP地址,内容如下:

    192.168.67.130
    192.168.67.131
    127.0.0.1
    
  • 然后创建rsync.sh文件,用来遍历ip地址并执行expect脚本:

    #!/bin/bash
    
    for ip in `cat /tmp/ip.txt`;do
        ./rsync.expect $ip /tmp/list.txt
    done
    
    
  • rsync.expect增加执行权限,然后执行rsync.sh脚本,查看结果:

    $ bash -x rsync.sh 
    ++ cat /tmp/ip.txt
    + for ip in '`cat /tmp/ip.txt`'
    + ./rsync.expect 192.168.67.130 /tmp/list.txt
    spawn rsync -avR --files-from=/tmp/list.txt / root@192.168.67.130:/
    root@192.168.67.130's password: 
    building file list ... done
    tmp/
    usr/local/sbin/command.expect
    usr/local/sbin/host.expect
    usr/local/sbin/login.expect
    usr/local/sbin/lvs_dr.sh
    usr/local/sbin/lvs_nat.sh
    usr/local/sbin/para.expect
    usr/local/sbin/rsync.expect
    usr/local/sbin/rsync.sh
    usr/local/sbin/sync.expect
    
    sent 3,674 bytes  received 190 bytes  2,576.00 bytes/sec
    total size is 3,457  speedup is 0.89
    + for ip in '`cat /tmp/ip.txt`'
    + ./rsync.expect 127.0.0.1 /tmp/list.txt
    spawn rsync -avR --files-from=/tmp/list.txt / root@127.0.0.1:/
    root@127.0.0.1's password: 
    building file list ... done
    
    sent 400 bytes  received 12 bytes  824.00 bytes/sec
    total size is 3,457  speedup is 8.39
    
    

批量远程执行命令

  • 在远程分发文件或者配置后,可能还需要执行一些重启服务之类的动作,所以还需要能够批量自动化的远程执行命令。

  • expect实现功能脚本exe.expect内容如下,与单台机器执行命令相同:

    #!/usr/bin/expect
    
    set host [lindex $argv 0]
    set passwd "123456"
    set cmd [lindex $argv 1]
    
    spawn ssh root@$host
    expect {
    "yes/no" { send "yes\r" }
    "password" { send "$passwd\r" }
    }
    expect "]*"
    send "$cmd\r"
    expect "]*"
    send "exit\r"
    
    
  • 接着创建ext.sh文件,用来循环IP并执行expect脚本:

    #!/bin/bash
    
    for ip in `cat /tmp/ip.list`; do
        ./exe.expect $ip "hostname"
    done
    
  • 为脚本增加执行权限后,执行测试:

    [root@load-balancer sbin]# bash -x exe.sh 
    ++ cat /tmp/ip.txt
    + for ip in '`cat /tmp/ip.txt`'
    + ./exe.expect 192.168.67.130 hostname
    spawn ssh root@192.168.67.130
    root@192.168.67.130's password: 
    Last login: Sat Jul 21 01:29:59 2018 from 192.168.67.1
    [root@rs2 ~]# hostname
    rs2
    [root@rs2 ~]# + for ip in '`cat /tmp/ip.txt`'
    + ./exe.expect 127.0.0.1 hostname
    spawn ssh root@127.0.0.1
    root@127.0.0.1's password: 
    Last failed login: Sat Jul 21 01:27:33 CST 2018 from localhost on ssh:notty
    There were 2 failed login attempts since the last successful login.
    Last login: Sat Jul 21 00:41:13 2018 from 192.168.67.1
    [root@load-balancer ~]# hostname
    load-balancer
    
    

shell多线程:http://blog.lishiming.net/?p=448



# Shell