一次写shell脚本的经历记录——特殊字符惹的祸

╰+哭是因爲堅強的太久メ 2022-01-26 11:47 155阅读 0赞

> 本文首发于微信公众号“我的小碗汤”，扫码文末二维码即可关注，欢迎一起交流！

redis在容器化的过程中，涉及到纵向扩pod实例cpu、内存以及redis实例的maxmemory值，statefulset管理的pod需要重启。所以把redis集群的状态检查放到了健康检查中，依赖statefulset的原生能力（pod实例ready后才重启下一个，ready后endpoints controller将pod信息更新到endpoints资源对象中）,而没有在redis operator中写逻辑去判断。

需要用redis-cli -h \{redis实例IP\} ping查看redis是否正常，同时用redis-cli -c -h \{redis实例IP\} -a \{redis密码\} cluster info输出的信息解析cluster\_state的值是否为ok，以及cluster\_known\_nodes的值是否为1，判断redis集群是否正常；

如果redis集群刚创建，cluster\_known\_nodes为1，cluster\_state为fail;

如果redis集群为纵向扩容(扩CPU、内存)升级重启，cluster\_known\_nodes不为1，cluster\_state为ok时才认为集群正常，才能重启下一个pod。

因为涉及到字符串相等判断，所以用以下这样判断：

if [ "$cluster_known_nodes"x = "1"x  ]; then
    .....
    fi

但是判断一直有问题，如下图，在$a后面加个x，会变为在开头覆盖式的加a，结果就是判断结果不相等。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70]  
把redis-cli -c -h \{redis实例IP\} -a \{redis密码\} cluster info执行的结果重定向到文件里。

vi 1.txt查看文件，在vi里用set ff命令查看文件格式为unix，但是文件每一行后面都有一个^M的特殊字符，这就是问题所在了。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 1]

最主要是通过cat都看不出来特殊字符的存在。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 2]

手动把^M特殊字符删掉就好了。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 3]

网上说^M是windows格式文本文件的换行符\\r\\n，可以用dos2unix命令转为unix格式。但是执行cluster info命令全程在linux中操作，而且重定向到文件中set ff命令看到也是unix格式。这点还是很费解。

先用sed命令将^M换掉，试了sed 's/^M//g’没有用，所以选择用sed 's?\\r??g’替换，最终脚本如下。

if语句的\[\[\]\]需要用bash执行，用sh执行会报错\[\[: not found

#!/bin/bash
    
    #需要用redis-cli -h {redis实例IP} ping查看redis是否正常
    #用redis-cli -c -h {redis实例IP} -a {redis密码} cluster info输出
    #的信息解析cluster_state的值是否为ok，以及cluster_known_nodes的值是
    #否为1，判断redis集群是否正常；如果redis集群刚创建，cluster_known_nodes
    #为1，cluster_state为fail;如果redis集群为纵向扩容(扩CPU、内存)升级重启
    #cluster_known_nodes不为1，cluster_state为ok时才认为集群正常，才能重启
    #下一个pod，改健康检查脚本旨在维护升级时redis集群状态，不在operator中维护
    # 利用好statefulset一个实例ready后重启下一个pod的特性
    
    pingres=$(redis-cli -h $(hostname) ping)
    
    # cluster_state:ok
    # cluster_slots_assigned:16384
    # cluster_slots_ok:16384 
    # cluster_slots_pfail:0 
    # cluster_slots_fail:0 
    # cluster_known_nodes:6 
    # cluster_size:3 
    # cluster_current_epoch:15 
    # cluster_my_epoch:12 
    # cluster_stats_messages_sent:270782059
    # cluster_stats_messages_received:270732696
    pingres=$(echo "${pingres}" | sed 's?\r??g')
    if [[ "$pingres"x = "PONG"x ]]; then
        clusterinfo=$(redis-cli -c -h ${ PODIP} cluster info)
        # redis-cli -c -h ${PODIP} cluster info output info include ^M(win \n\r) char lead to error, so use sed 's?\r??g'
        clusterknownnodes=$(echo "${clusterinfo}" | grep cluster_known_nodes | sed 's?\r??g' | awk -F ':' '{print $2}')
        clusterstate=$(echo "${clusterinfo}" | grep cluster_state | sed 's?\r??g' | awk -F ':' '{print $2}')
    
        echo "clusterknownnodes: ${clusterknownnodes} --- clusterstate: ${clusterstate}"
        # [[ need run this script use /bin/bash instead of /bin/sh
        # if语句的[[]]需要用bash执行，用sh执行会报错[[: not found
        if [[ "${clusterknownnodes}"x = "1"x && "${clusterstate}"x = "ok"x ]]; then
            echo "--1--"
            exit 0
        elif [[ "${clusterknownnodes}"x != "1"x && "${clusterstate}"x = "ok"x ]]; then
            echo "--2--"
            exit 0
        # create redis cluster
        elif [[ "${clusterknownnodes}"x = "1"x && "${clusterstate}"x != "ok"x ]]; then
            echo "--3--"
            exit 0
        elif [[ "${clusterknownnodes}"x != "1"x && "${clusterstate}"x != "ok"x ]]; then
            echo "--4--"
            exit 1
        else
            echo "--5--"
            exit 1
        fi
    else
        exit 1
    fi

一般这种怪异的问题都是脚本里有特殊字符造成的，可以在脚本中set list显示特殊字符。当然windows上编辑过的脚本在linux上运行一般dos2unix test.sh这样转换一下最好，免的遇到麻烦。

## 参考： ##

shell中括号的特殊用法 linux if多条件判断  
https://www.cnblogs.com/jjzd/p/6397495.html

运行shell脚本时报错"\[\[ : not found"解决方法  
https://www.cnblogs.com/han-1034683568/p/7211392.html

--------------------

# 作者简洁 #

> 作者：小碗汤，一位热爱、认真写作的小伙，目前维护原创公众号：『我的小碗汤』，专注于写golang、docker、kubernetes等知识等提升硬实力的文章，期待你的关注。 转载说明：务必注明来源（注明：来源于公众号：我的小碗汤， 作者：小碗汤）

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70]: /images/20220126/b986bb5fa5ed4e40bdd47b96a8284abf.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 1]: /images/20220126/6950d6a38e824df4b773e342fd550a6b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 2]: /images/20220126/721bb39fa8124343952bee40b9b121a4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xsODM3NDQ4Nzky_size_16_color_FFFFFF_t_70 3]: /images/20220126/bc2e58a5d74e427a941886e3aa06e6b2.png