linux 死锁排查以及线程信息打印

脚本名称，gstack.sh

#!/bin/sh

if test $# -ne 1; then
    echo "Usage: `basename $0 .sh` <process-id>" 1>&2
    exit 1
fi

if test ! -r /proc/$1; then
    echo "Process $1 not found." 1>&2
    exit 1
fi

# GDB doesn't allow "thread apply all bt" when the process isn't
# threaded; need to peek at the process to determine if that or the
# simpler "bt" should be used.

backtrace="bt"
if test -d /proc/$1/task ; then
    # Newer kernel; has a task/ directory.
    if test `/bin/ls /proc/$1/task | /usr/bin/wc -l` -gt 1 2>/dev/null ; then
        backtrace="thread apply all bt"
    fi
elif test -f /proc/$1/maps ; then
    # Older kernel; go by it loading libpthread.
    if /bin/grep -e libpthread /proc/$1/maps > /dev/null 2>&1 ; then
        backtrace="thread apply all bt"
    fi
fi

GDB=${GDB:-/usr/bin/gdb}

# Run GDB, strip out unwanted noise.
# --readnever is no longer used since .gdb_index is now in use.
$GDB --quiet -nx $GDBARGS /proc/$1/exe $1 <<EOF 2>&1 | 
set width 0
set height 0
set pagination no
$backtrace
EOF
/bin/sed -n \
    -e 's/^\((gdb) \)*//' \
    -e '/^#/p' \
    -e '/^Thread/p'

gstack.sh 脚本，可以查看进程的 线程信息。

例如： server1 的进程id 是 9900

执行下面的命令，就可以查看 9900 进程的线程信息了

sh  gstack.sh  9900

执行下面的命令，可以将 进程的线程信息，写入到指定文本(a1.log)

sh  gstack.sh  9900  >> a1.log

脚本名称：watch_dead_lock.sh 

#!/bin/bash  
  
# 设置日志文件名  
LOG_FILE="a1.log"  
# 设置要执行的命令模板  
COMMAND_TEMPLATE="sh gstack.sh %s >> $LOG_FILE"  
# 设置追加到日志文件的分隔符  
SEPARATOR="--------------------------------------\n"  
# 设置执行次数  
COUNT=10000  
  
# 检查是否提供了参数  
if [ "$#" -ne 1 ]; then  
    echo "Usage: $0 <number>"  
    exit 1  
fi  
  
# 获取外部输入的数字  
NUMBER=$1  
  
# 设置要执行的命令  
COMMAND=$(printf "$COMMAND_TEMPLATE" "$NUMBER")  
  
# 初始化计数器  
COUNTER=0  
  
# 循环执行命令  
while [ $COUNTER -lt $COUNT ]; do  
    # 打印当前是第几次执行  
    echo "正在执行第 $((COUNTER+1)) 次..."  
      
    # 执行命令  
    eval $COMMAND  
      
    # 追加分隔符到日志文件  
    echo -e "$SEPARATOR$SEPARATOR" >> $LOG_FILE  
      
    # 打印分隔符到屏幕（可选）  
    echo "--------------------------------------"  
      
    # 增加计数器  
    ((COUNTER++))  
      
    # 等待10秒  
    sleep 4  
done  
  
echo "执行完成，共执行了 $COUNT 次命令。"

watch_dead_lock.sh 可以定期打印线程的 gstack 信息，用于排查死锁等情况

例如，下面的命令就是 定期打印 9900 的线程信息。这个脚本要配合gstack.sh脚本来执行

sh watch_dead_lock.sh 9900