應用連接超時排查DB MySQL

【問題概述】10：26分，應用超時報錯如下：

[2020-04-22 10:25:50,928] [ERROR] [DruidPooledStatement:357] [DubboServerHandler-192.168.xx.xx:20881-threa
d-199] -- [TID: 668796908.406.15875214226879429]   CommunicationsException, druid version 1.1.10, jdbcUrl :
 jdbc:mysql://rm-rds-instanceid.mysql.rds.aliyuncs.com:3306/xxxxxx?useUnicode=true&characterEncodin
g=utf-8&autoReconnect=true&allowMultiQueries=true, testWhileIdle true, idle millis 928197, minIdle 1, pooli
ngCount 4, timeBetweenEvictionRunsMillis 60000, lastValidIdleMillis 928197, driver com.mysql.jdbc.Driver, e
xceptionSorter com.alibaba.druid.pool.vendor.MySqlExceptionSorter
[2020-04-22 10:25:50,929] [ERROR] [DruidDataSource:1602] [DubboServerHandler-192.168.xx.xxx:20881-thread-19
9] -- [TID: 668796908.406.15875214226879429]   discard connection
com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

首先查看網絡監控，這里忽略，并沒有看到網絡抖動的情況，查看mysql服務器，超時時間前后也沒有明顯的性能異常，那么怎么辦？

    首先網絡監控屬于粗粒度的，粒度低的抖動網絡監控根本檢測不到，并不能看到超時的原因，那么我們抓取tcpdump來進行分析

建議循環抓包看下

Linux 固定大小循環抓包:

1、打開一個到 ECS 的 ssh 連接，并以 root 身份登錄。

在該窗口運行下列命令（下面的命令將抓包結果保存在 20 個 50 MB 文件中，循環使用）

tcpdump -i any -s 0 -w /var/tmp/rds.cap -C 50 -W 20 port RDS實例端口 or 53

2、復現問題。

3、使用 ctrl + c 終止上述窗口 的 tcpdump 命令。

下載 /var/tmp/rds.cap* 并提供給我們（如果抓包文件過大，建議您放置在 Web 服務器的子目錄下，以便我們下載）。

注意： 網絡抓包可能會產生大尺寸文件，建議考慮根據 ECS 磁盤空間使用情況合理選擇保存目錄。