关键词:DMDRS、MySQL连接卡住、pstack、show master status、commit卡住、db_receive_timeout
影响范围
CPT模块、EXEC模块
故障现象
源数据库为MySQL时,源DMDRS启动卡住(或其他卡住现象,如状态无变化等)。
使用pstack命令在DMDRS运行目录打印函数堆栈进行分析。
说明如果DMDRS运行的DMDRS为release版本,可以将symbols目录下符号文件拷贝至当前运行目录,便于分析堆栈。
cd /opt/dmdrs/bin #进入DMDRS进程运行目录 pstack 进程id #DMDRS进程id
打印的函数堆栈如下,显示卡在MySQL客户端接口函数中,等待数据库返回消息(vio_read->recv 调用)。
原因分析
查询数据库进程连接会话,图中ID为808/809的会话卡住,正在执行show master status命令,与程序逻辑一致。
会话显示进程795(root用户)正在执行一个commit命令,并且阻塞时间较长,状态显示为waiting for handler commit,事务卡在提交阶段没有完成。
提交操作需要写binlog,导致DMDRS执行show master status状态卡住。
单独打开MySQL客户端,执行show master status命令同样卡住,由此验证该问题由数据库提交卡住引起,进而导致DMDRS执行show master status卡住。
需进一步排查数据库commit卡住的原因,如磁盘IO问题、binlog文件损坏和磁盘空间不足等。
解决方法
在源DMDRS或目标DMDRS中设置db_receive_timeout参数。该参数用于配置DMDRS等待数据库返回消息的超时时间,单位为秒。如果超过该时间数据库仍未返回消息,则断开连接,DMDRS可及时退出进程或进行连接重试。参数详细说明请参见《DMDRS参考手册》。
说明本方式适用于连接断开后可正常重连的场景,用于避免DMDRS长时间无响应。若数据库持续卡住,应优先排查并解决数据库侧问题。
效果验证
配置等待数据库返回消息的超时时间后,DMDRS不会一直卡在启动阶段,连接会主动断开,并进行错误提示。
如果你在使用AI助手时想了解DMDRS连接MySQL卡住的原因和解决方法,这篇文章可以作为参考。
文章
阅读量
获赞
