正文 

当前位置： 首页 > java > java教程

mysql几种调式分析利器(代码片段)

lonelyxmas lonelyxmas     2022-12-11     212

关键词：

原文:MySQL 几种调式分析利器

目录

pstack

获取堆栈信息
问题线程的定位
负载较低

mysql_pid=4522
pstack $mysql_pid>pstack.info

pt-pmp对堆栈信息排序
pt-pmp pstack.info | less

也可以直接执行pt-pmp
pt-pmp --pid 4522
如

     10 __io_getevents_0_4(libaio.so.1),LinuxAIOHandler::collect(os0file.cc:2502),LinuxAIOHandler::poll(os0file.cc:2648),os_aio_linux_handler(os0file.cc:2704),os_aio_handler(os0file.cc:2704),fil_aio_wait(fil0fil.cc:5835),io_handler_thread(srv0start.cc:311),start_thread(libpthread.so.0),clone(libc.so.6)
      3 pthread_cond_wait,wait(os0event.cc:165),os_event::wait_low(os0event.cc:165),srv_worker_thread(srv0srv.cc:2520),start_thread(libpthread.so.0),clone(libc.so.6)
      2 pthread_cond_wait,native_cond_wait(thr_cond.h:140),my_cond_wait(thr_cond.h:140),inline_mysql_cond_wait(thr_cond.h:140),Per_thread_connection_handler::block_until_new_connection(thr_cond.h:140),handle_connection(connection_handler_per_thread.cc:329),pfs_spawn_thread(pfs.cc:2190),start_thread(libpthread.so.0),clone(libc.so.6)

gdb

堆栈跟踪
等待分析
侵入性大

mysqld_pid 4522
gdb -p $mysqld_pid
(gdb) info thread 显示运行的所有线程
(gdb) thread 4 切换到某个线程
bt 显示调用栈
如

SELECT B.THREAD_OS_ID AS mysqld_os_thread_id,A.ID as processlist_id,A.USER,A.HOST,A.DB,A.COMMAND,A.TIME,A.STATE,LEFT(A.INFO,150) AS statement FROM information_schema.PROCESSLIST A INNER JOIN performance_schema.threads B on A.ID=B.PROCESSLIST_ID where A.id !=connection_id();

+---------------------+----------------+-------+-----------+------+---------+------+---------------------------------+----------------------------------------+
| mysqld_os_thread_id | processlist_id | USER | HOST | DB | COMMAND | TIME | STATE | statement |
+---------------------+----------------+-------+-----------+------+---------+------+---------------------------------+----------------------------------------+
| 27015 | 4 | admin | localhost | NULL | Sleep | 2597 | | NULL |
| 28252 | 6 | admin | localhost | test | Query | 1166 | Waiting for table metadata lock | alter table test.test_1 drop index idx |
+---------------------+----------------+-------+-----------+------+---------+------+---------------------------------+----------------------------------------+
(gdb) thread 4
[Switching to thread 4 (Thread 0x7f8d107f8700 (LWP 28252))]
#0 0x00007f8d3b147d12 in [email protected]@GLIBC_2.3.2 () from /lib64/libpthread.so.0

bt
........
#4 MDL_wait::timed_wait (this=0x7f8ce4000958, owner=0x7f8ce40008c0, abs_timeout=0x7f8d107f37e0, set_status_on_timeout=false,
wait_state_name=) at /export/home/pb2/build/sb_0-27500212-1520171728.22/mysql-5.7.22/sql/mdl.cc:1861

  • processlist_id 为6（ os中 mysqld的线程id为28252）正在等待MDL 元数据锁，通过gdb堆栈跟踪发现，该连接正在执行的内部函数为 pthread_cond_timedwait

注意

  • pstack 和gdb都可以获取堆栈信息，区别是gdb是交互式的（需要手动退出），pstack是快照形式（执行3s自动退出）
  • 对mysqld使用gdb后，已经建立的连接无法再执行语句，新连接无法建立

技术图片
技术图片

strace

查看进程的系统调用信息
负载较高

查看系统调用
strace -cp $mysqld_pid

查看执行语句
mysqld_pid=4522
strace -f -F -ff -o mysqld-strace -s 1024 -p $mysqld_pid
find ./ -name "mysqld-strace" -type f -print |xargs grep -n "SELECT.FROM"

查看读写的文件
strace -o /tmp/strace_output.txt -T -tt -f -e trace=read,open -p “mysqld_pid”

perf

进程内部函数调用情况
负载较低

mysqld内部函数整体消耗情况
perf top -p 4522
如

Samples: 66  of event 'cpu-clock', Event count (approx.): 6520074                                                                 
Overhead  Shared Object       Symbol                                                                                              
  18.42%  mysqld              [.] sync_array_print_long_waits_low
  10.83%  [kernel]            [k] _raw_spin_unlock_irqrestore
   7.88%  libaio.so.1.0.1     [.] 0x0000000000000645
   7.30%  [kernel]            [k] finish_task_switch
   6.84%  [kernel]            [k] system_call_after_swapgs
   6.22%  [kernel]            [k] aio_read_events
   6.02%  libc-2.17.so        [.] __memset_sse2

记录所有内部函数调用
该命令会输出记录到perf.data中
perf record -p 4522

解析并查看perf.data内容
perf script -i perf.data>perf.log && less perf.log

参考

MySQL所有操作hang住问题的故障排查
linux strace追踪mysql执行语句 （mysqld --debug)
linux 调试利器gdb, strace, pstack, pstree, lsof
Debugging a MySQL Server
What to Do If MySQL Keeps Crashing

fprobe参数-e(代码片段)

网络流量分析利器-可视化网络-netflow【1】-基础原理网络流量分析利器-可视化网络-netflow【2】-CiscoNetFlow工作原理介绍及配置网络流量分析利器-可视化网络-netflow【3】-netflow版本5和版本9区别网络流量分析利器-可视化网络-netflow【... 查看详情

mysql--❤️‍几种启动和停止服务的风险分析☀️linux生产环境运维必备❤️‍《⭐建议收藏⭐》(代码片段)

...~【学习背景】本文对Linux下启动和停止mysql服务最常用的几种方式进行讲解：（1）mysqld（2）mysqld_safe（3）mysql.server（4）mysqladmin关于这几种文件和命令对m 查看详情

发现了一个好用到爆的数据分析利器(代码片段)

作者|俊欣来源| 关于数据分析与可视化小编最近碰上了一个数据分析利器，可以将我们需要的数据展示在网页上，并且进行相对深度的数据分析与挖掘，所以就打算借此机会和大家分享一下。关于streamlit-aggrid我们知... 查看详情

集八自带各种数据拟合分析的可视化利器seaborn(代码片段)

　　本文的主要目的是记住最主要的函数，具体的用法还得查API文档。　　　首先导入包：%matplotlibinlineimportnumpyasnpimportpandasaspdfromscipyimportstats,integrateimportmatplotlib.pyplotaspltimportseabornassnssns.set(color_codes=True)np.random 查看详情

数据分析利器jupyternotebook入门手册(代码片段)

公众号：尤而小屋作者：Peter编辑：Peter大家好，我是Peter~很多读者问过我，Peter文章中的Python代码都是用的什么编辑器写的？今天就公开啦：JupyterNotebook，没有Pycharm，没有Vscode，没有Sublimete... 查看详情

死锁问题分析的利器——valgrind的drd和helgrind(代码片段)

    在《DllMain中不当操作导致死锁问题的分析--死锁介绍》一文中，我们介绍了死锁产生的原因。一般来说，如果我们对线程同步技术掌握不牢，或者同步方案混乱，极容易导致死锁。本文我们将介绍如何使用va... 查看详情

androidstudio3.0profiler性能分析利器(代码片段)

1:AndroidProfiler的是使用流程：1.点击工具栏的图标即可打开在AndroidProfiler窗口的顶部，如图所示，选择设备①和你想要配置的app进程②当我们连接一个设备后，打开AndroidProfiles运行我们的应用程序时，它会默认... 查看详情

数据竞争（datarace）问题分析的利器——valgrind的helgrind(代码片段)

    数据竞争（datarace）是指在非线程安全的情况下，多线程对同一个地址空间进行写操作。一般来说，我们都会通过线程同步方法来保证数据的安全，比如采用互斥量或者读写锁。但是由于某些笔误或者设... 查看详情

canal增量数据同步利器介绍与安装(代码片段)

文章目录Canal增量数据同步利器Canal介绍Canal应用场景Canal原理MySQL主从复制原理Canal工作原理Canal安装步骤1：MySQLBin-log开启步骤2：Canal安装Canal增量数据同步利器Canal介绍canal主要用途是基于MySQL数据库增量日志解析，并... 查看详情

python性能分析利器pyinstrument讲解(代码片段)

...，更能够体现你的技术。最近发现很多小伙伴在性能分析的过程中都是手动打印运行时间的方式来统计代码耗时的：importdatetimestart=datetime.datetime.now()b=[iforiinrange(10000000)]#生成长度为一千万的列表end=datetime.datetime.... 查看详情

java可调式apex批量锅炉(代码片段)

查看详情

几种排序算法分析(代码片段)

这里写目录标题1.1排序的定义1.2术语说明算法总结1.3算法分类1.4比较和非比较的区别1.5.1、冒泡排序（BubbleSort）1.5.2算法描述1.5.4代码实现1.6.1算法分析1.6.4动图演示3、插入排序（InsertionSort）3.1算法描述3.2动图演示... 查看详情

几种排序算法分析(代码片段)

这里写目录标题1.1排序的定义1.2术语说明算法总结1.3算法分类1.4比较和非比较的区别1.5.1、冒泡排序（BubbleSort）1.5.2算法描述1.5.4代码实现1.6.1算法分析1.6.4动图演示3、插入排序（InsertionSort）3.1算法描述3.2动图演示... 查看详情

智能驾驶数据后处理分析利器—intework-vda(代码片段)

...实车数据后，按标准和法规进行测试场景提取和测试数据分析。调查显示绝大部分智能驾驶研发厂商以传统的手动分析或借助非专业工具进行半自动处理数据为主，测试分析工作效率极低。由于路试并非按照预定工况进行顺序驾... 查看详情

分析代码的利器-ctags

比方我们在分析代码的时候，须要看某一个方法或类的定义，我们须要临时跳转过去看一下，然后还能非常方便的回来。这时候ctags就派上用场了。比方你有一个src目录，先用ctags对其生成索引：ctags-Rsrc然后你会发如今当前文件... 查看详情

kubeadm工作原理-kubeadminit原理分析-kubeadmjoin原理分析(代码片段)

kubeadm工作原理-kubeadminit原理分析-kubeadmjoin原理分析。kubeadm是社区维护的Kubernetes集群一键部署利器，使用两条命令即可完成k8s集群中master节点以及node节点的部署，其底层原理是利用了k8sTLSbootstrap特性。kubeadm概述kubeadm是社区维护... 查看详情

facebook开源时序利器-kats(代码片段)

...使用、可扩展和通用的框架，用于在Python中进行时序分析，由Facebook开源。TimeSeriesData是Kats中表示单变量和多变 查看详情

facebook开源时序利器-kats(代码片段)

...使用、可扩展和通用的框架，用于在Python中进行时序分析，由Facebook开源。TimeSeriesData是Kats中表示单变量和多变 查看详情