【工具】

SystemTap是Linux下的動態(tài)跟蹤工具，可以方便的監(jiān)控、跟蹤運行中的程序或Linux內核操作，我們通過寫SystemTap腳本（與C語言類似），編譯為內核模塊，然后加載到內核中運行，它帶來的性能損耗比較小。

【兩個應用舉例】

一、 分析SQL語句在執(zhí)行各個階段的消耗

比如我們想統(tǒng)計一句SQL在解析階段的執(zhí)行時間，可以在mysqld進程的對應parse_sql函數(shù)上加探測點，統(tǒng)計函數(shù)執(zhí)行時間。

腳本如下：

示例如下，當前QPS約1.6W，包含了SQL執(zhí)行過程中解析、redo、binlog、undo、網(wǎng)絡、IO讀、IO寫上的消耗，由于涉及的函數(shù)較多，這部分后續(xù)還需要整理完善。

也可以用來分析一句SQL的執(zhí)行性能：

二、SQL執(zhí)行時間統(tǒng)計分布

對于應用來說，主要關心數(shù)據(jù)庫的吞吐量和響應時間，下面從應用負載的角度去衡量，服務器上當前執(zhí)行SQL語句的性能分布情況。

下圖是1秒聚合的SQL語句的執(zhí)行時間分布圖，表示大部分SQL的執(zhí)行時間在128us以下：

【性能開銷】

用sysbench做了簡單壓測，并發(fā)8線程時，運行stap腳本QPS從3.5W降到3.3W，性能損耗約6%；當并發(fā)32線程時，運行stap腳本QPS從9W降到7W，性能損耗約22%

【應用場景】

Systemtap功能非常強大，可以對mysqld進程下近25000個函數(shù)以及kernel下35000個函數(shù)自定義腳本進行跟蹤統(tǒng)計，可用來分析內存、CPU、IO、網(wǎng)絡等各種問題。

SystemTap的使用可以參考下面的文章：

1、聽阿里云CDN安防技術專家金九講SystemTap使用技巧

https://yq.aliyun.com/articles/174916?utm_content=m_28902

2、巧用Systemtap注入延遲模擬IO設備抖動

http://blog.yufeng.info/archives/2935

3、MYSQL數(shù)據(jù)庫網(wǎng)卡軟中斷不平衡問題及解決方案