整合營銷服務商
電腦端+手機端+微信端=數據同步管理
免費咨詢熱線：
電腦端+手機端+微信端=數據同步管理
免費咨詢熱線：
今天主要介紹如何用slowquery工具來配置郵件告警，僅供參考。
進入到slowquery/alarm_mail/目錄里，修改sendmail.php配置信息。
<?php
$get_mail_content=get_include_contents('get_top100_slowsql.php');
function get_include_contents($filename) {
if (is_file($filename)) {
ob_start();
include $filename;
$contents=ob_get_contents();
ob_end_clean();
return $contents;
}
return false;
}
$smtpserver="xx.xxcom";//SMTP服務器
$smtpserverport=587;//SMTP服務器端口
$smtpusermail="xx.xx.xx";//SMTP服務器的用戶郵箱
$smtpemailto='huangwbxx';//發送給誰
$smtpuser="xunjian";//SMTP服務器的用戶帳號，注：部分郵箱只需@前面的用戶名
$smtppass="xxxxx";//SMTP服務器的授權碼
$mailtitle='【告警】慢查詢報警推送TOP100條,請及時優化.';
$mailcontent='下面的慢查詢語句或許會影響到數據庫的穩定性和健康性，請您在收到此郵件后及時優化語句或代碼。數據庫的穩定性需要大家的共同努力,感謝您的配合！<br><br>' .$get_mail_content .'<br><
br>該郵件由slowquery系統自動發出，請勿回復，語句詳細執行情況請登錄<a href="http://1xx.xx.xx.xx/slowquery/slowquery.php">slowquery系統查看.<br><br>';
system("./sendEmail -f $smtpusermail -t $smtpemailto -s $smtpserver:$smtpserverport -u '$mailtitle' -o message-charset=utf8 -o message-content-type=html -m '$mailcontent' -xu $smtpusermail
-xp '$smtppass'");
?>每隔3小時慢查詢報警推送一次:
0 */3 * * * cd /var/www/html/slowquery/alarm_mail;/usr/bin/php /var/www/html/slowquery/alarm_mail/sendmail.php > /dev/null 2>&1
可以看到郵件內容如下：
1、PHP Warning: mysqli_connect(): Headers and client library minor version mismatch. Headers:50550 Library:50637 in /var/www/html/slowquery/config.php on line 5
可以發現header version=> 5.5.47-MariaDB這個是個奇葩，版本號不一樣，怪不得報錯了。考慮當前安裝的是php-mysql驅動，而當前的php版本比較新，于是想到這個奇葩是不是因為驅動版本較低生成的，嘗試：先卸載較低版本的php-mysql驅動，再升級安裝新版的php-mysqlnd驅動。
yum remove php-mysql yum install php-mysqlnd
重啟下httpd和mysql服務：
systemctl restart httpd systemctl restart mysqld php -i|grep Client
版本全統一了，問題解決
2、invalid SSL_version specified at /usr/share/perl5/vendor_perl/IO/Socket/SSL.pm line 415.
centos7.2默認是 perl的版本是5.16，centos6.5的是5.10，后來把7的版本換成5.10，就可以正常發郵件了。
解決：
wget http://www.cpan.org/src/5.0/perl-5.10.0.tar.gz tar -zxf perl-5.10.0.tar.gz cd perl-5.10.0 ./configure.gnu -des -Dprefix=/usr/local/perl echo $? make && make install mv /usr/bin/perl /usr/bin/perl.bak ln -s /usr/local/perl/bin/perl /usr/bin/perl perl -v
到這里關于mysql 慢查詢分析的部分就結束了，后面會更多分享一些優化和設計方面的內容，感興趣的朋友可以關注下~
html轉為pdf的組件有很多，但是還沒有哪一款能達到這個效果，其只要原因是wkhtmltopdf使用webkit網頁渲染引擎開發的用來將 html轉成 pdf的工具，可以跟多種腳本語言進行集成來轉換文檔。但是就使用簡便性來說還是itext等組件占據優勢，如果你要轉換格式有比較高的要求，那么wkhtmltopdf絕對是不二之選！
下載路徑
官網地址 wkhtmltopdf.org/
github地址 github.com/wkhtmltopdf…
使用方法
java調用demo
public class HtmlToPdfInterceptor extends Thread { private InputStream is; public HtmlToPdfInterceptor(InputStream is){ this.is=is; } public void run(){ try{ InputStreamReader isr=new InputStreamReader(is, "utf-8"); BufferedReader br=new BufferedReader(isr); String line=null; while ((line=br.readLine()) !=null) { System.out.println(line.toString()); //輸出內容 } }catch (IOException e){ e.printStackTrace(); } }}public class HtmlToPdf { //wkhtmltopdf在系統中的路徑 private static final String toPdfTool="D:\wkhtmltopdf\bin\wkhtmltopdf.exe"; /** * html轉pdf * @param srcPath html路徑，可以是硬盤上的路徑，也可以是網絡路徑 * @param destPath pdf保存路徑 * @return 轉換成功返回true */ public static boolean convert(String srcPath, String destPath){ File file=new File(destPath); File parent=file.getParentFile(); //如果pdf保存路徑不存在，則創建路徑 if(!parent.exists()){ parent.mkdirs(); } StringBuilder cmd=new StringBuilder(); cmd.append(toPdfTool); cmd.append(" "); cmd.append(" --header-line");//頁眉下面的線 cmd.append(" --header-center 這里是頁眉這里是頁眉這里是頁眉這里是頁眉 ");//頁眉中間內容 //cmd.append(" --margin-top 30mm ");//設置頁面上邊距 (default 10mm) cmd.append(" --header-spacing 10 ");//(設置頁眉和內容的距離,默認0) cmd.append(srcPath); cmd.append(" "); cmd.append(destPath); boolean result=true; try{ Process proc=Runtime.getRuntime().exec(cmd.toString()); HtmlToPdfInterceptor error=new HtmlToPdfInterceptor(proc.getErrorStream()); HtmlToPdfInterceptor output=new HtmlToPdfInterceptor(proc.getInputStream()); error.start(); output.start(); proc.waitFor(); }catch(Exception e){ result=false; e.printStackTrace(); } return result; } public static void main(String[] args) { HtmlToPdf.convert("https://my.oschina.net/papio/blog/835645", "d:/wkhtmltopdf.pdf"); }}復制代碼
wkhtmltopdf 參數詳解
wkhtmltopdf [OPTIONS]... <input file> [More input files] <output file>常規選項 --allow <path> 允許加載從指定的文件夾中的文件或文件（可重復） --book* 設置一會打印一本書的時候，通常設置的選項 --collate 打印多份副本時整理 --cookie <name> <value> 設置一個額外的cookie（可重復） --cookie-jar <path> 讀取和寫入的Cookie，并在提供的cookie jar文件 --copies <number> 復印打印成pdf文件數（默認為1） --cover* <url> 使用HTML文件作為封面。它會帶頁眉和頁腳的TOC之前插入 --custom-header <name> <value> 設置一個附加的HTTP頭（可重復） --debug-javascript 顯示的javascript調試輸出 --default-header* 添加一個缺省的頭部，與頁面的左邊的名稱，頁面數到右邊，例如： --header-left '[webpage]' --header-right '[page]/[toPage]' --header-line --disable-external-links* 禁止生成鏈接到遠程網頁 --disable-internal-links* 禁止使用本地鏈接 --disable-javascript 禁止讓網頁執行JavaScript --disable-pdf-compression* 禁止在PDF對象使用無損壓縮 --disable-smart-shrinking* 禁止使用WebKit的智能戰略收縮，使像素/ DPI比沒有不變 --disallow-local-file-access 禁止允許轉換的本地文件讀取其他本地文件，除非explecitily允許用 --allow --dpi <dpi> 顯式更改DPI（這對基于X11的系統沒有任何影響） --enable-plugins 啟用已安裝的插件（如Flash --encoding <encoding> 設置默認的文字編碼 --extended-help 顯示更廣泛的幫助，詳細介紹了不常見的命令開關 --forms* 打開HTML表單字段轉換為PDF表單域 --grayscale PDF格式將在灰階產生 --help Display help --htmldoc 輸出程序HTML幫助 --ignore-load-errors 忽略claimes加載過程中已經遇到了一個錯誤頁面 --lowquality 產生低品質的PDF/ PS。有用縮小結果文檔的空間 --manpage 輸出程序手冊頁 --margin-bottom <unitreal> 設置頁面下邊距 (default 10mm) --margin-left <unitreal> 將左邊頁邊距 (default 10mm) --margin-right <unitreal> 設置頁面右邊距 (default 10mm) --margin-top <unitreal> 設置頁面上邊距 (default 10mm) --minimum-font-size <int> 最小字體大小 (default 5) --no-background 不打印背景 --orientation <orientation> 設置方向為橫向或縱向 --page-height <unitreal> 頁面高度 (default unit millimeter) --page-offset* <offset> 設置起始頁碼 (default 1) --page-size <size> 設置紙張大小: A4, Letter, etc. --page-width <unitreal> 頁面寬度 (default unit millimeter) --password <password> HTTP驗證密碼 --post <name> <value> Add an additional post field (repeatable) --post-file <name> <path> Post an aditional file (repeatable) --print-media-type* 使用的打印介質類型，而不是屏幕 --proxy <proxy> 使用代理 --quiet Be less verbose --read-args-from-stdin 讀取標準輸入的命令行參數 --readme 輸出程序自述 --redirect-delay <msec> 等待幾毫秒為JS-重定向(default 200) --replace* <name> <value> 替換名稱,值的頁眉和頁腳（可重復） --stop-slow-scripts 停止運行緩慢的JavaScripts --title <text> 生成的PDF文件的標題（第一個文檔的標題使用，如果沒有指定） --toc* 插入的內容的表中的文件的開頭 --use-xserver* 使用X服務器（一些插件和其他的東西沒有X11可能無法正常工作） --user-style-sheet <url> 指定用戶的樣式表，加載在每一頁中 --username <username> HTTP認證的用戶名 --version 輸出版本信息退出 --zoom <float> 使用這個縮放因子 (default 1) 頁眉和頁腳選項--header-center* <text> (設置在中心位置的頁眉內容) --header-font-name* <name> (default Arial) (設置頁眉的字體名稱)--header-font-size* <size> (設置頁眉的字體大小)--header-html* <url> (添加一個HTML頁眉,后面是網址)--header-left* <text> (左對齊的頁眉文本)--header-line* (顯示一條線在頁眉下)--header-right* <text> (右對齊頁眉文本)--header-spacing* <real> (設置頁眉和內容的距離,默認0)--footer-center* <text> (設置在中心位置的頁腳內容) --footer-font-name* <name> (設置頁腳的字體名稱) --footer-font-size* <size> (設置頁腳的字體大小default 11)--footer-html* <url> (添加一個HTML頁腳,后面是網址)--footer-left* <text> (左對齊的頁腳文本)--footer-line* 顯示一條線在頁腳內容上)--footer-right* <text> (右對齊頁腳文本)--footer-spacing* <real> (設置頁腳和內容的距離)./wkhtmltopdf --footer-right '[page]/[topage]' http://www.baidu.com baidu.pdf./wkhtmltopdf --header-center '報表' --header-line --margin-top 2cm --header-line http://192.168.212.139/oma/ oma.pdf表內容選項中 --toc-depth* <level> Set the depth of the toc (default 3) --toc-disable-back-links* Do not link from section header to toc --toc-disable-links* Do not link from toc to sections --toc-font-name* <name> Set the font used for the toc (default Arial) --toc-header-font-name* <name> The font of the toc header (if unset use --toc-font-name) --toc-header-font-size* <size> The font size of the toc header (default 15) --toc-header-text* <text> The header text of the toc (default Table Of Contents) --toc-l1-font-size* <size> Set the font size on level 1 of the toc (default 12) --toc-l1-indentation* <num> Set indentation on level 1 of the toc (default 0) --toc-l2-font-size* <size> Set the font size on level 2 of the toc (default 10) --toc-l2-indentation* <num> Set indentation on level 2 of the toc (default 20) --toc-l3-font-size* <size> Set the font size on level 3 of the toc (default 8) --toc-l3-indentation* <num> Set indentation on level 3 of the toc (default 40) --toc-l4-font-size* <size> Set the font size on level 4 of the toc (default 6) --toc-l4-indentation* <num> Set indentation on level 4 of the toc (default 60) --toc-l5-font-size* <size> Set the font size on level 5 of the toc (default 4) --toc-l5-indentation* <num> Set indentation on level 5 of the toc (default 80) --toc-l6-font-size* <size> Set the font size on level 6 of the toc (default 2) --toc-l6-indentation* <num> Set indentation on level 6 of the toc (default 100) --toc-l7-font-size* <size> Set the font size on level 7 of the toc (default 0) --toc-l7-indentation* <num> Set indentation on level 7 of the toc (default 120) --toc-no-dots* Do not use dots, in the toc輪廓選項 --dump-outline <file> 轉儲目錄到一個文件 --outline 顯示目錄(文章中h1,h2來定) --outline-depth <level> 設置目錄的深度（默認為4）頁腳和頁眉 * [page] 由當前正在打印的頁的數目代替 * [frompage] 由要打印的第一頁的數量取代 * [topage] 由最后一頁要打印的數量取代 * [webpage] 通過正在打印的頁面的URL替換 * [section] 由當前節的名稱替換 * [subsection] 由當前小節的名稱替換 * [date] 由當前日期系統的本地格式取代 * [time] 由當前時間，系統的本地格式取代
作者：曹元
鏈接：https://juejin.im/post/6856547881873047559
來源：掘金
著作權歸作者所有。商業轉載請聯系作者獲得授權，非商業轉載請注明出處。
github:https://github.com/hcymysql/slowquery
今天主要分享一下賀大師的slowquery工具，主要用于分析慢查詢日志及郵件告警。
這里參考了開源工具Anemometer圖形展示思路，并且把小米Soar工具集成進去，開發在頁面上點擊慢SQL，就會自動反饋優化建議，從而降低DBA人肉成本，同時也支持自動發送郵件報警功能。
agent客戶端慢日志采集分析是結合Percona pt-query-digest工具來實現。
下面介紹下部署過程。
1、檢查和安裝與Perl相關的模塊
PT工具是使用Perl語言編寫和執行的，所以需要系統中有Perl環境。
依賴包檢查命令為：
rpm -qa perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL
如果有依賴包缺失，可以使用下面的命令安裝：
yum -y install perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL perl-TermReadKey.x86_64 perl-Digest-MD5.x86_64
2、安裝pt工具包
rpm -ivh percona-toolkit-3.0.13-1.el7.x86_64.rpm
3、驗證
安裝后，可以通過下面的命令確認是否安裝成功：
# pt-query-digest --help # pt-table-checksum --help
如果命令提示可以正常顯示，則說明pt工具已經正常安裝和使用了。
監控端的mysql已經搭建，這里不介紹部署過程
yum install httpd php php-mysql -y
1、移動slowquery到web目錄
mv slowquery /var/www/html/
2、初始化數據
進入slowquery/slowquery_table_schema目錄下，導入dbinfo_table_schema.sql和slowquery_table_schema.sql表結構文件到你的運維管理機MySQL里。
注：dbinfo表是保存生產MySQL主庫的配置信息。
mysql -uroot -p -e 'create database slowquery default character set utf8;' mysql -uroot -p slowquery < /var/www/html/slowquery/slowquery_table_schema/dbinfo_table_schema.sql mysql -uroot -p slowquery < /var/www/html/slowquery/slowquery_table_schema/slowquery_table_schema.sql
3、錄入要監控的MySQL主庫配置信息。
3.1、監控端及被監控端增加slowquery賬號
set global validate_password_policy=0; grant all privileges on *.* to slowquery@'%' identified by 'xxxxx';
3.2、監控端錄入要監控的MySQL主庫配置信息
insert into slowquery.dbinfo values (1,'xx.xx.xx.69','fsl_prod','slowquery','xxx',3306); insert into slowquery.dbinfo values (2,'xx.xx.xx.94','tms_prod','slowquery','fxxx',3306);
4、修改配置文件config.php
將里面的配置改成你的運維管理機MySQL的地址（用戶權限最好是管理員）。
<?php
//將里面的配置改成你的運維管理機MySQL的地址
$con=mysqli_connect("xx.xx.xx.94","slowquery","密碼","fsl_prod","3306") or die("數據庫鏈接錯誤".mysqli_connect_error());
mysqli_query($con,"set names utf8");
?>5、修改配置文件soar_con.php(這個功能有點問題，暫時測試不通過)
將里面的配置改成你的運維管理機MySQL的地址（用戶權限最好是管理員）。
<?php //-test-dsn soar測試環境，用來分析SQL使用 $test_user='slowquery'; $test_pwd='密碼'; $test_ip='xx.xx.xx.94'; $test_port='3306'; $test_db='slowquery'; ?>
篇幅有限，這塊內容就介紹到這了，后面會介紹下被監控端部署部分，感興趣的朋友可以關注下~
*請認真填寫需求信息，我們會在24小時內與您取得聯系。
