自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

MySQL 常見日志清理策略

數(shù)據(jù)庫 MySQL
本篇文章簡單介紹了 MySQL 中六種常見日志及其清理策略,不同環(huán)境可以采用不同的清理策略,本文只是提供一種思路,方法各種各樣,重要的是要根據(jù)實際情況制定合理的日志保留策略,并確保不會影響到數(shù)據(jù)庫的正常運行和備份需求。?

 前言:

MySQL 數(shù)據(jù)庫服務(wù)器使用多種類型的日志來記錄操作和事件,這對于故障診斷、審計和性能分析非常重要。然而,這些日志文件會隨著時間的推移而不斷增長,可能會占用大量的磁盤空間。因此,定期清理這些日志是必要的,本篇文章我們一起來學(xué)習(xí)下如何清理 MySQL 中的日志文件。

 二進(jìn)制日志 (Binary Log)

binlog 記錄了數(shù)據(jù)庫所有的 DDL(數(shù)據(jù)定義語言)和 DML(數(shù)據(jù)操作語言)更改操作,一般都是建議開啟 binlog 的,要注意的是 binlog 會占用大量磁盤空間,特別是你的數(shù)據(jù)庫特別繁忙的情況下。這個時候就要制定清理策略了。

MySQL 5.7 可以通過 expire_logs_days 參數(shù)來設(shè)置 binlog 刪除時間,在 my.cnf 配置文件中設(shè)置 expire_logs_days 參數(shù),指定二進(jìn)制日志文件的過期天數(shù),過期的日志文件將會自動被刪除。在 MySQL 8.0 中建議使用 binlog_expire_logs_seconds 參數(shù),此參數(shù)同樣是控制二進(jìn)制文件過期時間,單位是秒。binlog 具體要保留多久,可以根據(jù)磁盤空間決定,磁盤充足可以多保留,一般建議至少保留 7 天。

除了通過設(shè)置參數(shù)自動清理外,binlog 還可以使用 PURGE BINARY LOGS 命令來手動執(zhí)行清理。例如,使用 purge binary logs to 'mysql-bin.000009' 來刪除 mysql-bin.000009 之前的日志文件,或者使用 purge binary logs before '2024-07-15 00:00:00' 來刪除指定時間之前的日志文件。

通用查詢?nèi)罩?(General Query Log)

MySQL 的 general_log 是記錄所有到達(dá) MySQL 服務(wù)器的 SQL 語句的日志。由于它記錄了所有的 SQL 語句,包括連接、查詢、更新等操作,因此其日志量可能增長非常迅速,通常在生產(chǎn)環(huán)境中不建議開啟此功能,以免影響性能。如果你的數(shù)據(jù)庫為了等保評測或者其他原因開啟了 general_log ,那就要及時制定清理策略了。

官方并沒有提供用于清理 general_log 的參數(shù)或命令,因此清理 general_log 只能各顯神通了,一般情況下可以通過寫 shell 腳本來執(zhí)行清理,比如說每天凌晨進(jìn)行日志切換,刪除幾天前的日志文件。也可以使用 logrotate 功能來配置 general_log 自動輪轉(zhuǎn)及清理。

錯誤日志 (Error Log)

錯誤日志記錄 MySQL 服務(wù)器啟動、關(guān)閉及運行時發(fā)生的錯誤及警告信息。一般是默認(rèn)開啟的,不過錯誤日志增長速度很慢,通常不需要頻繁清理,可以手動清理或設(shè)置定期任務(wù)清理舊的日志文件。錯誤日志保留時間可以更長些。

慢查詢?nèi)罩?(Slow Query Log)

慢日志主要用于記錄執(zhí)行時間超過設(shè)定閾值的 SQL 查詢。慢查詢?nèi)罩緦τ跀?shù)據(jù)庫的性能優(yōu)化非常重要,因為它可以幫助數(shù)據(jù)庫管理員和開發(fā)者識別和優(yōu)化那些執(zhí)行效率低下的查詢。慢日志也是建議開啟的。

通常情況下,我們可以根據(jù)系統(tǒng)情況來設(shè)置慢 SQL 閾值,比如 1s 或 3s 。慢日志一般情況下增長速度也不是很快,只要持續(xù)進(jìn)行 SQL 優(yōu)化,慢日志會越來越少的。通常慢日志也不需要頻繁清理,一般我們可以每一周或每一月重命名一次,然后保留幾份這樣來制定清理策略,可以交由 shell 腳本自動執(zhí)行。

審計日志 (Audit Log)

MySQL 社區(qū)版官方并沒有提供審計日志,如果想開啟審計日志,只能借助 MariaDB 或 Percona Server 等其他審計插件。審計日志增長速度也比較快,一般審計插件都提供清理參數(shù),比如說日志文件到達(dá)多少 M 自動輪換,保留幾份日志文件等,一定要設(shè)置好此類參數(shù),以防占用大量磁盤空間。

中繼日志 (Relay Log)

中繼日志是 MySQL 復(fù)制過程中用于存儲從主服務(wù)器接收的二進(jìn)制日志事件的臨時日志文件。這些日志文件由從服務(wù)器用來應(yīng)用來自主服務(wù)器的更新。中繼日志只存在于從服務(wù)器上,relay log 文件會隨著事件被應(yīng)用而逐漸增長,因此也需要適當(dāng)?shù)那謇聿呗詠砉芾磉@些文件。

MySQL 官方提供了 relay_log_pure 參數(shù),此參數(shù)決定了 relay log 文件在被完全應(yīng)用后是否應(yīng)該被自動刪除。這個參數(shù)有兩個可能的值:ON 和 OFF ,設(shè)置為 ON 代表當(dāng)中繼日志應(yīng)用完成后會自動刪除,OFF 則不會自動刪除。一般情況下,建議開啟此參數(shù),這樣 relay log 應(yīng)用完就會被清理掉,不會占用大量磁盤空間。

如果你的從服務(wù)器要求關(guān)閉 relay_log_pure 參數(shù),例如在 MHA 高可用架構(gòu)下,為了確保在故障轉(zhuǎn)移時能夠使用 relay log 進(jìn)行恢復(fù),通常需要禁用從服務(wù)器上的中繼日志自動清理功能。這個時候就要想其他辦法來清理 relay log 了。MHA 提供了一個名為 purge_relay_logs 的 perl 腳本,可通過 purge_relay_logs 腳本配合 cronjob 來完成此清理任務(wù)。若 purge_relay_logs 腳本無法使用,那么只能自己寫 shell 腳本了,比如可以定期將 relay_log_pure 設(shè)為 ON ,然后執(zhí)行 flush relay logs 后,再將 relay_log_pure 設(shè)為 OFF ,這樣操作下來一般也能實現(xiàn)清理 relay log 。實在不行我們還可以使用 find 命令來找到幾天前的日志文件,然后直接 rm 清理掉,不過用 find 找到后直接 rm 刪除這種方法會導(dǎo)致 relay-log.indx 索引文件中記錄 relay log 與實際存在的不匹配,所以直接 rm 刪除 relay log 后還要記得更新下 relay-log.indx 索引文件。

 總結(jié):

本篇文章簡單介紹了 MySQL 中六種常見日志及其清理策略,不同環(huán)境可以采用不同的清理策略,本文只是提供一種思路,方法各種各樣,重要的是要根據(jù)實際情況制定合理的日志保留策略,并確保不會影響到數(shù)據(jù)庫的正常運行和備份需求。

責(zé)任編輯:武曉燕 來源: MySQL技術(shù)
相關(guān)推薦

2024-10-23 16:06:50

2011-11-21 15:04:30

2015-03-10 11:30:00

MySQL日志維護(hù)

2010-10-13 15:33:38

MySQL日志

2023-11-01 07:28:31

MySQL日志維護(hù)

2019-09-16 08:28:17

Mysql數(shù)據(jù)庫binlog

2010-05-18 11:28:57

MySQL binlo

2010-04-20 17:49:32

Unix系統(tǒng)

2013-04-15 15:07:43

清理日志Linux系統(tǒng)

2018-08-02 16:10:50

MySQL數(shù)據(jù)庫清理

2023-05-29 09:08:27

SQL日志數(shù)據(jù)

2016-10-19 21:56:26

2023-09-01 15:22:31

負(fù)載均衡服務(wù)器端客戶端

2012-06-25 12:33:12

Java日志切割

2012-02-13 13:36:27

Java

2011-09-01 10:46:56

SQL Server 快速清理日志文件

2021-03-13 20:45:11

安全Web策略

2023-11-21 09:41:00

緩存策略存儲

2012-08-17 09:38:55

日志管理syslogEvtSys

2018-06-14 20:30:55

數(shù)據(jù)庫SQL Server日志清理
點贊
收藏

51CTO技術(shù)棧公眾號