PostgreSQL數(shù)據(jù)庫如何定期清理歸檔(pg_wal)日志
運行了5個月的數(shù)據(jù)庫,突然發(fā)現(xiàn)服務(wù)器磁盤快滿了,一看是歸檔日志很大,打算寫個腳本在不影響數(shù)據(jù)庫運行的情況下定期清理PostgreSQL中的archive日志。
我的postgresql.conf中的歸檔日志配置(不做配置的話默認(rèn)歸檔日志在pg_wal中):
archive_mode = on archive_command = 'cp %p /home/archive/%f'
1. 清理方法
讀取控制文件以確定可以清理的WAL(Write-Ahead Logging)文件范圍??梢允褂胮g_controldata命令來獲取這些信息。
pg_controldata $PGDATA
將顯示當(dāng)前可以刪除的WAL文件的范圍。
下圖中表示:000000010000003700000007這個文件之前的文件都可以刪除了

也可以通過pg_archivecleanup清理(前提是沒有配置archive_command路徑,使用默認(rèn)路徑pg_log)
執(zhí)行如下命令將會清除000000010000003700000007之前的所有日志。
pg_archivecleanup -d $PGDATA/pg_wal 000000010000003700000007
PS:我自己是直接用下面的腳本清理,很好用!定時任務(wù):每周5的凌晨2點執(zhí)行
0 2 * * 5 cd /home/scripts && ./wal_clean.sh >> ./logfile.log 2>&1
2. 定期清理archive日志腳本
#!/bin/bash
# 設(shè)置歸檔目錄路徑
archive_directory="/home/archive"
TIME="$(date +%Y-%m-%d-%H-%M)"
# 執(zhí)行pg_controldata命令并提取Latest checkpoint's REDO WAL file的值
result=$(pg_controldata "$PGDATA" | grep "Latest checkpoint's REDO WAL file")
value=$(echo "$result" | awk '{print $6}')
# 輸出結(jié)果
echo "時間:$TIME"
echo "Latest checkpoint's REDO WAL file: $value"
#查詢15天之前的所有日志,判斷是否存在未完成歸檔日志(一般查詢1天以后的日志都是不存在的,根據(jù)自己需要修改),都可以直接刪除
file=`find $archive_directory -type f -name "000*" -mtime +15 |grep $value`
if [ "$file" != "" ]; then
echo "存在未完成歸檔的日志,不能刪除"
echo $file
exit 1
else
echo "可以清理已完成歸檔日志操作"
#清理15天以前的歸檔日志
find $archive_directory -type f -name "000*" -mtime +15 -exec rm {} \;
fi附:在生產(chǎn)環(huán)境中,數(shù)據(jù)庫都需要開啟歸檔模式,那么PG該如何開始?xì)w檔呢?
PG中歸檔配置涉及幾個參數(shù):
# - Archiving -
#是否開啟歸檔
#archive_mode = off # enables archiving; off, on, or always
# (change requires restart)
#歸檔命令,注意 %p %f %% 格式化的含義。
#%p 是被歸檔的redo文件的路徑,
#%f 是被歸檔的redo文檔的文件名
#%% 是百分號
#archive_command = '' # command to use to archive a logfile segment
# placeholders: %p = path of file to archive
# %f = file name only
# e.g. 'test ! -f /mnt/server/archivedir/%f && cp %p /mnt/server/archivedir/%f'
#超時強制歸檔,例:如果10分鐘數(shù)據(jù)庫都沒有什么活動,一個redo文件沒有寫完,就不會歸檔,
#但是我們希望數(shù)據(jù)庫至少10分鐘要切換一個日志,則可以使用archive_timeout
#archive_timeout = 0 # force a logfile segment switch after this
# number of seconds; 0 disables 1、創(chuàng)建歸檔目錄
[pg12@mambapg ~]$ mkdir -p $PGDATA/archive/
2、配置歸檔相關(guān)參數(shù)postgresql.conf
wal_level = replica archive_mode = on archive_command = 'test ! -f $PGDATA/archive/%f && cp %p $PGDATA/archive/$f'
3、重啟數(shù)據(jù)庫,然后查看歸檔配置是否生效
postgres=# select * from pg_settings where name in ('wal_level','archive_mode','archive_command');總結(jié)
到此這篇關(guān)于PostgreSQL數(shù)據(jù)庫如何定期清理歸檔(pg_wal)日志的文章就介紹到這了,更多相關(guān)PostgreSQL定期清理歸檔日志內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Postgresql刪除數(shù)據(jù)庫表中重復(fù)數(shù)據(jù)的幾種方法詳解
本文詳細(xì)講解了Postgresql刪除數(shù)據(jù)庫表中重復(fù)數(shù)據(jù)的幾種方法,文中通過示例代碼介紹的非常詳細(xì)。對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-10-10
本地計算機上的 postgresql 服務(wù)啟動后停止的問題解決
這篇文章主要介紹了本地計算機上的 postgresql 服務(wù)啟動后停止的問題解決,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-01-01
PostgreSql中ALL與ANY區(qū)別小結(jié)
ALL和ANY是PostgreSQL中用于與子查詢結(jié)果進行比較的強大操作符,本文主要介紹了PostgreSql中ALL與ANY區(qū)別,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2025-11-11
開源數(shù)據(jù)庫postgreSQL13在麒麟v10sp1源碼安裝過程詳解
這篇文章主要介紹了開源數(shù)據(jù)庫postgreSQL13在麒麟v10sp1源碼安裝過程詳解,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2021-01-01
Linux系統(tǒng)安裝PostgreSQL數(shù)據(jù)庫及配置的詳細(xì)過程
這篇文章主要給大家介紹了關(guān)于Linux系統(tǒng)安裝PostgreSQL數(shù)據(jù)庫及配置的詳細(xì)過程,PgSQL(全稱PostgreSQL)是一個功能強大的開源對象-關(guān)系型數(shù)據(jù)庫系統(tǒng),結(jié)合了許多安全存儲和擴展最復(fù)雜數(shù)據(jù)工作負(fù)載的功能,需要的朋友可以參考下2023-12-12
PostgreSQL 重復(fù)數(shù)據(jù)處理的操作方法
這篇文章主要介紹了PostgreSQL 重復(fù)數(shù)據(jù)處理的操作方法,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-12-12
Windows?環(huán)境搭建?PostgreSQL?邏輯復(fù)制高可用架構(gòu)數(shù)據(jù)庫服務(wù)
本文主要介紹Windows下搭建PostgreSQL的主從邏輯復(fù)制,關(guān)于PostgreSQl的相關(guān)運維文章,網(wǎng)絡(luò)上大多都是?Linux?環(huán)境下的操作,鮮有在?Windows?環(huán)境下配置的教程,所以本文采用?Windows?環(huán)境作為演示系統(tǒng)來進行?PostgreSQL?高可用數(shù)據(jù)庫服務(wù)的搭建,感興趣的朋友一起看看吧2023-05-05
安全高效的PostgreSQL數(shù)據(jù)庫遷移解決方案
PostgreSQL數(shù)據(jù)庫是一款高度可擴展的開源數(shù)據(jù)庫系統(tǒng),支持復(fù)雜的查詢、事務(wù)完整性和多種數(shù)據(jù)類型由于各種業(yè)務(wù)需求,企業(yè)常常需要將數(shù)據(jù)在不同的云平臺或私有環(huán)境之間遷移,所以本文小編給大家介紹了安全高效的PostgreSQL數(shù)據(jù)庫遷移解決方案,需要的朋友可以參考下2023-11-11

