Linux fsync系統(tǒng)調(diào)用方式
更新時間：2025年04月08日 09:03:27 作者：學(xué)會了沒
這篇文章主要介紹了Linux fsync系統(tǒng)調(diào)用方式,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
在 Linux 中，fsync 是一個關(guān)鍵的系統(tǒng)調(diào)用，用于確保文件數(shù)據(jù)的持久化存儲。其核心原理是強制將文件在內(nèi)存中的修改（即 頁面緩存，Page Cache）同步到物理磁盤。
以下是其工作原理的詳細(xì)說明：
1. fsync 的核心作用
- 目標(biāo)：確保文件數(shù)據(jù)（數(shù)據(jù)塊 + 元數(shù)據(jù)）從內(nèi)存的頁面緩存持久化到磁盤。
- 場景：適用于對數(shù)據(jù)安全性要求高的應(yīng)用（如數(shù)據(jù)庫、日志系統(tǒng)）。
關(guān)鍵特性：
- 阻塞操作：調(diào)用
fsync的進程會等待數(shù)據(jù)完全寫入磁盤后才返回。 - 原子性：保證文件在系統(tǒng)崩潰后恢復(fù)到
fsync完成時的狀態(tài)。
2. 工作流程
當(dāng)調(diào)用 fsync(fd) 時，Linux 內(nèi)核會執(zhí)行以下步驟：
步驟 1：刷新頁面緩存
- 數(shù)據(jù)寫入：應(yīng)用程序通過
write()寫入文件時，數(shù)據(jù)首先存儲在 頁面緩存（內(nèi)存中的臨時區(qū)域）。 - 標(biāo)記臟頁：修改過的頁面會被標(biāo)記為“臟頁”（Dirty Page），表示未同步到磁盤。
步驟 2：觸發(fā)磁盤同步
- 文件系統(tǒng)驅(qū)動：
fsync通知文件系統(tǒng)（如 ext4、XFS）將臟頁數(shù)據(jù)寫入磁盤。對于日志文件系統(tǒng)（如 ext4），可能先寫入日志（Journal）以保證一致性。 - 塊設(shè)備層：文件系統(tǒng)將邏輯塊地址轉(zhuǎn)換為物理塊地址，生成 I/O 請求。
- 磁盤控制器：I/O 請求被發(fā)送到磁盤控制器，數(shù)據(jù)最終寫入磁盤的物理介質(zhì)。
步驟 3：等待確認(rèn)
fsync會阻塞調(diào)用進程，直到磁盤返回寫入完成的確認(rèn)信號。- 如果磁盤啟用了寫入緩存（Write Cache），可能需要額外指令（如
FLUSH_CACHE）確保數(shù)據(jù)落盤。
3. fsync vs fdatasync
fsync：同步文件數(shù)據(jù) 和元數(shù)據(jù)（如 inode 的修改時間、文件大小等）。fdatasync：僅同步文件數(shù)據(jù)，跳過不必要的元數(shù)據(jù)同步（性能更高）。- 選擇依據(jù)：若不需要元數(shù)據(jù)強一致性（如臨時文件），優(yōu)先用
fdatasync。
4. 文件系統(tǒng)的影響
不同文件系統(tǒng)對 fsync 的實現(xiàn)優(yōu)化不同：
| 文件系統(tǒng) | 優(yōu)化行為 |
|---|---|
| ext4 | 默認(rèn)啟用日志（Journal），寫入日志后即可返回，減少 fsync 的延遲。 |
| XFS | 延遲分配磁盤空間，合并多次寫入，減少 I/O 次數(shù)。 |
| Btrfs | 寫時復(fù)制（Copy-on-Write）可能增加元數(shù)據(jù)操作，但支持原子性快照恢復(fù)。 |
5. 硬件與內(nèi)核的影響
磁盤寫入緩存（Write Cache）：
- 若磁盤緩存啟用，
fsync返回時數(shù)據(jù)可能仍在緩存中，未真正持久化。 - 需通過
hdparm -W0 /dev/sdX禁用緩存，或使用 屏障寫入（Barrier）確保落盤。
內(nèi)核參數(shù)：
vm.dirty_expire_centisecs：控制臟頁刷新周期。vm.dirty_writeback_centisecs：后臺刷新線程的運行頻率。
6. 性能問題與優(yōu)化
性能瓶頸：頻繁調(diào)用 fsync 會導(dǎo)致高延遲（如數(shù)據(jù)庫事務(wù)日志）。
優(yōu)化策略：
- 批量寫入：合并多次寫操作后調(diào)用一次
fsync。 - 異步 I/O：使用
aio_fsync非阻塞同步（需結(jié)合回調(diào)機制）。 - 繞過頁面緩存：直接 I/O（O_DIRECT）避免緩存，但犧牲內(nèi)核優(yōu)化。
7. 應(yīng)用場景示例
- 數(shù)據(jù)庫系統(tǒng)（如 PostgreSQL）：事務(wù)提交時調(diào)用
fsync，確保 WAL（Write-Ahead Log）落盤。 - Redis AOF：根據(jù)
appendfsync配置決定同步頻率（見用戶前序問題）。 - 日志文件：關(guān)鍵日志條目后調(diào)用
fsync，防止系統(tǒng)崩潰丟失記錄。
總結(jié)
fsync 是 Linux 數(shù)據(jù)持久化的基石，其工作原理涉及內(nèi)核頁面緩存、文件系統(tǒng)驅(qū)動和磁盤硬件的協(xié)作。合理使用需權(quán)衡 性能 與 數(shù)據(jù)安全性，并結(jié)合文件系統(tǒng)特性與硬件配置進行優(yōu)化。
以上為個人經(jīng)驗，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要介紹了linux系統(tǒng)安裝msf的過程，本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-05-05
ssh報錯no key alg的解決方法(關(guān)于低版本連接高版本ssh)
這篇文章主要介紹了ssh報錯no key alg(關(guān)于低版本連接高版本ssh),通過ssh-keygen命令重新生成ssh主機秘鑰，可以不用重啟sshd服務(wù)，本文給大家介紹的非常詳細(xì)，需要的朋友可以參考下2023-07-07
這篇文章主要介紹了利用shell find命令刪除過期的緩存方法，文中給出了詳細(xì)的示例代碼，相信對大家的學(xué)習(xí)或者工作能帶來一定的幫助，需要的朋友們下面來一起看看吧。2017-03-03
Linux系統(tǒng)（Centos6.5以上）安裝jdk教程解析
這篇文章主要介紹了Linux系統(tǒng)（Centos6.5以上）安裝jdk教程解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-09-09
本文介紹了解決Linux服務(wù)器SSH連接速度慢的問題,主要原因是DNS反向解析和GSSAPI認(rèn)證機制,通過修改SSH配置文件中的GSSAPIAuthentication和UseDNS參數(shù),可以顯著提升SSH連接速度,優(yōu)化后耗時可減少至0.3-0.8秒2026-04-04
本文將詳細(xì)介紹如何在 Linux 系統(tǒng)中使用 md5sum 命令生成 JAR 文件的 MD5 校驗和,MD5 校驗和常用于驗證文件的完整性,特別是在文件傳輸、備份和發(fā)布時,確保文件未被篡改,通過這篇教程,即使是小白用戶,也能輕松掌握這一技能,需要的朋友可以參考下2024-12-12
Linux系統(tǒng)意外刪除文件后的恢復(fù)方法小結(jié)
在Linux系統(tǒng)中,當(dāng)文件被意外刪除后,有多種方法可以嘗試恢復(fù)數(shù)據(jù),本文檔詳細(xì)介紹了各種文件恢復(fù)技術(shù),包括普通文件和數(shù)據(jù)庫的恢復(fù)方法,需要的朋友可以參考下2025-06-06
大家好，本篇文章主要講的是Linux下NTP服務(wù)器配置詳細(xì)過程，感興趣的同學(xué)趕快來看一看吧，對你有幫助的話記得收藏一下哦，方便下次瀏覽2021-11-11
這篇文章主要給大家介紹了關(guān)于Linux外圍文件系統(tǒng)的定制方法，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-02-02
虛擬機使用PuTTY、SSH Secure Shell Client前的配置
這篇文章主要介紹了虛擬機使用PuTTY、SSH Secure Shell Client前的配置的相關(guān)資料,需要的朋友可以參考下2017-01-01