fsync和fdatasync

Posted yunanlong

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了fsync和fdatasync相关的知识,希望对你有一定的参考价值。

在看LevelDB源码的时候,看到PosixWritableFile类的Sync函数用到了fsync和fdatasync两个Linux系统调用来将文件的修改同步到磁盘上,所以粗浅的学习了一下这两个系统调用,在此做一下记录。

Linux中写文件有write系统调用,但是write系统调用写文件时,数据并不会立即同步到磁盘上,而是会被操作系统缓存在内存的缓冲区中,随后再由操作系统写入磁盘中,而write系统调用并不会在数据同步到磁盘后才返回。这就会产生问题:在write系统调用已经返回,而数据还没有同步到磁盘上的时候,如果系统宕掉了,就会出现数据丢失的情况。

因此Linux提供了fsync系统调用,fsync系统调用会将某个文件的所有修改的数据立即同步到磁盘上,包括文件的metadata,并在所有修改数据都同步到磁盘之后才会返回。

因为要写metadata,所以fsync就涉及两次磁盘的写入,开销比较大,Linux中又提供了fdatasync系统调用。fdatasync系统调用不会同步不必要的metadata到磁盘上,比如st_atime和st_mtime就不会被同步,只会同步对后续数据读取有影响的metadata,比如st_size,因此理论上fdatasync系统调用只涉及一次磁盘写入,会比fsync系统调用快。而在某些版本的Linux中,fdatasync系统调用和fsync系统调用实际上是一样的,都会同步st_atime和st_mtime。

另外,在使用open系统调用的时候传入O_SYNC标记能使所有的文件写入都被立即同步到磁盘上。

391 Love u

以上是关于fsync和fdatasync的主要内容,如果未能解决你的问题,请参考以下文章

fsync与fflush的关系和区别

fsync与fflush的关系和区别

MPI 屏障不阻塞文件写入、刷新和 os.fsync

技术文档 - PostgreSQL 性能优化之 fsync 参数

mysql fsync

mysql strace fsync,fdatasync