变态的NAS文件系统

Posted 2020-10-13

　　遇到一个问题:在使用NAS文件系统的时候, 训练服务训练出资源, 计算服务立刻使用这部分资源, 发现资源有部分还是上个版本的训练资源.

　　初步怀疑:

　　　　1. 训练服务器 write 之后,close了, 从write, close 的机制可以知道, 数据应该从输入缓冲区同步到内核缓冲了. 我们可以认为此时资源 应该已经在存储上面落地了.

　　　　2. 但是NAS 文件系统的特性:  NAS(NFS) 默认的mount参数为async，async 参数表示内核不会透传程序的IO请求给sever, 对于写IO会延迟执行，积累一定的时间以便合并上层的IO请求以提高效率。

　　　　3. 发现问题没有,NAS 会延迟部分时间, 以提升效率. 

　　　　4. 所以, 文件使用实时性高的场景,该使用NAS 文件系统吗? 还是该怎么处理.