FastCFS之连接管理

Posted Huazie

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了FastCFS之连接管理相关的知识,希望对你有一定的参考价值。

FastCFS之连接管理

本篇文章转载于 FastCFS 作者 余庆 大佬的 FastDFS分享与交流 公众号。

昨天刚发布了 FastCFS V1.3.0,修复了4个稳定性相关 bug,重构了客户端连接管理,实现了更优雅的 failover 机制,以及更高的读写性能,欢迎大家测试和使用。今天着重向大家介绍FastCFS的连接管理机制。

FastCFS 一开始就使用 libfastcommon 提供的连接池来管理连接。使用连接池的好处是不用每次请求都新建连接,通过池化技术实现了连接复用,最小化建连开销。只有底层的连接池还不够,还有如下两个问题需要解决:

  1. 请求发送给哪台服务器(服务实例)?
  2. 服务器不可用如何处理?

对于问题1,发送数据读写请求前,获取对应的服务器即可。以前的做法是每次都询问服务器,因此多了一次网络请求。改进后的做法:一次获取一个分组的可用服务器列表并缓存到本地,后续请求直接使用本地缓存的可用服务器。如果请求一台服务器失败,将该服务器从可用列表中摘除。

对于问题2,因为以前的做法没有在本地维护可用服务器列表,当有服务器不可用时,依然会尝试连接该服务器,从而导致请求的响应时间变长。改进后的方案会面临另外一个问题,对于不可用服务器,如何感知到它又可用了呢?简单直接的解决方法,定期探测该服务器是否可用。FastCFS的做法雷同,当有服务器不可用时,后台线程定期获取可用服务器列表,若有变化,则更新本地缓存。

概括一下 FastCFS 的连接管理机制:本地缓存可用服务器列表 + 后台线程检测服务器是否可用。

感兴趣的朋友,欢迎扫码加入 FastCFS 使用群交流。友情提示:二维码在页面最后 https://gitee.com/fastdfs100/FastCFS

以上是关于FastCFS之连接管理的主要内容,如果未能解决你的问题,请参考以下文章

FastCFS架构之连接篇

FastCFS性能碾压Ceph之技术揭晓

FastCFS性能碾压Ceph之技术揭晓

FastCFS 数据一致性模型之基础结构

FastCFS简洁高效的访问权限控制

FastCFS同步复制机制简介