Java 堆外Map工具

Posted rickiyang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Java 堆外Map工具相关的知识,希望对你有一定的参考价值。

KV键值对存储大家都很熟悉了,Java 中的 map 都是在堆内存储,如果我们遇到一种情况是map特别大,每次GC我们不想释放这些空间,那么这一部分缓存数据又该如何处理呢?当然大家说可以使用第三方缓存组件:Redis,HBase,MongoDB,今天给大家多一种选择:堆外内存。

今天要给大家介绍的是一款使用堆外内存构建本地缓存行的工具:Chronicle-Map 。官网上给出该工具的特性:

  • 高吞吐量,低延迟,跨进程,持久键值存储;
  • 堆外数据存储,延迟时间为微秒;
  • 基于ConcurrentHashMap;
  • TCP连接;
  • 弹性写入,如果进程终止,则最后一次写入不会丢失;
  • 仅复制最新值即可支持很高的更新率;
  • 超低延迟:在某些测试中,Chronicle Map的目标是读取和写入查询的平均延迟小于1微秒;

  • 高并发性:写查询可以很好地扩展到服务器中硬件执行线程的数量。读取查询永远不会互相阻塞;
  • 磁盘持久性 -(可选);
  • 多主复制 -(可选,商业功能)-最终一致的,完全冗余的服务器间异步复制,默认情况下“最后写入胜出”策略允许实现基于状态的自定义CRDT策略。

下面说一下使用方式:

<dependency>
    <groupId>net.openhft</groupId>
    <artifactId>chronicle-map</artifactId>
    <version>3.17.2</version>
</dependency>

创建一个普通的KV存储:

ChronicleMap<Long, String> userMap = ChronicleMap
  .of(Long.class, String.class)
  .name("user-map")
  .entries(50)  
  .create();
userMap.put(1122L,"xiaming");

创建一个String 类型的 map,初始值为50个空间。

创建可持久化的KV存储:

try {
  ChronicleMap<Long, String> persistedUserMap = ChronicleMap
    .of(Long.class, String.class)
    .name("user-map")
    .entries(50)
    .createPersistedTo(new File(System.getProperty("user.home") + "/user.data"));
} catch (IOException e) {
  e.printStackTrace();
}

以上是关于Java 堆外Map工具的主要内容,如果未能解决你的问题,请参考以下文章

java堆外内存

Java堆外内存的使用

Java -- 每日一问:如何监控和诊断JVM堆内和堆外内存使用?

Netty堆外内存泄漏排查,这一篇全讲清楚了

Java 堆外内存回收原理

solr分布式索引实战分片配置读取:工具类configUtil.java,读取配置代码片段,配置实例