java重写redis服务端

背景

最近研究了下redis的协议、持久化策略以及单线程模型,突然觉得和java很搭配。源码请用力戳这里

目的

鉴于redis是c编写,java的同学读起来比较费力,所以写java版。让更多的开发者理解高性能设计的精髓,同时加深底层传输,存储,索引的认知。

特征

1. 兼容大多数redis原生协议
2. 兼容redis桌面客户端0.9+
3. db分区隔离和事务机制
4. 高级特性:如阻塞队列,发布订阅
5. 数据持久采用jdk原生MappedByteBuffer同步刷盘(虚拟内存技术)
6. key,value存储隔离,仅key空间占虚拟机内存,而value只在使用时才加载,所以优于redis
7. 兼容jedis,spring-data-redis,spring-boot-data等常用redis java客户端工具

基准测试

单机(4核8g),1000连接,随机value set,tps大致在3W+
参考下图,16379为jredis,7003为redis
image
image

存储设计

jredis文件结构

默认8个分区,相当于8个db,数据在程序运行时同步写入,重启会自动读取恢复数据到内存。
image

db文件内容

分为一个key区+三个value类型区,对应磁盘文件结构为:
image

文件详细介绍

key区加载所有值类型的key
value区仅加载同类型的值
image

缓冲区设计

线性存储,自定义消息格式,消息定长,一个单元最大存储1024字节,文件写满暂不支持动态扩容。
image

猜你喜欢

转载自blog.51cto.com/14171137/2341997