首页 > > 程序设计 > Java技术 >

Java版分布式ID生成器技术介绍

2018-11-20 03:21:38来源：博客园 阅读 ()

新老客户大回馈,云服务器低至5折

分布式全局ID生成器作为分布式架构中重要的组成部分，在高并发场景下承载着分担数据库写瓶颈的压力。
之前实现过PHP+Swoole版，性能和稳定性在生产环境下运行良好。这次使用Java进行重写，目前测试情况表现还不错，下面我简要介绍下java版的项目情况。
 
技术架构：Netty + Zookeeper + Redis Protocol
  • Netty：是一个基于NIO的客户、服务端编程框架(类似于swoole)。使用netty作为服务端应用接收客户端请求，对Redis协议数据进行编解码，响应redis客户端请求。
  • Zookeeper：主要两个作用。一是生成器服务每个节点需预先定义唯一serverId，并注册到zk，由zk统一管理集群节点连接状态；二是自增序列sequenceId可交由zk管理，集群中的自增序列在毫秒级内共用一个值，不过这涉及到共享锁的资源竞争和网络传输，性能很差，默认没开启，下面有具体的压测情况。
 
下面是通过redis-benchmark压测工具在本机对php版、java版、及原生redis-server进行压测的QPS数据(使用默认并发50)
 
PHP版测试命令：redis-benchmark -h 127.0.0.1 -p 9501 -t get -n 200000 -q
 
Java版测试命令：redis-benchmark -h 127.0.0.1 -p 3308 -t get -n 200000 -q
 
自增序列sequenceId交由zk管理后性能堪忧~测试命令：redis-benchmark -h 127.0.0.1 -p 9300 -t get -n 2000 -q
 
原生redis-server测试命令：redis-benchmark -h 127.0.0.1 -p 6379 -t get -n 200000 -q

 

从压测数据上看，Java版相对于PHP版有接近一倍的性能提升，已经接近c语言编写的redis server。
仅支持get命令，key格式固定如下：
 
172.19.19.233:9303> get id.1
4612394007866114075
172.19.19.233:9303> get id.1.3
4612394014021255195,4612394014021271579,4612394014021287963
172.19.19.233:9303> get parse.4612393968093626395
[1, 2018:11:16 15:15:02.707, 0, 1, 11]
 
命令解释：
get id.1 获取单个id，1为业务id，支持0-1023
get id.1.3 一次性获取3个id，1为业务id
get parse.4612393968093626395 解析id信息，反解出时间戳，业务id，集群节点id，自增id信息 
 
敲其它命令会返回error信息。

标签：

版权申明：本站文章部分自网络，如有侵权，请联系：west999com@outlook.com
特别注意：本站所有转载文章言论不代表本站观点，本站所提供的摄影照片，插画，设计作品，如需使用，请与原作者联系，版权归原作者所有

上一篇：Java并发（十二）：CAS Unsafe Atomic

下一篇：java反射知识相关的文章

相关文章

IDC资讯： 主机资讯 注册资讯 托管资讯 vps资讯 网站建设

网站运营： 建站经验 策划盈利 搜索优化 网站推广 免费资源

网站联盟： 联盟新闻 联盟介绍 联盟点评 网赚技巧

行业资讯： 搜索引擎 网络游戏 电子商务 广告传媒

网络编程： Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它

服务器技术： Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护

软件技巧： 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷

网页制作： FrontPages Dreamweaver Javascript css photoshop fireworks Flash

程序设计： Java技术 C/C++ VB delphi

网络知识： 网络协议 网络安全 网络管理 组网方案 Cisco技术

操作系统： Win2000 WinXP Win2003 Mac OS Linux FreeBSD

热门词条
最新资讯
热门关注
热门标签