分布式唯一ID生成算法-雪花算法

简介:   在我们的工作中,数据库某些表的字段会用到唯一的,趋势递增的订单编号,我们将介绍两种方法,一种是传统的采用随机数生成的方式,另外一种是采用当前比较流行的“分布式唯一ID生成算法-雪花算法”来实现。  一、时间戳随机数生成唯一ID  我们写一个for循环,用  RandomUtil.generateOrderCode()生成1000个唯一ID,执行结果我们会发现出现重复的ID。

  在我们的工作中,数据库某些表的字段会用到唯一的,趋势递增的订单编号,我们将介绍两种方法,一种是传统的采用随机数生成的方式,另外一种是采用当前比较流行的“分布式唯一ID生成算法-雪花算法”来实现。

  一、时间戳随机数生成唯一ID

  我们写一个for循环,用

  RandomUtil.generateOrderCode()生成1000个唯一ID,执行结果我们会发现出现重复的ID。

  /**

  * 随机数生成util

  **/

  public class RandomUtil {

  private static final SimpleDateFormat dateFormatOne=new SimpleDateFormat("yyyyMMddHHmmssSS");

  private static final ThreadLocalRandom random=ThreadLocalRandom.current();

  //生成订单编号-方式一

  public static String generateOrderCode(){

  //TODO:时间戳+N为随机数流水号

  return dateFormatOne.format(DateTime.now().toDate()) + generateNumber(4);

  }

  //N为随机数流水号

  public static String generateNumber(final int num){

  StringBuffer sb=new StringBuffer();

  for (int i=1;i<=num;i++){

  sb.append(random.nextInt(9));

  }

  return sb.toString();

  }

  }

  鉴于此种“基于随机数生成”的方式在高并发的场景下并不符合我们的要求,接下来,我们将介绍另外一种比较流行的、典型的方式,即“分布式唯一ID生成算法-雪花算法”来实现。

  对于“雪花算法”的介绍,各位小伙伴可以参考Github上的这一链接,我觉得讲得还是挺清晰的:

  github/souyunku/SnowFlake ,详细的Debug在这里就不赘述了,下面截取了部分概述:

  二、分布式唯一ID生成算法-雪花算法

  我们写一个for循环,用SNOW_FLAKE.nextId() 生成1000个唯一ID,发现不会出现重复的。

  /* 雪花算法

  */

  public class SnowFlake {

  //起始的时间戳

  private final static long START_STAMP=1480166465631L;

  //每一部分占用的位数

  private final static long SEQUENCE_BIT=12; //序列号占用的位数

  private final static long MACHINE_BIT=5; //机器标识占用的位数

  private final static long DATA_CENTER_BIT=5;//二手手游卖号数据中心占用的位数

  //每一部分的最大值

  private final static long MAX_DATA_CENTER_NUM=-1L ^ (-1L << DATA_CENTER_BIT);

  private final static long MAX_MACHINE_NUM=-1L ^ (-1L << MACHINE_BIT);

  private final static long MAX_SEQUENCE=-1L ^ (-1L << SEQUENCE_BIT);

  //每一部分向左的位移

  private final static long MACHINE_LEFT=SEQUENCE_BIT;

  private final static long DATA_CENTER_LEFT=SEQUENCE_BIT + MACHINE_BIT;

  private final static long TIMESTAMP_LEFT=DATA_CENTER_LEFT + DATA_CENTER_BIT;

  private long dataCenterId; //数据中心

  private long machineId; //机器标识

  private long sequence=0L; //序列号

  private long lastStamp=-1L;//上一次时间戳

  public SnowFlake(long dataCenterId, long machineId) {

  if (dataCenterId > MAX_DATA_CENTER_NUM || dataCenterId < 0) {

  throw new IllegalArgumentException("dataCenterId can't be greater than MAX_DATA_CENTER_NUM or less than 0");

  }

  if (machineId > MAX_MACHINE_NUM || machineId < 0) {

  throw new IllegalArgumentException("machineId can't be greater than MAX_MACHINE_NUM or less than 0");

  }

  this.dataCenterId=dataCenterId;

  this.machineId=machineId;

  }

  //产生下一个ID

  public synchronized long nextId() {

  long currStamp=getNewStamp();

  if (currStamp < lastStamp) {

  throw new RuntimeException("Clock moved backwards. Refusing to generate id");

  }

  if (currStamp==lastStamp) {

  //相同毫秒内,序列号自增

  sequence=(sequence + 1) & MAX_SEQUENCE;

  //同一毫秒的序列数已经达到最大

  if (sequence==0L) {

  currStamp=getNextMill();

  }

  } else {

  //不同毫秒内,序列号置为0

  sequence=0L;

  }

  lastStamp=currStamp;

  return (currStamp - START_STAMP) << TIMESTAMP_LEFT //时间戳部分

  | dataCenterId << DATA_CENTER_LEFT //数据中心部分

  | machineId << MACHINE_LEFT //机器标识部分

  | sequence; //序列号部分

  }

  private long getNextMill() {

  long mill=getNewStamp();

  while (mill <=lastStamp) {

  mill=getNewStamp();

  }

  return mill;

  }

  private long getNewStamp() {

  return System.currentTimeMillis();

  }

  }

  综上,我们在高并发大量生成唯一ID时,避免生成重复ID,需要用第二种雪花算法生成。

目录
相关文章
|
3月前
|
算法 Go
[go 面试] 雪花算法与分布式ID生成
[go 面试] 雪花算法与分布式ID生成
|
12天前
|
NoSQL 算法 关系型数据库
分布式 ID 详解 ( 5大分布式 ID 生成方案 )
本文详解分布式全局唯一ID及其5种实现方案,关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
分布式 ID 详解 ( 5大分布式 ID 生成方案 )
|
10天前
|
存储 缓存 算法
分布式缓存有哪些常用的数据分片算法?
【10月更文挑战第25天】在实际应用中,需要根据具体的业务需求、数据特征以及系统的可扩展性要求等因素综合考虑,选择合适的数据分片算法,以实现分布式缓存的高效运行和数据的合理分布。
|
10天前
|
分布式计算 Java 开发工具
阿里云MaxCompute-XGBoost on Spark 极限梯度提升算法的分布式训练与模型持久化oss的实现与代码浅析
本文介绍了XGBoost在MaxCompute+OSS架构下模型持久化遇到的问题及其解决方案。首先简要介绍了XGBoost的特点和应用场景,随后详细描述了客户在将XGBoost on Spark任务从HDFS迁移到OSS时遇到的异常情况。通过分析异常堆栈和源代码,发现使用的`nativeBooster.saveModel`方法不支持OSS路径,而使用`write.overwrite().save`方法则能成功保存模型。最后提供了完整的Scala代码示例、Maven配置和提交命令,帮助用户顺利迁移模型存储路径。
|
1月前
|
算法
基于粒子群算法的分布式电源配电网重构优化matlab仿真
本研究利用粒子群算法(PSO)优化分布式电源配电网重构,通过Matlab仿真验证优化效果,对比重构前后的节点电压、网损、负荷均衡度、电压偏离及线路传输功率,并记录开关状态变化。PSO算法通过迭代更新粒子位置寻找最优解,旨在最小化网络损耗并提升供电可靠性。仿真结果显示优化后各项指标均有显著改善。
|
3月前
|
SQL 算法 Serverless
B端算法实践问题之使用concat_id算子获取用户最近点击的50个商品ID如何解决
B端算法实践问题之使用concat_id算子获取用户最近点击的50个商品ID如何解决
26 1
|
3月前
|
算法 NoSQL 中间件
go语言后端开发学习(六) ——基于雪花算法生成用户ID
本文介绍了分布式ID生成中的Snowflake(雪花)算法。为解决用户ID安全性与唯一性问题,Snowflake算法生成的ID具备全局唯一性、递增性、高可用性和高性能性等特点。64位ID由符号位(固定为0)、41位时间戳、10位标识位(含数据中心与机器ID)及12位序列号组成。面对ID重复风险,可通过预分配、动态或统一分配标识位解决。Go语言实现示例展示了如何使用第三方包`sonyflake`生成ID,确保不同节点产生的ID始终唯一。
go语言后端开发学习(六) ——基于雪花算法生成用户ID
|
3月前
|
存储 算法 数据挖掘
技术分享:从雪花算法生成订单ID的抉择与反思
【8月更文挑战第17天】在软件开发的浩瀚征途中,技术选型如同航海中的罗盘,指引着项目前进的方向。今天,我想与大家分享一段关于“用雪花算法生成订单ID,现在我有点后悔了”的亲身经历,希望通过这段故事,为大家在技术选型时提供一些参考与启示。
88 0
|
18天前
|
算法 安全 数据安全/隐私保护
基于game-based算法的动态频谱访问matlab仿真
本算法展示了在认知无线电网络中,通过游戏理论优化动态频谱访问,提高频谱利用率和物理层安全性。程序运行效果包括负载因子、传输功率、信噪比对用户效用和保密率的影响分析。软件版本:Matlab 2022a。完整代码包含详细中文注释和操作视频。
|
3天前
|
算法 数据挖掘 数据安全/隐私保护
基于FCM模糊聚类算法的图像分割matlab仿真
本项目展示了基于模糊C均值(FCM)算法的图像分割技术。算法运行效果良好,无水印。使用MATLAB 2022a开发,提供完整代码及中文注释,附带操作步骤视频。FCM算法通过隶属度矩阵和聚类中心矩阵实现图像分割,适用于灰度和彩色图像,广泛应用于医学影像、遥感图像等领域。

热门文章

最新文章

下一篇
无影云桌面