基于Snowflake生成全局唯一ID

背景

使用雪花算法生成的主鍵蹬屹,二進制表示形式包含4部分,從高位到低位分表為:1bit符號位白华、41bit時間戳位慨默、10bit工作進程位(也可以區(qū)分5bit數(shù)據(jù)中心、5bit機器ID)以及12bit序列號位弧腥。

  • 符號位(1bit)
    預(yù)留的符號位厦取,恒為零。

  • 時間戳位(41bit)
    41位的時間戳可以容納的毫秒數(shù)是2的41次方減1管搪,一年所使用的毫秒數(shù)是:365 * 24 * 60 * 60 * 1000虾攻。通過計算可知:
    (Math.pow(2, 41) -1) / (365 * 24 * 60 * 60 * 1000L);
    結(jié)果約等于69年。Sharding-Sphere的雪花算法的時間紀(jì)元從2016年11月1日零點開始更鲁,可以使用到2085年霎箍,相信能滿足絕大部分系統(tǒng)的要求。

  • 工作進程位(10bit)
    該標(biāo)志在Java進程內(nèi)是唯一的澡为,如果是分布式應(yīng)用部署應(yīng)保證每個工作進程的id是不同的朋沮。該值默認(rèn)為0,可通過調(diào)用靜態(tài)方法DefaultKeyGenerator.setWorkerId(“xxxx”)設(shè)置缀壤。

  • 序列號位(12bit)
    該序列是用來在同一個毫秒內(nèi)生成不同的ID樊拓。如果在這個毫秒內(nèi)生成的數(shù)量超過4096(2的12次方),那么生成器會等待到下個毫秒繼續(xù)生成塘慕。

代碼樣例

public final class DefaultKeyGenerator {
    public static final long EPOCH;

    private static final long SEQUENCE_BITS = 12L;

    private static final long WORKER_ID_BITS = 10L;

    private static final long SEQUENCE_MASK = (1 << SEQUENCE_BITS) - 1;

    private static final long WORKER_ID_LEFT_SHIFT_BITS = SEQUENCE_BITS;

    private static final long TIMESTAMP_LEFT_SHIFT_BITS = WORKER_ID_LEFT_SHIFT_BITS + WORKER_ID_BITS;

    private static final long WORKER_ID_MAX_VALUE = 1L << WORKER_ID_BITS;

    private static long workerId;

    private static int maxTolerateTimeDifferenceMilliseconds = 10;

    static {
        //也可指定開始年份
        Calendar calendar = Calendar.getInstance();
        calendar.set(2016, Calendar.NOVEMBER, 1);
        calendar.set(Calendar.HOUR_OF_DAY, 0);
        calendar.set(Calendar.MINUTE, 0);
        calendar.set(Calendar.SECOND, 0);
        calendar.set(Calendar.MILLISECOND, 0);
        EPOCH = calendar.getTimeInMillis();
    }

    private byte sequenceOffset;

    private long sequence;

    private long lastMilliseconds;

    /**
     * Set work process id.
     *
     * @param workerId work process id
     */
    public static void setWorkerId(final long workerId) {
        Preconditions.checkArgument(workerId >= 0L && workerId < WORKER_ID_MAX_VALUE);
        DefaultKeyGenerator.workerId = workerId;
    }

    /**
     * Set max tolerate time difference milliseconds.
     *
     * @param maxTolerateTimeDifferenceMilliseconds max tolerate time difference milliseconds
     */
    public static void setMaxTolerateTimeDifferenceMilliseconds(final int maxTolerateTimeDifferenceMilliseconds) {
        DefaultKeyGenerator.maxTolerateTimeDifferenceMilliseconds = maxTolerateTimeDifferenceMilliseconds;
    }

    /**
     * Generate key.
     *
     * @return key type is @{@link Long}.
     */
    public synchronized Number generateKey() {
        long currentMilliseconds = System.currentTimeMillis();
        if (waitTolerateTimeDifferenceIfNeed(currentMilliseconds)) {
            currentMilliseconds = System.currentTimeMillis();
        }
        if (lastMilliseconds == currentMilliseconds) {
            //如果在這個毫秒內(nèi)生成的數(shù)量超過4096(2的12次方)筋夏,那么生成器會等待到下個毫秒繼續(xù)生成
            if (0L == (sequence = (sequence + 1) & SEQUENCE_MASK)) {
                currentMilliseconds = waitUntilNextTime(currentMilliseconds);
            }
        } else {
            //下面方法的sequence只能為0或1,也可以隨機一個值如sequence = RandomUtils.nextLong(0L, 60L) * 60L;
            vibrateSequenceOffset();
            sequence = sequenceOffset;
        }
        lastMilliseconds = currentMilliseconds;
        return ((currentMilliseconds - EPOCH) << TIMESTAMP_LEFT_SHIFT_BITS) | (workerId << WORKER_ID_LEFT_SHIFT_BITS) | sequence;
    }

    @SneakyThrows
    private boolean waitTolerateTimeDifferenceIfNeed(final long currentMilliseconds) {
        if (lastMilliseconds <= currentMilliseconds) {
            return false;
        }
        long timeDifferenceMilliseconds = lastMilliseconds - currentMilliseconds;
        Preconditions.checkState(timeDifferenceMilliseconds < maxTolerateTimeDifferenceMilliseconds,
                "Clock is moving backwards, last time is %d milliseconds, current time is %d milliseconds", lastMilliseconds, currentMilliseconds);
        Thread.sleep(timeDifferenceMilliseconds);
        return true;
    }

    private long waitUntilNextTime(final long lastTime) {
        long result = System.currentTimeMillis();
        while (result <= lastTime) {
            result = System.currentTimeMillis();
        }
        return result;
    }

    private void vibrateSequenceOffset() {
        sequenceOffset = (byte) (~sequenceOffset & 1);
    }
}

單元測試

public class KeyGeneratorTest {
    @Test
    public void test() {
        //工作進程位10位 取值1-1024 默認(rèn)0
        DefaultKeyGenerator.setWorkerId(1000);
        //時鐘回?fù)芡寄兀畲笤试S容忍差異毫秒數(shù)条篷,超過這個時間將返回異常骗随,默認(rèn)10ms
        DefaultKeyGenerator.setMaxTolerateTimeDifferenceMilliseconds(10);
        DefaultKeyGenerator keyGenerator = new DefaultKeyGenerator();
        for(int i=0;i<1000;i++){
            System.out.println(keyGenerator.generateKey());
        }
    }
}

優(yōu)化

為避免需要手動設(shè)置workerId,可通過使用IP地址計算得出workId

public class IPSectionKeyGenerator {
    private final SnowflakeKeyGenerator snowflakeKeyGenerator = new SnowflakeKeyGenerator();

    static {
        InetAddress address;
        try {
            address = InetAddress.getLocalHost();
        } catch (UnknownHostException var8) {
            throw new IllegalStateException("Cannot get LocalHost InetAddress, please check your network!");
        }

        long workerId = 0L;
        byte[] ipAddressByteArray = address.getAddress();
        int ipLength = ipAddressByteArray.length;
        int count = 0;

        flag:
        switch(ipLength) {
            case 4:
                while(true) {
                    if (count >= ipLength) {
                        break flag;
                    }
                    byte byteNum = ipAddressByteArray[count];
                    workerId += byteNum & 255;
                    ++count;
                }
            case 16:
                while(true) {
                    if (count >= ipLength) {
                        break flag;
                    }
                    byte byteNum = ipAddressByteArray[count];
                    workerId += byteNum & 63;
                    ++count;
                }
            default:
                throw new IllegalStateException("Bad LocalHost InetAddress, please check your network!");
        }
        SnowflakeKeyGenerator.setWorkerId(workerId);
    }

    public long generateKey() {
        return this.snowflakeKeyGenerator.generateKey();
    }
}

總結(jié)

雪花算法是由Twitter公布的分布式主鍵生成算法赴叹,它能夠保證不同進程主鍵的不重復(fù)性鸿染,以及相同進程主鍵的有序性。
在同一個進程中乞巧,它首先是通過時間位保證不重復(fù)涨椒,如果時間相同則是通過序列位保證。
同時由于時間位是單調(diào)遞增的绽媒,且各個服務(wù)器如果大體做了時間同步蚕冬,那么生成的主鍵在分布式環(huán)境可以認(rèn)為是總體有序的。同時代碼對于時鐘回?fù)軉栴}也做了相應(yīng)的處理是辕。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末囤热,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子获三,更是在濱河造成了極大的恐慌旁蔼,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,734評論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件疙教,死亡現(xiàn)場離奇詭異牌芋,居然都是意外死亡,警方通過查閱死者的電腦和手機松逊,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評論 3 394
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來肯夏,“玉大人经宏,你說我怎么就攤上這事⊙被鳎” “怎么了烁兰?”我有些...
    開封第一講書人閱讀 164,133評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長徊都。 經(jīng)常有香客問我沪斟,道長,這世上最難降的妖魔是什么暇矫? 我笑而不...
    開封第一講書人閱讀 58,532評論 1 293
  • 正文 為了忘掉前任主之,我火速辦了婚禮,結(jié)果婚禮上李根,老公的妹妹穿的比我還像新娘槽奕。我一直安慰自己,他們只是感情好房轿,可當(dāng)我...
    茶點故事閱讀 67,585評論 6 392
  • 文/花漫 我一把揭開白布粤攒。 她就那樣靜靜地躺著所森,像睡著了一般。 火紅的嫁衣襯著肌膚如雪夯接。 梳的紋絲不亂的頭發(fā)上焕济,一...
    開封第一講書人閱讀 51,462評論 1 302
  • 那天,我揣著相機與錄音盔几,去河邊找鬼晴弃。 笑死,一個胖子當(dāng)著我的面吹牛问欠,可吹牛的內(nèi)容都是我干的肝匆。 我是一名探鬼主播,決...
    沈念sama閱讀 40,262評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼顺献,長吁一口氣:“原來是場噩夢啊……” “哼映跟!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起挣轨,我...
    開封第一講書人閱讀 39,153評論 0 276
  • 序言:老撾萬榮一對情侶失蹤宵溅,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后肿轨,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體寿冕,經(jīng)...
    沈念sama閱讀 45,587評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,792評論 3 336
  • 正文 我和宋清朗相戀三年椒袍,在試婚紗的時候發(fā)現(xiàn)自己被綠了驼唱。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,919評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡驹暑,死狀恐怖玫恳,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情优俘,我是刑警寧澤京办,帶...
    沈念sama閱讀 35,635評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站帆焕,受9級特大地震影響惭婿,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜叶雹,卻給世界環(huán)境...
    茶點故事閱讀 41,237評論 3 329
  • 文/蒙蒙 一财饥、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧折晦,春花似錦佑力、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,855評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽暴拄。三九已至,卻和暖如春编饺,著一層夾襖步出監(jiān)牢的瞬間乖篷,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,983評論 1 269
  • 我被黑心中介騙來泰國打工透且, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留撕蔼,地道東北人。 一個月前我還...
    沈念sama閱讀 48,048評論 3 370
  • 正文 我出身青樓秽誊,卻偏偏與公主長得像鲸沮,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子锅论,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,864評論 2 354

推薦閱讀更多精彩內(nèi)容

  • 在分布式系統(tǒng)中常會需要生成系統(tǒng)唯一ID讼溺,生成ID有很多方法,根據(jù)不同的生成策略最易,以滿足不同的場景怒坯、需求以及性能要求...
    夏與清風(fēng)閱讀 3,442評論 0 2
  • 每個公司的業(yè)務(wù)場景不同,生成唯一ID藻懒、序列號或者單號的方案也都不一樣剔猿,這邊簡單列舉一些常見的方案: 一、 數(shù)據(jù)庫自...
    晚歌歌閱讀 4,688評論 0 2
  • 一嬉荆、前言 這周網(wǎng)上的各種瓜真的是吃到肚子里都是水啊归敬。按照慣例周末聊點輕松的,這次我們講幾種全局唯一ID鄙早。 平常一些...
    道聽真說閱讀 579評論 0 1
  • 久違的晴天汪茧,家長會。 家長大會開好到教室時蝶锋,離放學(xué)已經(jīng)沒多少時間了。班主任說已經(jīng)安排了三個家長分享經(jīng)驗什往。 放學(xué)鈴聲...
    飄雪兒5閱讀 7,523評論 16 22
  • 今天感恩節(jié)哎扳缕,感謝一直在我身邊的親朋好友。感恩相遇别威!感恩不離不棄躯舔。 中午開了第一次的黨會,身份的轉(zhuǎn)變要...
    迷月閃星情閱讀 10,564評論 0 11