摘要:使用生成很多都是在分布式場(chǎng)景下使用,我看了下網(wǎng)上有其中有幾篇實(shí)現(xiàn)的都沒(méi)有考慮到線程安全。現(xiàn)在有了的鎖和協(xié)程的加持,對(duì)于我們開(kāi)發(fā)線程安全和高并發(fā)模擬還是很方便的,這里用結(jié)合來(lái)學(xué)習(xí)下實(shí)現(xiàn)最簡(jiǎn)單的好久沒(méi)寫(xiě),感覺(jué)沒(méi)有真寫(xiě)不了了。
Twitter 的 snowflake 在分布式生成唯一 UUID 應(yīng)用還是蠻廣泛的,基于 snowflake 的一些變種的算法網(wǎng)上也有不少。使用 snowflake 生成 UUID 很多都是在分布式場(chǎng)景下使用,我看了下網(wǎng)上有其中有幾篇 PHP 實(shí)現(xiàn)的都沒(méi)有考慮到線程安全。現(xiàn)在 PHP 有了 Swoole 的鎖和協(xié)程的加持,對(duì)于我們開(kāi)發(fā)線程安全和高并發(fā)模擬還是很方便的,這里用 PHP 結(jié)合 Swoole 來(lái)學(xué)習(xí)下實(shí)現(xiàn)最簡(jiǎn)單的 snowflake(好久沒(méi)寫(xiě) PHP,感覺(jué)沒(méi)有 IDE 真寫(xiě)不了 PHP 了)。
先來(lái)看以下 snowflake 的結(jié)構(gòu):
生成的數(shù)值是 64 位,分成 4 個(gè)部分:
第一個(gè) bit 為符號(hào)位,最高位為 0 表示正數(shù)
第二部分 41 個(gè) bit 用于記錄生成 ID 時(shí)候的時(shí)間戳,單位為毫秒,所以該部分表示的數(shù)值范圍為 2^41 - 1(69 年),它是相對(duì)于某一時(shí)間的偏移量
第三部分的 10 個(gè) bit 表示工作節(jié)點(diǎn)的 ID,表示數(shù)值范圍為 2^10 - 1,相當(dāng)于支持 1024 個(gè)節(jié)點(diǎn)
第四部分 12 個(gè) bit 表示每個(gè)工作節(jié)點(diǎn)沒(méi)毫秒生成的循環(huán)自增 id,最多可以生成 2^12 -1 個(gè) id,超出歸零等待下一毫秒重新自增
先貼下代碼:
self::WORKER_MAX) { trigger_error("Worker ID 超出范圍"); exit(0); } $this->timestamp = 0; $this->workerId = $workerId; $this->sequence = 0; $this->lock = new swoole_lock(SWOOLE_MUTEX); } /** * 生成ID * @return int */ public function getId() { $this->lock->lock(); // 這里一定要記得加鎖 $now = $this->now(); if ($this->timestamp == $now) { $this->sequence++; if ($this->sequence > self::SEQUENCE_MAX) { // 當(dāng)前毫秒內(nèi)生成的序號(hào)已經(jīng)超出最大范圍,等待下一毫秒重新生成 while ($now <= $this->timestamp) { $now = $this->now(); } } } else { $this->sequence = 0; } $this->timestamp = $now; // 更新ID生時(shí)間戳 $id = (($now - self::EPOCH) << self::TIME_SHIFT) | ($this->workerId << self::WORKER_SHIFT) | $this->sequence; $this->lock->unlock(); //解鎖 return $id; } /** * 獲取當(dāng)前毫秒 * @return string */ public function now() { return sprintf("%.0f", microtime(true) * 1000); } }
其實(shí)邏輯并不復(fù)雜,解釋一下代碼中的位運(yùn)算:
-1 ^ (-1 << self::SEQUENCE_BITS) 就是-1的二進(jìn)制表示為1的補(bǔ)碼,其實(shí)等同于 : 2**self::SEQUENCE_BITS - 1
最后部分左移后或運(yùn)算:
(($now - self::EPOCH) << self::TIME_SHIFT) | ($this->workerId << self::WORKER_SHIFT) | $this->sequence;
這里主要是對(duì)除了第一位符號(hào)位以外的三個(gè)部分進(jìn)行左移相應(yīng)的偏移量使其歸位,并通過(guò)或運(yùn)算重新整合成上面 snowflake 的結(jié)構(gòu),比如我們用 3 部分 4 位來(lái)演示一下該歸并操作:
0000 0000 0010 --左移0位--> 0000 0000 0010 0000 0000 0100 --左移4位--> 0000 0100 0000 --或操作-->1000 0100 0010 0000 0000 1000 --左移8位--> 1000 0000 0000
下面借助 Swoole 的協(xié)程和 channel 來(lái)暴力測(cè)試一下,看看生成的 ID 是否會(huì)出現(xiàn)重復(fù)的狀況:
$snowflake = new Snowflake(1); $chan = new chan(100000); $n = 100000; for ($i = 0; $i < $n; $i++) { go(function () use ($snowflake, $chan) { $id = $snowflake->getId(); $chan->push($id); }); } go(function () use ($chan, $n) { $arr = []; for ($i = 0; $i < $n; $i++) { $id = $chan->pop(); if (in_array($id, $arr)) { exit("ID 已存在"); } array_push($arr, $id); } }); $chan->close(); echo "ok";
跑了一下,確實(shí)不會(huì)出現(xiàn)重復(fù)的 ID,對(duì)了,我用 Golang 同樣實(shí)現(xiàn)了 snowflake 并協(xié)程序方式跑了同樣的測(cè)試,PHP 的執(zhí)行時(shí)間是大約 12 秒左右,Golang 只需要 1 秒。文章有什么錯(cuò)誤還請(qǐng)指正,謝謝。
轉(zhuǎn)載請(qǐng)注明: 轉(zhuǎn)載自Ryan 是菜鳥(niǎo) | LNMP 技術(shù)棧筆記
如果覺(jué)得本篇文章對(duì)您十分有益,何不 打賞一下
本文鏈接地址: PHP 實(shí)現(xiàn) Snowflake 生成分布式唯一 ID
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://specialneedsforspecialkids.com/yun/29702.html
摘要:所以就誕生了這個(gè)項(xiàng)目,以下為線程安全版本和非線程安全版本差別。非線程安全版本線程安全版本安裝示例注意區(qū)間在超出范圍將會(huì)報(bào)告一個(gè)致命錯(cuò)誤協(xié)議版權(quán)歸屬于請(qǐng)遵守協(xié)議 php_snowflake 項(xiàng)目地址 什么是 php_snowflake? 推特分布式id生成算法SnowFlake PHP 的實(shí)現(xiàn) 需求 PHP >= 5.6 (5.5以下的自行測(cè)試) 不支持windows 說(shuō)明 純PH...
摘要:原文地址唯一的生成并不是一件小事想說(shuō)愛(ài)它也并不是像簡(jiǎn)單來(lái)一個(gè)這樣一件容易的事為什么要唯一數(shù)據(jù)庫(kù)的自增在分庫(kù)的時(shí)候會(huì)是一場(chǎng)災(zāi)難假設(shè)分兩個(gè)庫(kù)因?yàn)槊總€(gè)庫(kù)都會(huì)開(kāi)始從開(kāi)始自增屆時(shí)系統(tǒng)中將會(huì)出現(xiàn)兩個(gè)為的用戶自增會(huì)暴露用戶量或者其他業(yè)務(wù)量自增會(huì)讓有心者 [原文地址:https://blog.ti-node.com/blog...] 唯一ID的生成并不是一件小事 , 想說(shuō)愛(ài)它 , 也并不是像簡(jiǎn)單來(lái)一個(gè)...
摘要:出于以上兩個(gè)原因,我們需要自己的發(fā)號(hào)器來(lái)產(chǎn)生。與此同時(shí),為了保證執(zhí)行,具有原子性,我們使用來(lái)進(jìn)行實(shí)現(xiàn)。由于能力和水平有限,難免會(huì)有紕漏,希望及時(shí)指出。參考文章分布式生成器實(shí)現(xiàn)上實(shí)現(xiàn)原理 1、為什么要實(shí)現(xiàn)發(fā)號(hào)器 很多地方我們都需要一個(gè)全局唯一的編號(hào),也就是uuid。舉一個(gè)常見(jiàn)的場(chǎng)景,電商系統(tǒng)產(chǎn)生訂單的時(shí)候,需要有一個(gè)對(duì)應(yīng)的訂單編號(hào)。在composer上我們也可以看到有很多可以產(chǎn)生uuid...
閱讀 1155·2021-10-15 09:39
閱讀 3052·2021-09-10 10:50
閱讀 3454·2019-08-30 15:53
閱讀 1877·2019-08-30 15:52
閱讀 2565·2019-08-29 15:31
閱讀 1978·2019-08-26 13:43
閱讀 2594·2019-08-26 13:37
閱讀 1444·2019-08-23 18:31