自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

4次優(yōu)化,我把Redis性能 “壓榨” 到極致!

數(shù)據(jù)庫 其他數(shù)據(jù)庫 Redis
我們有個這樣的需求:每天每一個搶購商品只能買一次,并且全場搶購商品總購買次數(shù)不允許超過5次。

 我們有個這樣的需求:每天每一個搶購商品只能買一次,并且全場搶購商品總購買次數(shù)不允許超過5次。那么,整個商品限購的流程大概如下圖所示:

那么,在每次購買成功商品成功后,發(fā)送的MQ大概是這樣的(假設(shè)當前這筆訂單有兩件搶購商品):   

  1. [{  
  2.        "orderId": "2020020622000001",  
  3.        "orderTime": "1581001673012",  
  4.        "productId": "599055114591",  
  5.        "userId": "860000000000001",  
  6.        "merchantCode": "A045"  
  7.    }, {  
  8.        "orderId": "2020020622000001",  
  9.        "orderTime": "1581001673012",  
  10.        "productId": "599055114592",  
  11.        "userId": "860000000000001",  
  12.        "merchantCode": "A045"  
  13.    }] 

這條消息表示860000000000001這個用戶在1581001673012這個時間點(北京時間為2020/02/06 23:07:53)在A045這個商戶分別購買了商品ID為599055114591和599055114592兩樣商品。

那么,當消費這條信息后,更新頻控的幾條關(guān)鍵Redis命令如下(上面的需求不是重點,優(yōu)化下面5條命令才是本文的重點): 

  1. 命令1:hset mall:sale:freq:ctrl:860000000000001 599055114591 1(hash結(jié)構(gòu),field表示購買的商品ID,value表示購買次數(shù))  
  2.  命令2:hset mall:sale:freq:ctrl:860000000000001 599055114592 2  
  3.  命令3:expire mall:sale:freq:ctrl:860000000000001 3127(設(shè)置過期時間)  
  4.  命令4:set mall:total:freq:ctrl:860000000000001 3  
  5.  命令5:expire mall:total:freq:ctrl:860000000000001 3127(設(shè)置過期時間) 

我們首先了解一下執(zhí)行一條Redis命令耗時由哪幾部分組成:發(fā)送命令網(wǎng)絡(luò)傳輸時間,命令在Redis服務端隊列中等待的時間,命令執(zhí)行的時間(Redis中的slowlog只是檢測這一步驟的時間),結(jié)果返回的Redis客戶端的時間。如下圖所示:

上面的業(yè)務總計涉及5條Redis命令,每條命令都需要經(jīng)過這些步驟,可想而知性能真的弱爆了(可能整個執(zhí)行過程還不需要10ms,但還是弱爆了)。

  •  第1次優(yōu)化

第一次優(yōu)化非常簡單,稍微有點經(jīng)驗就能看出來,利用hmset命令將兩條hmset命令合二為一,優(yōu)化后的Redis命令如下:   

  1. hmset mall:sale:freq:ctrl:860000000000001 599055114591 1 599055114592 2  
  2.    expire mall:sale:freq:ctrl:860000000000001 3127  
  3.    set mall:total:freq:ctrl:860000000000001 3  
  4.    expire mall:total:freq:ctrl:860000000000001 3127 
  •  第2次優(yōu)化

第二次優(yōu)化將set和expire命令合二為一,這個一般對Redis有點了解的也知道如何優(yōu)化: 

  1. hmset mall:sale:freq:ctrl:860000000000001 599055114591 1 599055114592 2  
  2. expire mall:sale:freq:ctrl:860000000000001 3127  
  3. setex mall:total:freq:ctrl:860000000000001 3127 3 
  •  第3次優(yōu)化

第3次優(yōu)化需要借助pipeline,簡直就是Redis優(yōu)化的一大殺器。不過,需要注意的是在RedisCluster中使用pipeline時必須滿足pipeline打包的所有命令key在RedisCluster的同一個slot上。如果打包命令的key不在同一個slot上,就會報錯。所以我們需要分兩批打包: 

  1. -- 這兩條命令的key都是一樣的,肯定在同一個slot上  
  2.   pipeline(  
  3.   hmset mall:sale:freq:ctrl:860000000000001 599055114591 1 599055114592 2  
  4.   expire mall:sale:freq:ctrl:860000000000001 3127  
  5.   )  
  6.   -- mall:total:freq:ctrl:860000000000001和mall:sale:freq:ctrl:860000000000001兩條命令不在同一個slot上,所以需要單獨執(zhí)行下面這條命令  
  7.   setex mall:total:freq:ctrl:860000000000001 3127 3 

經(jīng)過第3次的優(yōu)化后,這些命令還是需要2次網(wǎng)絡(luò)交互。較勁的我還是不甘心,想要將其優(yōu)化到只需要一次網(wǎng)絡(luò)交互即可,有沒有辦法?當然有!

  •  第4次優(yōu)化

這次優(yōu)化利用了一個高級特性:hashtag。是啥子意思呢?我們知道,RedisCluster總計有16*1024=16384個slot。那么執(zhí)行一條Redis命令時,其key對應的是哪個slot呢?是利用這樣一個計算公式得到的:slot = CRC16(key)%16384,示意圖如下:

也就是說,默認情況下,key在哪個slot上,與key有關(guān)。那么,我們能否只讓key在哪個slot上與部分key有關(guān)呢?當然可以,這就是hashtag特性。用法非常簡單,假設(shè)一個key是mall:sale:freq:ctrl:860000000000001,我們只需要用{}將key中我們需要的那部分包括起來即可。例如,我們只想讓其根據(jù)用戶IMEI計算即可,那么key是這樣的:mall:sale:freq:ctrl:{860000000000001}。只要key中有{860000000000001}這一部分,就一定落在同一個slot上。

所以,第四次優(yōu)化以后的命令執(zhí)行如下所示: 

  1. pipeline(  
  2. hmset mall:sale:freq:ctrl:${860000000000001} 599055114591 1 599055114592 2  
  3. expire mall:sale:freq:ctrl:${860000000000001} 3127  
  4. setex mall:total:freq:ctrl:${860000000000001} 3127 3 
  5.  

優(yōu)化后,5條Redis命令壓縮到3條Redis命令,并且3條Redis命令只需要發(fā)送一次,并且結(jié)果也一次就能全部返回。簡直完美!!

  •  注意事項

我們在使用hashtag特性時,一定要注意,不能把key的離散性變得非常差。以本文為例,沒有利用hashtag特性之前,key是這樣的:mall:sale:freq:ctrl:860000000000001,很明顯這種key由于與用戶相關(guān),所以離散性非常好。而使用hashtag以后,key是這樣的:mall:sale:freq:ctrl:{860000000000001},這種key還是與用戶相關(guān),所以離散性依然非常好。我們千萬不要這樣來使用hashtag特性,例如將key設(shè)置為:mall:{sale:freq:ctrl}:860000000000001。這樣的話,無論有多少個用戶多少個key,其{}中的內(nèi)容完全一樣都是sale:freq:ctrl,也就是說,所有的key都會落在同一個slot上,導致整個Redis集群出現(xiàn)嚴重的傾斜問題。 

 

責任編輯:龐桂玉 來源: 數(shù)據(jù)庫開發(fā)
相關(guān)推薦

2020-02-19 14:37:11

hashtagRediskey

2011-06-14 14:17:23

性能優(yōu)化系統(tǒng)層次

2011-06-14 11:14:10

性能優(yōu)化代碼

2019-07-25 13:22:43

AndroidAPK文件優(yōu)化

2014-08-29 14:31:36

性能浪潮高性能

2022-08-14 09:00:00

JWT 令牌憑證微服務

2025-03-06 14:00:00

C#性能頁面

2022-03-11 10:23:02

React性能優(yōu)化

2023-12-15 17:09:28

.NET8Primitives性能

2021-06-03 08:01:12

JVM性能優(yōu)化

2023-08-29 17:52:20

人工智能

2010-11-12 15:50:07

谷歌服務器

2021-06-09 10:15:26

優(yōu)化性能顆粒度

2015-03-18 13:18:45

MySQLSQL優(yōu)化

2020-11-06 00:45:29

Linux服務器swap內(nèi)存

2019-07-23 09:20:15

Kafka批量處理客戶端

2021-09-18 10:07:23

開發(fā)技能代碼

2024-03-12 09:47:10

Redis數(shù)據(jù)庫

2024-11-19 08:09:48

2017-09-30 16:18:00

HTML5代碼對象
點贊
收藏

51CTO技術(shù)棧公眾號