国产精品电影_久久视频免费_欧美日韩国产激情_成年人视频免费在线播放_日本久久亚洲电影_久久都是精品_66av99_九色精品美女在线_蜜臀a∨国产成人精品_冲田杏梨av在线_欧美精品在线一区二区三区_麻豆mv在线看

高并發業務下的庫存扣減方案

開發 架構
商品庫存數據在DB最終會落到單庫單表的一行數據。無法通過分庫分表提高請求的并行度。而在單節點場景,數據庫吞吐遠不如Redis。最基礎的原因:IO效率不是一個量級,DB是磁盤操作,而且還可能要多次讀盤,Redis是一步到位的內存操作。

扣減庫存需要查詢庫存是否足夠:

  • 足夠就占用庫存
  • 不夠則返回庫存不足(這里不區分庫存可用、占用、已消耗等狀態,統一成扣減庫存數量,簡化場景)

并發場景,若 查詢庫存和扣減庫存不具備原子性,就可能超賣,而高并發場景超賣概率會增高,超賣數額也會增高。處理超賣的確麻煩:

  • 系統全鏈路刷數會很麻煩(多團隊協作),客服外呼也有額外成本
  • 最主要原因,客戶搶到訂單又被取消,嚴重影響客戶體驗,甚至引發客訴產生公關危機

實現邏輯

常用方案redis+lua,借助redis單線程執行+lua腳本中的邏輯,可在一次執行中順序完成的特性達到原子性(叫排它性更準確,因為不具備回滾動作,異常情況需自己手動編碼回滾)。

lua腳本基本實現

圖片圖片

-- 1. 獲取庫存緩存key KYES[1] = hot_{itemCode-skuCode}_stock
local hot_item_stock = KYES[1]

-- 2. 獲取剩余庫存數量
local stock = tonumber(redis.call('get', hot_item_stock))

-- 3. 購買數量
local buy_qty = tonumber(ARGV[1])

-- 4. 如果庫存小于購買數量,則返回1,表達庫存不足
if stock < buy_qty then
  return 1
end

-- 5. 庫存足夠,更新庫存數量
stock = stock - buy_qty
redis.call('set', hot_item_stock, tostring(stock))

-- 6. 扣減成功則返回2,表達庫存扣減成功
return 2

但腳本還有一些問題:

  • 不具備冪等性,同個訂單多次執行會導致重復扣減,手動回滾也無法判斷是否會回滾過,會出現重復增加的問題
  • 不具備可追溯性,不知道庫存被誰被哪個訂單扣減了

增強后的lua腳本:

-- 1. 獲取庫存扣減記錄緩存 key KYES[2] = hot_{itemCode-skuCode}_deduction_history
local  hot_deduction_history = KYES[2]

-- 2. 使用 Redis Cluster hash tag 保證 stock 和 history 在同一個槽
local exist = redis.call('hexists', hot_deduction_history, ARGV[2])
-- 3. 請求冪等判斷,存在返回0,表達已扣減過庫存
if exist == 1 then return 0 end

-- 4. 獲取庫存緩存key KYES[1] = hot_{itemCode-skuCode}_stock
local hot_item_stock = KYES[1]

-- 5. 獲取剩余庫存數量
local stock = tonumber(redis.call('get', hot_item_stock))

-- 6. 購買數量
local buy_qty = tonumber(ARGV[1])

-- 7. 如果庫存小于購買數量 則返回1,表達庫存不足
if stock < buy_qty then return 1 end

-- 8. 庫存足夠
-- 9. 1.更新庫存數量
-- 10. 2.插入扣減記錄 ARGV[2] = ${扣減請求唯一key} - ${扣減類型} 值為 buy_qty
stock = stock - buy_qty
redis.call('set', hot_item_stock, tostring(stock))
redis.call('hset', hot_deduction_history, ARGV[2], buy_qty)

-- 11. 如果剩余庫存等于0則返回2,表達庫存已為0
if stock == 0 then return 2 end

-- 12. 剩余庫存不為0返回 3 表達還有剩余庫存
return 3 end

利用Redis Cluster hash tag保證stock和history在同個槽,這樣lua腳本才能正常執行。

因為正常要求 Lua 腳本操作的鍵必須在同一個 slot 中。

@Override
public <T, R> RFuture<R> evalReadAsync(String key, Codec codec, RedisCommand<T> evalCommandType, String script, List<Object> keys, Object... params) {
 NodeSource source = getNodeSource(key);
 return evalAsync(source, true, codec, evalCommandType, script, keys, false, params);
}

 private NodeSource getNodeSource(String key) {
     int slot = connectionManager.calcSlot(key);
     return new NodeSource(slot);
 }”

利用hot_deduction_history,判斷扣減請求是否執行過,以實現冪等性。

借助hot_deduction_history的V值判斷追溯扣減來源,如:用戶A的交易訂單A的扣減請求,或用戶B的借出單B的扣減請求。

回滾邏輯先判斷hot_deduction_history里有沒有 ${扣減請求唯一key}:

  • 有,則執行回補邏輯
  • 沒有,則認定回補成功

但該邏輯依舊有漏洞,如(消息亂序消費),訂單扣減庫存超時成功觸發了重新扣減庫存,但同時訂單取消觸發了庫存扣減回滾,回滾邏輯先成功,超時成功的重新扣減庫存就會成為臟數據留在redis里。

處理方案

有兩種:

  • 追加對賬,定期校驗hot_deduction_history中數據對應單據的狀態,對于已經取消的單據追加一次回滾請求,存在時延(業務不一定接受)以及額外計算資源開銷
  • 使用順序消息,讓扣減庫存、回滾庫存都走同一個MQ topic的有序隊列,借助MQ消息的有序性保證回滾動作一定在扣減動作后面執行,但有序串行必然帶來性能下降

高可用

Redis終究是內存,一旦服務中斷,數據就消失。所以需要追加保護數據不丟失的方案。

運用Redis部署的高可用方案:

  • 采用Redis Cluster(數據分片+ 多副本 + 同步多寫 + 主從自動選舉)
  • 多寫節點分(同城異地)多中心防止意外災害

定期歸檔冷數據。定期 + 庫存為0觸發redis數據往DB同步,流程如下:

圖片圖片

CDC分發數據時,秒殺商品,hot_deduction_history的數據量不高,可以一次全量同步。但如果是普通大促商品,就需要再追加一個map動作分批處理,以保證每次執行CDC的數據量恒定,不至于一次性數據量太大出現OOM。代碼如下:

/**
 * 對任務做分發
 * @param stockKey 目標庫存的key值
 */
public void distribute(String stockKey) {
    final String historyKey = StrUtil.format("hot_{}_deduction_history", stockKey);
    // 獲取指定庫存key 所有扣減記錄的key(生產請分頁獲取,防止數據量太多)
    final List<String> keys = RedisUtil.hkeys(historyKey, stockKey);
    // 以 100 為大小,分片所有記錄key
    final List<List<String>> splitKeys = CollUtil.split(keys, 100);
    // 將集合分發給各個節點執行
    map(historyKey, splitKeys);
}

/**
 * 對單頁任務做執行
 * @param historyKey 目標庫存的key值
 * @param stockKeys 要執行的頁面大小
 */
public void mapExec(String historyKey, List<String> stockKeys) {
    // 獲取指定庫存key 指定扣減記錄 的map
    final Map<String, String> keys = RedisUtil.HmgetToMap(historyKey, stockKeys);
    keys.entrySet()
        .stream()
        .map(stockRecordFactory::of)
        .forEach(stockRecord -> {
            // (冪等 + 去重) 扣減 + 保存記錄
            stockConsumer.exec(stockRecord);
            // 刪除redis中的 key 釋放空間
            RedisUtil.hdel(historyKey, stockRecord.getRecordRedisKey());
        });
}

為啥不走DB

商品庫存數據在DB最終會落到單庫單表的一行數據。無法通過分庫分表提高請求的并行度。而在單節點場景,數據庫吞吐遠不如Redis。最基礎的原因:IO效率不是一個量級,DB是磁盤操作,而且還可能要多次讀盤,Redis是一步到位的內存操作。

同時,一般DB都是提交讀隔離級別,為保證原子性,執行庫存扣減,得加鎖,無論悲觀樂觀。不僅性能差(搶不到鎖要等待),而且因為非公平競爭,易出現線程饑餓。而redis是單線程操作,不存在共享變量競爭。

有些優化思路,如合并扣減,走批降低請求的并行連接數。但伴隨的集單的時延,以及按庫分批的訴求;還有拆庫存行,商品A100個庫存拆成2行商品A50庫存,然后扣減時分發請求,以提高并行連接數(多行可落在不同庫來提高并行連接數)。但伴隨的:

  • 復雜的庫存行拆分管理(把什么庫存行在什么時候拆分到哪些庫)
  • 部分庫存行超賣的問題(加鎖優化就又串行了,不加總量還有庫存,個別庫存行不足是允許一定系數超賣還是返回庫存不足就是一個要決策的問題)

部分頭部電商采用弱緩存抗讀(非庫存不足,不實時更新),DB抗寫的方案。該方案前提在于,通過一系列技術方案,流量落到庫存已相對低且平滑了(扛得住,不用再自己實現操作原子性)。

作者簡介:魔都架構師,多家大廠后端一線研發經驗,在分布式系統設計、數據平臺架構和AI應用開發等領域都有豐富實踐經驗。

各大技術社區頭部專家博主。具有豐富的引領團隊經驗,深厚業務架構和解決方案的積累。

負責:

  • 中央/分銷預訂系統性能優化
  • 活動&券等營銷中臺建設
  • 交易平臺及數據中臺等架構和開發設計
  • 車聯網核心平臺-物聯網連接平臺、大數據平臺架構設計及優化
  • LLM Agent應用開發
  • 區塊鏈應用開發
  • 大數據開發挖掘經驗
  • 推薦系統項目

目前主攻市級軟件項目設計、構建服務全社會的應用系統。

參考:編程嚴選網

責任編輯:武曉燕 來源: JavaEdge
相關推薦

2022-09-19 09:49:17

MCube網絡引擎

2021-08-26 08:24:33

高并發秒殺系統

2021-06-09 18:52:05

方案設計庫存數

2025-03-11 08:36:52

高并發場景性能

2017-06-16 16:16:36

庫存扣減查詢

2025-06-27 02:00:00

Spring高并發庫存

2025-01-27 00:40:41

2025-02-26 08:10:40

2024-06-20 07:59:49

2024-10-10 08:32:28

Redis高并發Lua

2024-01-31 13:02:00

高并發熱點散列庫存分桶

2025-03-10 09:20:00

庫存異常Redis架構

2025-03-31 10:42:31

2023-10-07 08:54:28

項目httpPost對象

2025-01-20 00:00:03

高并發秒殺業務

2012-04-24 09:30:57

淘寶開發

2022-03-31 17:38:09

高并發系統架構設計負載均衡
點贊
收藏

51CTO技術棧公眾號

婷婷开心激情综合| 日韩电影免费观看| 欧美福利在线播放网址导航| 婷婷中文字幕一区三区| 欧美中文娱乐网| 欧美一区高清| 精品国产一区二区三区久久影院| 亚洲精品在线视频观看| 福利一区视频| 99久久精品国产麻豆演员表| 26uuu精品一区二区三区四区在线| 国产欧美一区二区三区视频| 蜜桃av.网站在线观看| 国产精品magnet| 国产欧美日韩综合精品| 黄色软件在线| 亚洲国产视频二区| 欧美顶级少妇做爰| 日本网站免费在线观看| 精品中文字幕一区二区三区四区| 日韩成人免费视频| 在线综合视频网站| ****av在线网毛片| 亚洲高清免费视频| 岛国大片在线播放| 亚洲精品观看| 青青草国产精品视频| 日韩亚洲在线观看| 色老头在线一区二区三区| 亚洲无线码在线一区观看| 日本在线电影一区二区三区| 国产亚洲精品高潮| 中文字幕色婷婷在线视频| 欧美成人艳星乳罩| 在线中文免费视频| 97超碰国产精品女人人人爽| 在线观看h网址| 久久久噜噜噜久久人人看 | 国产日韩欧美在线观看| 国产原创精品| 99色在线播放| 亚洲久久视频| 欧美日韩1区2区| 伊人网在线视频| 亚洲午夜羞羞片| 在线手机福利影院| 婷婷国产v国产偷v亚洲高清| av网站免费在线| 亚洲欧美偷拍另类a∨色屁股| 国产精品久久久毛片| 国产日产欧产精品推荐色| 日本va中文字幕| 国产精品传媒入口麻豆| 久草在线免费二| 亚洲成av人片www| 超碰免费在线| 日韩精品免费观看| 成人亚洲综合| 91产国在线观看动作片喷水| 精品国产精品国产偷麻豆| 国产这里只有精品| 伊人久久亚洲影院| 香蕉精品视频在线| 99久久精品免费| av在线影视| 欧美三区在线观看| 成人观看网址| 蜜臀久久99精品久久久久久宅男| 欧美freesex8一10精品| 亚洲高清二区| 在线播放国产区| 久久久国产一区| 国产一区二区三区毛片| 国产麻豆一区二区三区精品视频| 欧美激情精品久久久久久变态 | 亚洲精品日产| 国产成人小视频| 在线视频网站| 国产一区二区三区在线观看网站| 韩国在线一区| 亚洲欧美国产精品| 99ri日韩精品视频| 国产欧美日韩中文| 美腿丝袜在线亚洲一区 | 国产精品吹潮在线观看| 欧美一区二区| a级黄色片网站| 怡红院av一区二区三区| 美女国产在线| 美女黄色丝袜一区| 欧美欧美全黄| youjizz.com在线观看| 亚洲成人免费观看| 吞精囗交69激情欧美| 成人av资源在线播放| 成人午夜短视频| av在线收看| 91精品国产99久久久久久| 男人的天堂亚洲一区| 久久白虎精品| 日韩在线免费观看视频| 欧美三区在线| 日日躁夜夜躁aaaabbbb| 精品国产亚洲一区二区三区在线观看| 亚州综合一区| 鲁一鲁一鲁一鲁一色| 欧美日韩精品是欧美日韩精品| 欧美欧美在线| www亚洲国产| 91高清视频免费看| 精品三级av| 日韩精品免费一区| 欧美丰满美乳xxx高潮www| 国产91精品对白在线播放| 女同性恋一区二区| 91久久精品一区二区三区| 欧美日韩午夜电影网| 欧美性受xxxx黑人猛交| 久久精品在线视频| 久久影院午夜论| 欧美一级电影网站| 国产精品毛片久久久| 欧美一区二区高清在线观看| 亚洲欧洲av在线| 久久99久久99精品免观看软件| 成人性色av| 国产精品传媒入口麻豆| 国产高清不卡| 欧美成人第一区| 午夜私人影院久久久久| 日韩一二三区在线观看| 中文字幕中文字幕一区三区| 色婷婷一区二区| blacked蜜桃精品一区| 一区二区三区免费播放| 日韩中文在线中文网在线观看| 视频一区在线播放| 天堂资源在线中文| 91九色在线观看| 亚洲电影一级黄| 大片网站久久| 黄页网址在线观看| 国产精品情侣自拍| 亚洲男人电影天堂| 玖玖玖免费嫩草在线影院一区| 国产日韩亚洲欧美在线| 欧美精品一区二区不卡| 久久婷婷亚洲| 大片免费在线看视频| 国产一区二区三区高清| 欧美影院精品一区| 国产精品v亚洲精品v日韩精品| 日本黄在线观看| 99re在线观看| 欧美精品乱码久久久久久按摩| 亚洲大胆av| 久久国产精品黑丝| 天天爱天天做天天操| 亚洲欧洲xxxx| 26uuu久久天堂性欧美| 国产伦精品一区二区三区在线播放| 四虎永久在线精品无码视频| 久久久精品视频成人| 国产区在线观看成人精品| 久久综合另类图片小说| 午夜av电影| 国产精品国模大尺度私拍| 欧美日韩一区视频| 日本不卡视频一二三区| 免费毛片b在线观看| 国产精品视频网站在线观看| 久久综合免费视频| 亚洲欧美日韩国产另类专区 | 色网址在线观看| 成年人视频免费在线观看| 精品国产一区二区三区在线| 欧美日韩综合一区| 伊人久久久大香线蕉综合直播| 在线视频二区| 亚洲成人第一| 中文字幕一区二区精品| 国产欧美日韩在线观看| 国产aⅴ精品一区二区三区久久| 午夜在线网站| 日本不卡在线播放| 色偷偷av一区二区三区| 亚洲欧洲精品成人久久奇米网| 波多野结衣在线观看一区二区| 98在线视频| 欧美一级中文字幕| 国产69精品久久久久久| 色吊一区二区三区| 国产一区999| 香蕉久久精品日日躁夜夜躁| 黄色在线播放| www.欧美黄色| 国产精品一区=区| 日韩不卡在线观看| 亚洲欧美精品午睡沙发| 久久精品盗摄|