亚洲综合原千岁中文字幕_国产精品99久久久久久久vr_无码人妻aⅴ一区二区三区浪潮_成人h动漫精品一区二区三

主頁 > 知識庫 > Redis中哈希分布不均勻的解決辦法

Redis中哈希分布不均勻的解決辦法

熱門標簽:北京400電話辦理收費標準 日本中國地圖標注 十堰營銷電銷機器人哪家便宜 超呼電話機器人 宿遷便宜外呼系統(tǒng)平臺 山東外呼銷售系統(tǒng)招商 魔獸2青云地圖標注 貴州電銷卡外呼系統(tǒng) 鄭州人工智能電銷機器人系統(tǒng)

Redis 是一個鍵值對數(shù)據(jù)庫,其鍵是通過哈希進行存儲的。整個 Redis 可以認為是一個外層哈希,之所以稱為外層哈希,是因為 Redis 內部也提供了一種哈希類型,這個可以稱之為內部哈希。當我們采用哈希對象進行數(shù)據(jù)存儲時,對整個 Redis 而言,就經過了兩層哈希存儲。

哈希對象

哈希對象本身也是一個 key-value 存儲結構,底層的存儲結構也可以分為兩種:ziplist(壓縮列表) 和 hashtable(哈希表)。這兩種存儲結構也是通過編碼來進行區(qū)分:

編碼屬性 描述 object encoding命令返回值
OBJ_ENCODING_ZIPLIST 使用壓縮列表實現(xiàn)哈希對象 ziplist
OBJ_ENCODING_HT 使用字典實現(xiàn)哈希對象 hashtable

hashtable

Redis 中的 key-value 是通過 dictEntry 對象進行包裝的,而哈希表就是將 dictEntry 對象又進行了再一次的包裝得到的,這就是哈希表對象 dictht

typedef struct dictht {
  dictEntry **table;//哈希表數(shù)組
  unsigned long size;//哈希表大小
  unsigned long sizemask;//掩碼大小,用于計算索引值,總是等于size-1
  unsigned long used;//哈希表中的已有節(jié)點數(shù)
} dictht;

注意:上面結構定義中的 table 是一個數(shù)組,其每個元素都是一個 dictEntry 對象。

字典

字典,又稱為符號表(symbol table),關聯(lián)數(shù)組(associative array)或者映射(map),字典的內部嵌套了哈希表 dictht 對象,下面就是一個字典 ht 的定義:

typedef struct dict {
  dictType *type;//字典類型的一些特定函數(shù)
  void *privdata;//私有數(shù)據(jù),type中的特定函數(shù)可能需要用到
  dictht ht[2];//哈希表(注意這里有2個哈希表)
  long rehashidx; //rehash索引,不在rehash時,值為-1
  unsigned long iterators; //正在使用的迭代器數(shù)量
} dict;

其中 dictType 內部定義了一些常用函數(shù),其數(shù)據(jù)結構定義如下:

typedef struct dictType {
  uint64_t (*hashFunction)(const void *key);//計算哈希值函數(shù)
  void *(*keyDup)(void *privdata, const void *key);//復制鍵函數(shù)
  void *(*valDup)(void *privdata, const void *obj);//復制值函數(shù)
  int (*keyCompare)(void *privdata, const void *key1, const void *key2);//對比鍵函數(shù)
  void (*keyDestructor)(void *privdata, void *key);//銷毀鍵函數(shù)
  void (*valDestructor)(void *privdata, void *obj);//銷毀值函數(shù)
} dictType;

當我們創(chuàng)建一個哈希對象時,可以得到如下簡圖(部分屬性被省略):

rehash 操作

dict 中定義了一個數(shù)組 ht[2]ht[2] 中定義了兩個哈希表:ht[0]ht[1]。而 Redis 在默認情況下只會使用 ht[0],并不會使用 ht[1],也不會為 ht[1] 初始化分配空間。

當設置一個哈希對象時,具體會落到哈希數(shù)組(上圖中的 dictEntry[3])中的哪個下標,是通過計算哈希值來確定的。如果發(fā)生哈希碰撞(計算得到的哈希值一致),那么同一個下標就會有多個 dictEntry,從而形成一個鏈表(上圖中最右邊指向 NULL 的位置),不過需要注意的是最后插入元素的總是落在鏈表的最前面(即發(fā)生哈希沖突時,總是將節(jié)點往鏈表的頭部放)。

當讀取數(shù)據(jù)的時候遇到一個節(jié)點有多個元素,就需要遍歷鏈表,故鏈表越長,性能越差。為了保證哈希表的性能,需要在滿足以下兩個條件中的一個時,對哈希表進行 rehash(重新散列)操作:

負載因子大于等于 1dict_can_resize1 時。負載因子大于等于安全閾值(dict_force_resize_ratio=5)時。

PS:負載因子 = 哈希表已使用節(jié)點數(shù) / 哈希表大小(即:h[0].used/h[0].size)。

rehash 步驟

擴展哈希和收縮哈希都是通過執(zhí)行 rehash 來完成,這其中就涉及到了空間的分配和釋放,主要經過以下五步:

為字典 dictht[1] 哈希表分配空間,其大小取決于當前哈希表已保存節(jié)點數(shù)(即:ht[0].used):

如果是擴展操作則 ht[1] 的大小為 2 的 n次方中第一個大于等于ht[0].used * 2屬性的值(比如used=3,此時ht[0].used * 2=6,故 23次方為8就是第一個大于used * 2 的值(2 的 2 次方 6 且 2 的 3 次方 > 6))。 如果是收縮操作則 ht[1] 大小為 2 的 n 次方中第一個大于等于 ht[0].used 的值。

將字典中的屬性 rehashix 的值設置為 0,表示正在執(zhí)行 rehash 操作。

ht[0] 中所有的鍵值對依次重新計算哈希值,并放到 ht[1] 數(shù)組對應位置,每完成一個鍵值對的 rehash之后 rehashix 的值需要自增 1

ht[0] 中所有的鍵值對都遷移到 ht[1] 之后,釋放 ht[0] ,并將 ht[1] 修改為 ht[0],然后再創(chuàng)建一個新的 ht[1] 數(shù)組,為下一次 rehash 做準備。

將字典中的屬性 rehashix 設置為 -1,表示此次 rehash 操作結束,等待下一次 rehash

漸進式 rehash

Redis 中的這種重新哈希的操作因為不是一次性全部 rehash,而是分多次來慢慢的將 ht[0] 中的鍵值對 rehashht[1],故而這種操作也稱之為漸進式 rehash。漸進式 rehash 可以避免集中式 rehash 帶來的龐大計算量,是一種分而治之的思想。

在漸進式 rehash 過程中,因為還可能會有新的鍵值對存進來,此時** Redis 的做法是新添加的鍵值對統(tǒng)一放入 ht[1] 中,這樣就確保了 ht[0] 鍵值對的數(shù)量只會減少**。

當正在執(zhí)行 rehash操作時,如果服務器收到來自客戶端的命令請求操作,則會先查詢 ht[0],查找不到結果再到ht[1] 中查詢。

ziplist

關于 ziplist 的一些特性,之前的文章中有單獨進行過分析,想要詳細了解的,可以點擊這里。但是需要注意的是哈希對象中的 ziplist 和列表對象中 ziplist 的有一點不同就是哈希對象是一個 key-value 形式,所以其 ziplist 中也表現(xiàn)為 key-valuekeyvalue 緊挨在一起:

ziplist 和 hashtable 的編碼轉換

當一個哈希對象可以滿足以下兩個條件中的任意一個,哈希對象會選擇使用 ziplist 編碼來進行存儲:

  • 哈希對象中的所有鍵值對總長度(包括鍵和值)小于等于 64字節(jié)(這個閾值可以通過參數(shù) hash-max-ziplist-value 來進行控制)。
  • 哈希對象中的鍵值對數(shù)量小于等于 512 個(這個閾值可以通過參數(shù) hash-max-ziplist-entries 來進行控制)。

一旦不滿足這兩個條件中的任意一個,哈希對象就會選擇使用 hashtable 編碼進行存儲。

哈希對象常用命令

  •  hset key field value:設置單個 field(哈希對象的 key 值)。
  • hmset key field1 value1 field2 value2 :設置多個 field(哈希對象的 key 值)。
  • hsetnx key field value:將哈希表 key 中域 field 的值設置為 value,如果 field 已存在,則不執(zhí)行任何操作。
  • hget key field:獲取哈希表 key 中的域 field 對應的 value
  • hmget key field1 field2:獲取哈希表 key 中的多個域 field 對應的 value
  • hdel key field1 field2:刪除哈希表 key 中的一個或者多個 field
  • hlen key:返回哈希表key中域的數(shù)量。
  • hincrby key field increment:為哈希表 key 中的域 field 的值加上增量 incrementincrement 可以為負數(shù),如果 field 不是數(shù)字則會報錯。
  • hincrbyfloat key field increment:為哈希表 key 中的域 field 的值加上增量 incrementincrement 可以為負數(shù),如果 field 不是 float 類型則會報錯。
  • hkeys key:獲取哈希表 key 中的所有域。
  • hvals key:獲取哈希表中所有域的值。

了解了操作哈希對象的常用命令,我們就可以來驗證下前面提到的哈希對象的類型和編碼了,在測試之前為了防止其他 key 值的干擾,我們先執(zhí)行 flushall 命令清空 Redis 數(shù)據(jù)庫。

然后依次執(zhí)行如下命令:

hset address country china
type address
object encoding address

得到如下效果:

可以看到當我們的哈希對象中只有一個鍵值對的時候,底層編碼是 ziplist

現(xiàn)在我們將 hash-max-ziplist-entries 參數(shù)改成 2,然后重啟 Redis,最后再輸入如下命令進行測試:

hmset key field1 value1 field2 value2 field3 value3
object encoding key

輸出之后得到如下結果:

可以看到,編碼已經變成了 hashtable

總結

本文主要介紹了 Redis5 種常用數(shù)據(jù)類型中的哈希類型底層的存儲結構 hashtable 的使用,以及當 hash 分布不均勻時候 Redis 是如何進行重新哈希的問題,最后了解了哈希對象的一些常用命令,并通過一些例子驗證了本文的結論。

到此這篇關于Redis中哈希分布不均勻的解決辦法的文章就介紹到這了,更多相關Redis 哈希分布不均勻內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • redis哈希和集合_動力節(jié)點Java學院整理
  • redis哈希類型_動力節(jié)點Java學院整理

標簽:臺州 北京 果洛 吉安 大慶 朝陽 楊凌 江蘇

巨人網絡通訊聲明:本文標題《Redis中哈希分布不均勻的解決辦法》,本文關鍵詞  Redis,中,哈希,分布,不均勻,;如發(fā)現(xiàn)本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統(tǒng)采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《Redis中哈希分布不均勻的解決辦法》相關的同類信息!
  • 本頁收集關于Redis中哈希分布不均勻的解決辦法的相關信息資訊供網民參考!
  • 推薦文章
    亚洲 激情| 欧美爱色| 国产91精品一区| 日本在线www| 九九九在线视频| 九九久久99| 中文字幕一区二区三区精彩视频| 午夜激情视频在线播放| 好男人天堂网 久久精品国产这里是免费 国产精品成人一区二区 男人天堂网2021 男人的天堂在线观看 丁香六月综合激情 | 麻豆午夜视频| 亚州视频一区二区| 超级乱淫伦动漫| 国产韩国精品一区二区三区| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 午夜精品国产自在现线拍| 亚洲精品中文一区不卡| 香蕉视频久久| 日韩在线观看网站| 国产91丝袜在线播放0| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 午夜欧美福利| 久久国产精品自由自在| 日本特黄特黄aaaaa大片| 精品视频免费观看| 99色视频在线观看| 成人高清视频免费观看| 日本乱中文字幕系列| 国产精品自拍在线| 亚洲女初尝黑人巨高清在线观看| 国产麻豆精品| 精品国产一区二区三区免费| 欧美爱爱动态| 成人免费观看网欧美片| 国产伦精品一区二区三区在线观看 | 日韩综合| 国产视频一区二区在线播放| 亚州视频一区二区| 国产视频一区在线| 国产视频网站在线观看| 一级毛片视频播放| 成人高清视频免费观看| 欧美国产日韩在线| 亚州视频一区二区| 国产麻豆精品| 999精品影视在线观看| 999久久狠狠免费精品| 精品视频免费看| 亚洲精品中文一区不卡| 成人免费高清视频| 精品久久久久久中文| 日韩中文字幕在线播放| 韩国三级视频网站| 国产a毛片| 日本在线不卡免费视频一区| 二级片在线观看| 国产成人啪精品视频免费软件| 999精品在线| 亚洲精品影院| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 中文字幕97| 欧美激情一区二区三区视频高清| 色综合久久天天综线观看| 免费国产在线观看| 久久国产影院| 韩国毛片免费| 91麻豆爱豆果冻天美星空| 一级毛片视频免费| 国产伦久视频免费观看视频| 天天做日日爱夜夜爽| 国产网站免费视频| 国产成人啪精品视频免费软件| 国产视频一区在线| 亚洲精品中文一区不卡| 国产一区二区福利久久| 一级女性大黄生活片免费| 二级特黄绝大片免费视频大片| 日本特黄一级| 香蕉视频久久| 青青久久精品| 国产91精品系列在线观看| 国产网站免费观看| 亚欧乱色一区二区三区| 国产一级生活片| 四虎影视久久久| 国产一区免费观看| 精品视频在线观看一区二区| 亚洲 国产精品 日韩| 精品视频在线观看视频免费视频 | 免费毛片播放| 一级毛片视频播放| 亚洲不卡一区二区三区在线| 日本免费乱人伦在线观看 | 日本久久久久久久 97久久精品一区二区三区 狠狠色噜噜狠狠狠狠97 日日干综合 五月天婷婷在线观看高清 九色福利视频 | 国产网站免费观看| 中文字幕一区二区三区 精品| 久久国产一区二区| 久久国产精品自由自在| 精品久久久久久中文字幕一区| 日韩一级黄色大片| 国产91视频网| 精品视频在线观看视频免费视频 | 99热热久久| 久久99这里只有精品国产| 九九久久国产精品大片| 你懂的福利视频| 国产网站麻豆精品视频| 一级毛片视频播放| 国产麻豆精品hdvideoss| 国产高清视频免费观看| 黄视频网站在线免费观看| 午夜欧美成人香蕉剧场| 日韩在线观看免费完整版视频| 欧美激情一区二区三区视频 | 久久国产精品永久免费网站| 一级女性全黄生活片免费| 国产伦精品一区三区视频| 日日夜夜婷婷| 精品国产一区二区三区久久久蜜臀 | 欧美激情一区二区三区视频| 四虎久久影院| 国产欧美精品午夜在线播放| 亚州视频一区二区| 国产成人精品综合| 黄视频网站免费| 亚洲天堂免费| 国产91丝袜高跟系列| 国产一区二区精品在线观看| 青青久久精品| 日韩中文字幕一区| 国产一区二区精品尤物| 九九九网站| 黄视频网站免费看| 青青久久精品| 久久国产精品永久免费网站| 亚飞与亚基在线观看| 日韩专区第一页| 国产a免费观看| 国产视频久久久久| 国产视频一区二区在线播放| 国产麻豆精品高清在线播放| 一级女性全黄生活片免费| 欧美国产日韩在线| 成人影院久久久久久影院| 欧美一级视频免费| 日本在线不卡免费视频一区| 久久成人综合网| 欧美一级视| 高清一级淫片a级中文字幕 | 国产欧美精品| 国产精品12| 91麻豆国产| 欧美a级片免费看| 国产成人精品一区二区视频| 九九九在线视频| 日韩女人做爰大片| 久久国产影院| 成人影视在线播放| 欧美大片a一级毛片视频| 欧美国产日韩精品| 亚洲精品中文字幕久久久久久| 欧美国产日韩精品| 亚州视频一区二区| 久久久久久久免费视频| 欧美18性精品| 在线观看成人网| 四虎影视库| 天天做人人爱夜夜爽2020毛片| 欧美激情一区二区三区在线播放| 成人免费高清视频| 九九国产| 日韩在线观看视频免费| 久久精品道一区二区三区| 日韩在线观看网站| 精品国产一区二区三区久久久蜜臀| 91麻豆精品国产自产在线| 91麻豆精品国产片在线观看| 人人干人人插| 青青青草视频在线观看| 麻豆污视频| 九九国产| 精品久久久久久综合网| 青青青草视频在线观看| 一级女性全黄生活片免费| 日韩一级黄色大片| 九九九国产| 国产成人精品影视| 日韩一级黄色大片| 成人影院一区二区三区| 国产麻豆精品高清在线播放| 国产一区精品| 国产美女在线观看| 日本在线不卡视频| 可以免费看毛片的网站| 台湾美女古装一级毛片| 99久久精品费精品国产一区二区| 九九热精品免费观看| 国产视频一区二区三区四区| 精品视频一区二区| 色综合久久天天综合绕观看| 国产伦精品一区二区三区在线观看 |