天天躁日日躁狠狠躁AV麻豆-天天躁人人躁人人躁狂躁-天天澡夜夜澡人人澡-天天影视香色欲综合网-国产成人女人在线视频观看-国产成人女人视频在线观看

一致性哈希算法以及其PHP實(shí)現(xiàn)詳細(xì)解析

在做服務(wù)器負(fù)載均衡時(shí)候可供選擇的負(fù)載均衡的算法有很多,包括:  輪循算法(Round Robin)、哈希算法(HASH)、最少連接算法(Least Connection)、響應(yīng)速度算法(Response Time)、加權(quán)法(Weighted )等。其中哈希算法是最為常用的算法.

典型的應(yīng)用場(chǎng)景是: 有N臺(tái)服務(wù)器提供緩存服務(wù),需要對(duì)服務(wù)器進(jìn)行負(fù)載均衡,將請(qǐng)求平均分發(fā)到每臺(tái)服務(wù)器上,每臺(tái)機(jī)器負(fù)責(zé)1/N的服務(wù)。

常用的算法是對(duì)hash結(jié)果取余數(shù) (hash() mod N):對(duì)機(jī)器編號(hào)從0到N-1,按照自定義的hash()算法,對(duì)每個(gè)請(qǐng)求的hash()值按N取模,得到余數(shù)i,然后將請(qǐng)求分發(fā)到編號(hào)為i的機(jī)器。但這樣的算法方法存在致命問(wèn)題,如果某一臺(tái)機(jī)器宕機(jī),那么應(yīng)該落在該機(jī)器的請(qǐng)求就無(wú)法得到正確的處理,這時(shí)需要將當(dāng)?shù)舻?a href=/yuedu/fuwuqi/ target=_blank class=infotextkey>服務(wù)器從算法從去除,此時(shí)候會(huì)有(N-1)/N的服務(wù)器的緩存數(shù)據(jù)需要重新進(jìn)行計(jì)算;如果新增一臺(tái)機(jī)器,會(huì)有N /(N+1)的服務(wù)器的緩存數(shù)據(jù)需要進(jìn)行重新計(jì)算。對(duì)于系統(tǒng)而言,這通常是不可接受的顛簸(因?yàn)檫@意味著大量緩存的失效或者數(shù)據(jù)需要轉(zhuǎn)移)。那么,如何設(shè)計(jì)一個(gè)負(fù)載均衡策略,使得受到影響的請(qǐng)求盡可能的少呢?

在Memcached、Key-Value Store、Bittorrent DHT、LVS中都采用了Consistent Hashing算法,可以說(shuō)Consistent Hashing 是分布式系統(tǒng)負(fù)載均衡的首選算法。

1、Consistent Hashing算法描述

下面以Memcached中的Consisten Hashing算法為例說(shuō)明。
由于hash算法結(jié)果一般為unsigned int型,因此對(duì)于hash函數(shù)的結(jié)果應(yīng)該均勻分布在[0,232-1]間,如果我們把一個(gè)圓環(huán)用232 個(gè)點(diǎn)來(lái)進(jìn)行均勻切割,首先按照hash(key)函數(shù)算出服務(wù)器(節(jié)點(diǎn))的哈希值, 并將其分布到0~232的圓上。

用同樣的hash(key)函數(shù)求出需要存儲(chǔ)數(shù)據(jù)的鍵的哈希值,并映射到圓上。然后從數(shù)據(jù)映射到的位置開(kāi)始順時(shí)針查找,將數(shù)據(jù)保存到找到的第一個(gè)服務(wù)器(節(jié)點(diǎn))上。

 Consistent Hashing原理示意圖

新增一個(gè)節(jié)點(diǎn)的時(shí)候,只有在圓環(huán)上新增節(jié)點(diǎn)逆時(shí)針?lè)较虻牡谝粋€(gè)節(jié)點(diǎn)的數(shù)據(jù)會(huì)受到影響。刪除一個(gè)節(jié)點(diǎn)的時(shí)候,只有在圓環(huán)上原來(lái)刪除節(jié)點(diǎn)順時(shí)針?lè)较虻牡谝粋€(gè)節(jié)點(diǎn)的數(shù)據(jù)會(huì)受到影響,因此通過(guò)Consistent Hashing很好地解決了負(fù)載均衡中由于新增節(jié)點(diǎn)、刪除節(jié)點(diǎn)引起的hash值顛簸問(wèn)題。

 Consistent Hashing添加服務(wù)器示意圖

虛擬節(jié)點(diǎn)(virtual nodes):之所以要引進(jìn)虛擬節(jié)點(diǎn)是因?yàn)樵?a href=/yuedu/fuwuqi/ target=_blank class=infotextkey>服務(wù)器(節(jié)點(diǎn))數(shù)較少的情況下(例如只有3臺(tái)服務(wù)器),通過(guò)hash(key)算出節(jié)點(diǎn)的哈希值在圓環(huán)上并不是均勻分布的(稀疏的),仍然會(huì)出現(xiàn)各節(jié)點(diǎn)負(fù)載不均衡的問(wèn)題。虛擬節(jié)點(diǎn)可以認(rèn)為是實(shí)際節(jié)點(diǎn)的復(fù)制品(replicas),本質(zhì)上與實(shí)際節(jié)點(diǎn)實(shí)際上是一樣的(key并不相同)。引入虛擬節(jié)點(diǎn)后,通過(guò)將每個(gè)實(shí)際的服務(wù)器(節(jié)點(diǎn))數(shù)按照一定的比例(例如200倍)擴(kuò)大后并計(jì)算其hash(key)值以均勻分布到圓環(huán)上。在進(jìn)行負(fù)載均衡時(shí)候,落到虛擬節(jié)點(diǎn)的哈希值實(shí)際就落到了實(shí)際的節(jié)點(diǎn)上。由于所有的實(shí)際節(jié)點(diǎn)是按照相同的比例復(fù)制成虛擬節(jié)點(diǎn)的,因此解決了節(jié)點(diǎn)數(shù)較少的情況下哈希值在圓環(huán)上均勻分布的問(wèn)題。

 

虛擬節(jié)點(diǎn)對(duì)Consistent Hashing結(jié)果的影響

從上圖可以看出,在節(jié)點(diǎn)數(shù)為10個(gè)的情況下,每個(gè)實(shí)際節(jié)點(diǎn)的虛擬節(jié)點(diǎn)數(shù)為實(shí)際節(jié)點(diǎn)的100-200倍的時(shí)候,結(jié)果還是很均衡的。

第3段中有這些文字:“但這樣的算法方法存在致命問(wèn)題,如果某一臺(tái)機(jī)器宕機(jī),那么應(yīng)該落在該機(jī)器的請(qǐng)求就無(wú)法得到正確的處理,這時(shí)需要將當(dāng)?shù)舻?a href=/yuedu/fuwuqi/ target=_blank class=infotextkey>服務(wù)器從算法從去除,此時(shí)候會(huì)有(N-1)/N服務(wù)器的緩存數(shù)據(jù)需要重新進(jìn)行計(jì)算;”

為何是 (N-1)/N 呢?解釋如下:

比如有 3 臺(tái)機(jī)器,hash值 1-6 在這3臺(tái)上的分布就是:
host 1: 1 4
host 2: 2 5
host 3: 3 6
如果掛掉一臺(tái),只剩兩臺(tái),模數(shù)取 2 ,那么分布情況就變成:
host 1: 1 3 5
host 2: 2 4 6

可以看到,還在數(shù)據(jù)位置不變的只有2個(gè): 1,2,位置發(fā)生改變的有4個(gè),占共6個(gè)數(shù)據(jù)的比率是 4/6 = 2/3這樣的話,受影響的數(shù)據(jù)太多了,勢(shì)必太多的數(shù)據(jù)需要重新從 DB 加載到 cache 中,嚴(yán)重影響性能

【consistent hashing 的辦法】
上面提到的 hash 取模,模數(shù)取的比較小,一般是負(fù)載的數(shù)量,而 consistent hashing 的本質(zhì)是將模數(shù)取的比較大,為 2的32次方減1,即一個(gè)最大的 32 位整數(shù)。然后,就可以從容的安排數(shù)據(jù)導(dǎo)向了,那個(gè)圖還是挺直觀的。
以下部分為一致性哈希算法的一種php實(shí)現(xiàn)。點(diǎn)擊下載

php技術(shù)一致性哈希算法以及其PHP實(shí)現(xiàn)詳細(xì)解析,轉(zhuǎn)載需保留來(lái)源!

鄭重聲明:本文版權(quán)歸原作者所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如作者信息標(biāo)記有誤,請(qǐng)第一時(shí)間聯(lián)系我們修改或刪除,多謝。

主站蜘蛛池模板: 久久精品亚洲精品国产欧美 | 一亲二脱三插 | 两个人的视频免费 | 中文字幕AV在线一二三区 | 好男人视频免费高清在线观看www | 暖暖在线观看播放视频 | 夜夜国产亚洲视频香蕉 | 恋夜影院支持安卓视频美女 | 中文字幕亚洲欧美日韩2o19 | 国产精品7777人妻精品冫 | 国产亚洲美女精品久久久2020 | 日本一二三区在线视频 | 国产成人精品123区免费视频 | 色偷偷亚洲男人天堂 | 神马电影我不卡4k手机在线观看 | 无码一卡二卡三卡四卡 | 欧美色妞AV重囗味视频 | 国产亚洲精品久久久闺蜜 | 一本到高清视频在线观看三区 | 亚洲视频中文字幕 | 国产日韩精品一区二区在线观看 | 攻把受做得合不拢腿play | 在线电影一区二区 | 欧美黑人巨大xxxxx | 免费特黄一区二区三区视频一 | 蜜臀AV精品一区二区三区 | 性做久久久久久久久浪潮 | 一区不卡二区卡 | 中文日韩亚洲欧美字幕 | 亚洲欧洲一级 | chinese帅哥gv在线看 | 99婷婷久久精品国产一区二区 | 国产精品免费一区二区三区视频 | 一个人在线观看视频免费 | 爱穿丝袜的麻麻3d漫画acg | 亚洲综合无码一区二区 | 韩国伦理电影在线神马网 | 野花香在线观看免费高清播放视频 | 小女生RAPPER入口 | 午夜特级毛片 | 久久99视热频国只有精品 |