什么是虚拟化技术?虚拟化技术浅析

访客3年前黑客工具618

1.前言

在"一文让你彻底明白什么是一致性哈希"该文中,我们已经了解到了什么是一致性哈希及其的若干问题还不了解的或者需要温习的请戳以下链接进行回味。

原文链接:http://www.toutiao.com/i6685547708570141188/

文中最后留下了两个小问题,最后的两个小问题将在以下进行详细美妙的回答。

2.问题回顾

问题1:hash函数是在大样本的情况下才会均匀,如果现在机器比较少的情况下,hash后机器的位置分布不均匀怎么办?

什么是虚拟化技术?

 

问题2:即使刚开始机器分布很均匀,但是加机器后也会导致不均匀的情况。

什么是虚拟化技术?

 

什么是虚拟化技术?

 

如果题不明白的话,还是请戳“一文让你彻底明白什么是一致性哈希”这篇文章

原文链接:http://www.toutiao.com/i6685547708570141188/

3.解决方案

上述问题1提到,如果机器很少的话,他们经过hash之后落在环有可能形成不均匀的情况,会造成负载不均衡的情况,即:

什么是虚拟化技术?

 

因为hash函数必须在足够大的样本里,hash之后的分布才会显得均匀,因此针对问题1,我们引入虚拟节点的概念,例如,有三台物理机,分别是m-1、m-2和m-3,假设虚拟节点个数为1000.

将m-1虚拟化m-1-1、m-1-2、m-1-3...... m-1-1000

m-2虚拟化m-2-1、m-2-2、m-2-3.....m-2-1000

m-3虚拟化m-3-1、m-3-2、m-3-3.....m-3-1000,

然后设置一张物理机和虚拟机的对应表,目的是为了找到可以通过物理机找到对应的虚拟机通过虚拟机找到相对应的物理机,如下。

什么是虚拟化技术?

 

什么是虚拟化技术?

 

那这样的话,通过每台真实的物理机虚拟化后的节点,经过hash,映射到环上,注意,是虚拟节点去抢环上的点,又因为每台物理机都有等量的虚拟节点,故它们在环上的分布可以看作是比较均匀的。

数据来的时候,同样是按照数据找到其在环上的位置,然后通过顺时针法则找到离它最近的虚拟节点,然后将该数据存到该虚拟节点所对应的物理机上(通过虚拟节点-物理机对应表寻找)

什么是虚拟化技术?

 

什么是虚拟化技术?

 

如图,环上的节点均为虚拟节点,为简单起见,假设每台物理机只有3个虚拟节点,那当数据经过hash后映射到环上是上图的位置时,顺时针找到离它最近的m-1-1,然后通过“虚拟节点-物理机”映射表找到m-1-1对应的m-1物理机进行存储。

4.加、减机器的数据迁移

同样的,如果新增一台m4机器,将它虚拟化成等量的虚拟节点,然后分布在环上。简单起见,每个物理机只有3个虚拟节点,实际上是虚拟化成很多很多的,例如上文提到的1000个虚拟节点。

什么是虚拟化技术?

 

什么是虚拟化技术?

 

所以,原本图中绿色的数据属于m-1中的m-1-1部分的,但是现在中间多了个m-4-1,因此,按顺时针法则,灰色部分的数据从m-1上的m-1-1虚拟节点转移到m-4上的m-4-1节点。同样满足虚拟节点均匀分布(即说明每台物理机都负载均衡)和数据迁移代价低的条件。

什么是虚拟化技术?

 

什么是虚拟化技术?

 

5.哈希冲突

哈希冲突问题,即两个虚拟节点在环上发生冲突了,目前的解决方案是两个虚拟节点分别对应的两个真实物理机都存同样一份数据。另外冲突的概率是很小的,是个小概率事件,比如环上的哈希值范围为0~2^64,即环上总共可以有2^64个点,但是虚拟节点数目远比这个总数要小,所以发生冲突的可能性比较低,因此可采用以上策略进行解决。

标签: 技术

相关文章

网络推广技术怎么学?学网络推广自学可以吗

网络推广技术怎么学?学网络推广自学可以吗

网络推广技术怎么学(学网络推广自学可以吗)如何学习网络推广营销大概是每个营销人员都经历过得时光,大多存着坎坷,走到目前对应营销技巧的积累,培养自己的营销思维逻辑,追逐热点新闻,但是对于新人来说或许怎么...

农村人在网上干什么可以赚钱(没学历没技术在

农村人在网上干什么可以赚钱(没学历没技术在

在一个岗位如果要想拿高薪,必须在这个领域是高手级别,但是做到高手谈何容易,所以现在很多人都让自己的收入来源多元化。 很多人下班就是出去玩,约几个朋友逛街,喝酒,等等,没有出去的也是待在家里追剧,上网...

搜索引擎seo?SEO网络优化搜索引擎及其技术架构

搜索引擎seo?SEO网络优化搜索引擎及其技术架构

搜索引擎依托于互联网,互联网的蓬勃发展是搜索引擎产品与技术逐步成熟的大背景。离开互联网,搜索引擎将无从谈起。 互联网的发展 20世纪90年代初期是互联网后期获得大规模发展的起爆点,之所以如此,...

利用QQ空间快速获得百度排名技术

利用QQ空间快速获得百度排名技术

大家都知道qq 空间权重高,用来做SEO 排名效果非常快,帮哥自己测试过好多个词,一般都是 1-3 天上首页,排名很快。那如何操作了,很简单:就 3 个步,只要你按我说的去做,很快见到效果。 一...

怎么偷偷登女朋友微信号,不会被发现

“人机协同的长期目标是将人工智能变为情感投射的载体,成为个人在虚拟世界的数据”,在11月4日云从科技创始人周曦与波士顿动力创始人马克·雷波特的对话中,“人机协同”一词被反复划重点。...

网站防止恶意攻击的方法(黑客必懂的技术)

网站防止恶意攻击的方法(黑客必懂的技术)

网站被恶意攻击,可以说网站就不好发展了。以前,只要网站被攻击,直接把程序给删除了,重新再做一个新网站,可是,做个新站后不久,还是会被恶意攻击。那么要如何防止网站被恶意攻击呢? 防止网站被恶意攻击...