一种改进的主从节点选举算法用于实现集群负载均衡

发布时间：2017-06-15 14:10

  本文关键词：一种改进的主从节点选举算法用于实现集群负载均衡，由笔耕文化传播整理发布。

【摘要】：随着数据量的不断增长,分布式搜索引擎的出现满足了大数据量的检索性能.现有的主从节点选举策略往往会导致主从节点分配不均而使得查询性能不均衡.现提出一种搜索引擎集群的主从节点选举策略,能保证正常情况下节点的分布均衡.当出现宕机时能重新切换主节点,保证检索功能有效;当宕机的服务器重新上线时,主从节点分布恢复正常,避免了负载不平衡的缺陷,达到合理利用每台服务器的性能并充分发挥集群的性能优势的目的.
【作者单位】： 中国计量学院信息工程学院;
【关键词】： 集群 主从节点选举 负载均衡 容灾恢复
【分类号】：TP391.3
【正文快照】： 分布式算法不但能够将多台服务器的资源综合利用,而且可以通过备份机制避免由于单个节点失效而影响数据查询结果的风险[1].分布式算法往往使用主从模式实现数据的备份和容灾功能.如何均衡地利用每台搜索引擎的性能并且如何实现容灾恢复策略是分布式算法的关键[2-3].现有的主从

【参考文献】

中国期刊全文数据库 前7条

1 王俊生;施运梅;张仰森;;基于Hadoop的分布式搜索引擎关键技术[J];北京信息科技大学学报(自然科学版);2011年04期

2 王济勇,林涛,王金东,韩光洁,赵海;EDF调度算法抢占行为的研究及其改进[J];电子学报;2004年01期

3 谌超;强保华;石龙;;基于Hadoop MapReduce的大规模数据索引构建与集群性能分析[J];桂林电子科技大学学报;2012年04期

4 廖锋;成静静;;大数据环境下Hadoop分布式系统的研究与设计[J];广东通信技术;2013年10期

5 杜丽娟;余镇危;;分布式超级节点选举算法[J];计算机工程与应用;2011年14期

6 张洪;路松峰;赵友桥;胥永康;胡和平;;数据安全存储的分片策略模型研究[J];计算机工程与应用;2012年18期

7 李汝光;赵俊;;基于ZooKeeper的分布式缓存的设计与实现[J];绵阳师范学院学报;2011年11期

【共引文献】

中国期刊全文数据库 前10条

1 张巍;傅秀芬;;改进的最低松弛度优先周期任务调度算法[J];江西师范大学学报(自然科学版);2006年04期

2 王兴;;基于Chord协议的存储节点组织策略研究[J];成都信息工程学院学报;2011年03期

3 赵海;周峰;罗玎玎;;WebitOS中动态优先级调度机制及EDF算法的实现[J];东北大学学报(自然科学版);2008年11期

4 刘铮;赵海;李强;张骞;;嵌入式实时系统中抢占控制策略及其优化[J];东北大学学报(自然科学版);2009年06期

5 徐凤梅;;基于RTAI的实时调度策略研究与改进[J];电脑知识与技术;2009年15期

6 谌超;强保华;石龙;;基于Hadoop MapReduce的大规模数据索引构建与集群性能分析[J];桂林电子科技大学学报;2012年04期

7 陶林;谌超;强保华;王勇;;基于Hadoop的Nutch网页排序算法研究与实现[J];桂林电子科技大学学报;2013年02期

8 余庆檄;;基于Hadoop的企业云存储技术探索[J];计算机光盘软件与应用;2013年04期

9 张媛;;基于Hadoop云平台的数据传输保护研究[J];甘肃联合大学学报(自然科学版);2013年05期

10 翁钢民;李维锦;;基于智慧旅游的城市旅游创新发展研究[J];商业研究;2014年09期

中国博士学位论文全文数据库 前4条

1 张伟华;基于千兆以太网的光电经纬仪分布式实时通讯系统的研究[D];中国科学院研究生院（长春光学精密机械与物理研究所）;2011年

2 陈积明;弱硬实时系统及其调度算法[D];浙江大学;2005年

3 董春桥;面向突发事件的智能建筑管理系统集成的研究[D];华中科技大学;2006年

4 王健;容错系统中实时任务调度和负载均衡算法研究[D];浙江大学;2009年

中国硕士学位论文全文数据库 前10条

1 潘迟龙;物联网业务平台支持层原型的研究与实现[D];南京邮电大学;2012年

2 张冬红;嵌入式内核和外围构件研究[D];武汉大学;2004年

3 刘莉;基于实时Linux的调度方法研究[D];沈阳工业大学;2006年

4 金文学;Linux2.6内核实时化技术研究与实现[D];中国科学院研究生院（计算技术研究所）;2006年

5 许彦博;Windows CE .NET系统的实时性改造[D];哈尔滨工业大学;2006年

6 赖娟;Linux内核分析及实时性改造[D];电子科技大学;2007年

7 周本海;实时操作系统中实时调度算法及其资源管理的研究[D];沈阳工业大学;2007年

8 刘勇;基于DNA-GA的最早截止期限优先调度算法优化[D];太原理工大学;2007年

9 余兆安;基于WinCE嵌入式工控系统的实时性及软件可靠性研究[D];西北大学;2008年

10 陈俊;基于改进约束的弱硬实时系统及其算法研究[D];武汉理工大学;2008年

【二级参考文献】

中国期刊全文数据库 前10条

1 王俊生;施运梅;张仰森;;基于Hadoop的分布式搜索引擎关键技术[J];北京信息科技大学学报(自然科学版);2011年04期

2 焦锋,郭向军,徐英杰;基于Cache网络数据的数据缓存技术研究[J];辽宁工程技术大学学报;2004年03期

3 曾理;王以群;;Hadoop集群和单机数据处理的耗时对比实验[J];硅谷;2009年19期

4 成静静;喻朝新;;基于云计算的大数据统一分析平台研究与设计[J];广东通信技术;2013年01期

5 高洪;杨庆平;黄震江;;基于Hadoop平台的大数据分析关键技术标准化探讨[J];信息技术与标准化;2013年05期

6 华夏渝;郑骏;胡文心;;基于云计算环境的蚁群优化计算资源分配算法[J];华东师范大学学报(自然科学版);2010年01期

7 Henry Robinson;王旭;;Observers:让ZooKeeper更具可伸缩性[J];程序员;2010年02期

8 李文逍;杨小虎;;基于分布式缓存的消息中间件存储模型[J];计算机工程;2010年13期

9 赵珂;逯鹏;李永强;;基于Lucene的搜索引擎设计与实现[J];计算机工程;2011年16期

10 贺广宜,罗莉;分布式搜索引擎的设计与实现[J];计算机应用;2003年05期

中国硕士学位论文全文数据库 前6条

1 董长春;基于Hadoop的倒排索引技术的研究[D];辽宁大学;2011年

2 朱珠;基于Hadoop的海量数据处理模型研究和应用[D];北京邮电大学;2008年

3 王文明;基于P2P的分布式搜索引擎的研究[D];天津大学;2007年

4 付志超;基于Map/Reduce的分布式智能搜索引擎框架研究[D];武汉理工大学;2008年

5 黄正鹏;分布式搜索引擎的设计与实现[D];华东师范大学;2008年

6 封俊;基于Hadoop的分布式搜索引擎研究与实现[D];太原理工大学;2010年

  本文关键词：一种改进的主从节点选举算法用于实现集群负载均衡，由笔耕文化传播整理发布。

，

本文编号：452649