|
|
|
|
【英文篇名】 |
HiBase:A Hierarchical Indexing Mechanism and System for Efficient HBase Query |
|
【下载频次】 |
★★★★★ |
|
【作者】 |
葛微;
罗圣美;
周文辉;
赵頔;
唐云;
周娟;
曲文武;
袁春风;
黄宜华; |
|
【英文作者】 |
GE Wei;
LUO Sheng-Mei;
ZHOU Wen-Hui;
ZHAO Di;
TANG Yun;
ZHOU Juan;
QU Wen-Wu;
YUAN Chun-Feng;
HUANG Yi-Hua;
State Key Laboratory for Novel Software Technology;
Nanjing University;
Collaborative Innovation Center for Novel Software Technology and Industry of Jiangsu Province;
ZTE Corporation;
Department of Computer Science;
Tsinghua University; |
|
【作者单位】 |
南京大学计算机软件新技术国家重点实验室;
江苏省软件新技术与产业化协同创新中心;
中兴通讯股份有限公司;
清华大学计算机科学与技术系; |
|
【文献出处】 |
计算机学报
, Chinese Journal of Computers, 编辑部邮箱
2016年 01期
期刊荣誉：中文核心期刊要目总览 ASPT来源刊 中国期刊方阵 CJFD收录刊 |
|
【中文关键词】 |
HBase;
非主键索引;
查询处理;
分层式索引;
缓存替换策略;
大数据; |
|
【英文关键词】 |
HBase;
secondary index;
query processing;
hierarchical index;
cache replacement policy;
big data; |
|
【摘要】 |
大数据时代,众多应用领域的数据量爆炸式增长,迫切需要研究和寻找有效的大数据存储管理方法,提供实时或准实时的大数据查询分析能力.Hadoop HBase系统为大数据的存储管理提供了一种具有高可扩展性的技术方法和系统平台.然而HBase只有主键索引,不支持非主键索引,这导致HBase的数据查询效率较低,难以满足数据实时或准实时查询需求.为此,在HBase基础上提供面向非主键的快速查询能力,是目前Hadoop环境下急需研究和解决的一个重要问题.该文研究提出了一种基于分层式HBase非主键索引的查询模型和方法,该模型和方法首先建立基于HBase的持久性索引.然后,为了利用内存提升查询性能,该文进一步提出了一种索引热点数据缓存技术和一种高效的热度累积缓存替换策略,以降低对HBase索引表的磁盘访问开销.热度累积缓存替换策略克服了最近最少使用(LRU)算法的局限性,考虑数据访问的累积热度和时间局部特性,从而更准确地捕获数据访问的特征.为了使索引热点数据缓存内存层具有良好的可扩展性,HiBase设计了基于一致性哈希的分布式内存缓存,支持高效的基于非主键的单点查询和范围查询.最终,该文设计实现了完整的分层式索引和查询系统Hi... |
|
【英文摘要】 |
Nowadays we enter the big data era.The amount of data is growing explosively in many business areas.There is an urgent need for efficient storage and management of big data to provide realtime or near-realtime query for data analysis.Hadoop HBase provides a technical method and system with excellent scalability for storing and querying big data.However,HBaseonly provides the row key indexing and does not support non-key indexing,which makes it insufficient to meet the need of realtime or near-realtime appli... |
|
【基金】 |
国家自然科学基金专项基金(61223003,61362006);
中兴通讯产学研合作项目资助 |
|
【更新日期】 |
2016-01-31 |
|
【分类号】 |
TP311.13 |
|
【正文快照】 |
项目资助.葛微,女,1979年生,博士研究生,中国计算机学会(CCF)会员,主要研究方向为查询处理、查询优化、分布式和并行计算.E-mail:gloria.w.ge@gmail.com.罗圣美,男,1971年生,硕士,高级工程师,中国计算机学会(CCF)会员,主要研究方向为云计算、云存储、大数据等技术领域.周文辉,? |
|
| 【相似文献】 |
 |
中国期刊全文数据库 |
 |
|
|
中国优秀硕士学位论文全文数据库 |
|
|
|
中国博士学位论文全文数据库 |
|
|
|
中国重要会议论文全文数据库 |
|
|
|
中国重要报纸全文数据库 |
|
|
|
中国学术期刊网络出版总库 |
|
|
|
|
点击下列相关研究机构和相关文献作者，可以直接查到这些机构和作者被《中国知识资源总库》收录的其它文献，使您全面了解该机构和该作者的研究动态和历史。
|
|
【文献分类导航】从导航的最底层可以看到与本文研究领域相同的文献，从上层导航可以浏览更多相关领域的文献。
|
|
|
| 
推荐 
