分布式环境下大数据组织与管理关键技术的研究
摘要 | 第1-12页 |
ABSTRACT | 第12-15页 |
第一章 绪论 | 第15-39页 |
·研究背景 | 第15-22页 |
·大数据 | 第16-18页 |
·大数据处理技术框架 | 第18-20页 |
·大数据组织管理挑战性问题及其研究意义 | 第20-22页 |
·相关研究工作 | 第22-34页 |
·分布式文件系统 | 第22-23页 |
·分布式数据管理平台 | 第23-26页 |
·数据组织与管理 | 第26-34页 |
·本文的工作与创新 | 第34-37页 |
·主要研究工作 | 第34-36页 |
·主要创新点 | 第36-37页 |
·论文结构 | 第37-39页 |
第二章 基于混合范围一致性Hash的数据划分方法 | 第39-55页 |
·问题描述 | 第39-40页 |
·相关研究 | 第40-44页 |
·No SQL数据库数据划分技术 | 第40-43页 |
·基于Key的多维查询 | 第43-44页 |
·基于混合范围一致性Hash的数据划分方法 | 第44-49页 |
·一致性Hash划分方法 | 第44-46页 |
·混合范围一致性Hash划分方法 | 第46-49页 |
·实验分析 | 第49-54页 |
·实验设置 | 第50页 |
·数据加载能力 | 第50-51页 |
·Workload A——更新为主 | 第51页 |
·Workload B——读为主 | 第51-52页 |
·Workload E——范围操作 | 第52-53页 |
·多维操作 | 第53-54页 |
·本章小结 | 第54-55页 |
第三章 基于负载感知的数据块分配策略 | 第55-69页 |
·问题描述 | 第55-56页 |
·相关研究 | 第56-57页 |
·No SQL数据库数据块分配研究 | 第56-57页 |
·负载均衡策略 | 第57页 |
·前提假设 | 第57-58页 |
·基于负载感知的数据块分配策略 | 第58-62页 |
·节点负载 | 第58-61页 |
·数据分布策略 | 第61-62页 |
·实验分析 | 第62-67页 |
·实验设置 | 第62-63页 |
·实验结果及实验分析 | 第63-67页 |
·本章小结 | 第67-69页 |
第四章 基于超图模型的数据块重分配策略 | 第69-91页 |
·问题描述 | 第69-71页 |
·相关定义 | 第69-70页 |
·No SQL数据库的数据块重分配 | 第70-71页 |
·相关研究 | 第71-72页 |
·数据块相关度 | 第71-72页 |
·超图划分 | 第72页 |
·预备知识 | 第72-76页 |
·应用场景 | 第73页 |
·超图模型 | 第73-76页 |
·基于超图的数据块重分配(FASBH) | 第76-80页 |
·FASBH的超图模型 | 第77页 |
·迭代划分超图 | 第77-79页 |
·基于代价的数据块重分配(CBRA) | 第79-80页 |
·实验分析 | 第80-89页 |
·实验设置 | 第80-82页 |
·实验总体性能比较 | 第82-83页 |
·性能因素——Rat | 第83-85页 |
·性能因素——Operation Window | 第85-86页 |
·性能因素——UBfactor | 第86-87页 |
·性能因素——UBN | 第87-88页 |
·性能因素——LBN | 第88-89页 |
·本章小结 | 第89-91页 |
第五章 基于主题的微博实时分布式索引 | 第91-115页 |
·问题描述 | 第91-93页 |
·相关研究 | 第93-95页 |
·主题模型 | 第93-94页 |
·实时搜索 | 第94-95页 |
·Twitter-LDA模型 | 第95-97页 |
·基于主题的分布式实时索引的架构 | 第97-100页 |
·数据预处理 | 第98-99页 |
·索引模块 | 第99-100页 |
·搜索模块 | 第100页 |
·排名算法 | 第100页 |
·索引及搜索实现 | 第100-109页 |
·索引实现 | 第100-105页 |
·搜索处理 | 第105-106页 |
·其他考虑 | 第106-109页 |
·实验分析 | 第109-113页 |
·实验设置 | 第109-110页 |
·索引有效性 | 第110页 |
·搜索有效性 | 第110-112页 |
·搜索完整率 | 第112页 |
·可扩展性 | 第112-113页 |
·本章小结 | 第113-115页 |
第六章 结论与展望 | 第115-117页 |
·工作总结 | 第115-116页 |
·研究展望 | 第116-117页 |
致谢 | 第117-119页 |
参考文献 | 第119-133页 |
作者在学期间取得的学术成果 | 第133-137页 |
发表的学术论文 | 第133-135页 |
研究成果 | 第135-137页 |
攻读博士学位期间参与的科研项目 | 第137页 |