分布式环境下大数据组织与管理关键技术的研究
| 摘要 | 第1-12页 |
| ABSTRACT | 第12-15页 |
| 第一章 绪论 | 第15-39页 |
| ·研究背景 | 第15-22页 |
| ·大数据 | 第16-18页 |
| ·大数据处理技术框架 | 第18-20页 |
| ·大数据组织管理挑战性问题及其研究意义 | 第20-22页 |
| ·相关研究工作 | 第22-34页 |
| ·分布式文件系统 | 第22-23页 |
| ·分布式数据管理平台 | 第23-26页 |
| ·数据组织与管理 | 第26-34页 |
| ·本文的工作与创新 | 第34-37页 |
| ·主要研究工作 | 第34-36页 |
| ·主要创新点 | 第36-37页 |
| ·论文结构 | 第37-39页 |
| 第二章 基于混合范围一致性Hash的数据划分方法 | 第39-55页 |
| ·问题描述 | 第39-40页 |
| ·相关研究 | 第40-44页 |
| ·No SQL数据库数据划分技术 | 第40-43页 |
| ·基于Key的多维查询 | 第43-44页 |
| ·基于混合范围一致性Hash的数据划分方法 | 第44-49页 |
| ·一致性Hash划分方法 | 第44-46页 |
| ·混合范围一致性Hash划分方法 | 第46-49页 |
| ·实验分析 | 第49-54页 |
| ·实验设置 | 第50页 |
| ·数据加载能力 | 第50-51页 |
| ·Workload A——更新为主 | 第51页 |
| ·Workload B——读为主 | 第51-52页 |
| ·Workload E——范围操作 | 第52-53页 |
| ·多维操作 | 第53-54页 |
| ·本章小结 | 第54-55页 |
| 第三章 基于负载感知的数据块分配策略 | 第55-69页 |
| ·问题描述 | 第55-56页 |
| ·相关研究 | 第56-57页 |
| ·No SQL数据库数据块分配研究 | 第56-57页 |
| ·负载均衡策略 | 第57页 |
| ·前提假设 | 第57-58页 |
| ·基于负载感知的数据块分配策略 | 第58-62页 |
| ·节点负载 | 第58-61页 |
| ·数据分布策略 | 第61-62页 |
| ·实验分析 | 第62-67页 |
| ·实验设置 | 第62-63页 |
| ·实验结果及实验分析 | 第63-67页 |
| ·本章小结 | 第67-69页 |
| 第四章 基于超图模型的数据块重分配策略 | 第69-91页 |
| ·问题描述 | 第69-71页 |
| ·相关定义 | 第69-70页 |
| ·No SQL数据库的数据块重分配 | 第70-71页 |
| ·相关研究 | 第71-72页 |
| ·数据块相关度 | 第71-72页 |
| ·超图划分 | 第72页 |
| ·预备知识 | 第72-76页 |
| ·应用场景 | 第73页 |
| ·超图模型 | 第73-76页 |
| ·基于超图的数据块重分配(FASBH) | 第76-80页 |
| ·FASBH的超图模型 | 第77页 |
| ·迭代划分超图 | 第77-79页 |
| ·基于代价的数据块重分配(CBRA) | 第79-80页 |
| ·实验分析 | 第80-89页 |
| ·实验设置 | 第80-82页 |
| ·实验总体性能比较 | 第82-83页 |
| ·性能因素——Rat | 第83-85页 |
| ·性能因素——Operation Window | 第85-86页 |
| ·性能因素——UBfactor | 第86-87页 |
| ·性能因素——UBN | 第87-88页 |
| ·性能因素——LBN | 第88-89页 |
| ·本章小结 | 第89-91页 |
| 第五章 基于主题的微博实时分布式索引 | 第91-115页 |
| ·问题描述 | 第91-93页 |
| ·相关研究 | 第93-95页 |
| ·主题模型 | 第93-94页 |
| ·实时搜索 | 第94-95页 |
| ·Twitter-LDA模型 | 第95-97页 |
| ·基于主题的分布式实时索引的架构 | 第97-100页 |
| ·数据预处理 | 第98-99页 |
| ·索引模块 | 第99-100页 |
| ·搜索模块 | 第100页 |
| ·排名算法 | 第100页 |
| ·索引及搜索实现 | 第100-109页 |
| ·索引实现 | 第100-105页 |
| ·搜索处理 | 第105-106页 |
| ·其他考虑 | 第106-109页 |
| ·实验分析 | 第109-113页 |
| ·实验设置 | 第109-110页 |
| ·索引有效性 | 第110页 |
| ·搜索有效性 | 第110-112页 |
| ·搜索完整率 | 第112页 |
| ·可扩展性 | 第112-113页 |
| ·本章小结 | 第113-115页 |
| 第六章 结论与展望 | 第115-117页 |
| ·工作总结 | 第115-116页 |
| ·研究展望 | 第116-117页 |
| 致谢 | 第117-119页 |
| 参考文献 | 第119-133页 |
| 作者在学期间取得的学术成果 | 第133-137页 |
| 发表的学术论文 | 第133-135页 |
| 研究成果 | 第135-137页 |
| 攻读博士学位期间参与的科研项目 | 第137页 |