摘要 | 第1-5页 |
Abstract | 第5-9页 |
第1章 绪论 | 第9-15页 |
·课题研究背景和意义 | 第9-10页 |
·研究背景 | 第9页 |
·研究意义 | 第9-10页 |
·课题研究现状 | 第10-12页 |
·基于计算机内存的URL 管理方式 | 第10-11页 |
·基于已有的数据库系统 | 第11页 |
·基于文件系统 | 第11-12页 |
·课题研究内容 | 第12-13页 |
·快速索引技术 | 第12-13页 |
·海量URL 管理的缓存策略 | 第13页 |
·海量URL 管理任务流水模型 | 第13页 |
·本文的结构安排 | 第13-15页 |
第2章 基于NC-Trie 的海量URL 索引技术 | 第15-37页 |
·常用的索引技术介绍及分析 | 第15-17页 |
·HASH 索引技术 | 第15-16页 |
·树结构索引技术 | 第16-17页 |
·Hybrid-TH 索引技术 | 第17页 |
·Trie 索引技术 | 第17-23页 |
·Trie 概述 | 第17-19页 |
·Trie 结点的表示 | 第19页 |
·Trie 压缩技术 | 第19-23页 |
·海量URL 管理的索引技术-NC-Trie | 第23-32页 |
·NC-Trie 的定义 | 第23-24页 |
·NC-Trie 的结点结构 | 第24-25页 |
·NC-Trie 的操作算法 | 第25-29页 |
·NC-Trie 的效率分析 | 第29-31页 |
·NC-Trie 的并发控制 | 第31-32页 |
·NC-Trie 的辅助压缩 | 第32-33页 |
·压缩属性值域的元素个数 | 第32页 |
·压缩属性序列的长度 | 第32-33页 |
·MD5 预处理 | 第33页 |
·NC-Trie 中N 的确定 | 第33-37页 |
·NC-Trie 外存结点的表示 | 第33-35页 |
·确定NC-Trie 中N 的实验 | 第35页 |
·实验结果及其分析 | 第35-37页 |
第3章 海量URL 管理的缓存技术 | 第37-49页 |
·NC-Trie 索引的缓存技术 | 第37-42页 |
·NC-Trie 索引的缓存组织结构 | 第37页 |
·NC-Tire 索引的缓存替换策略 | 第37-38页 |
·NC-Tire 索引的缓存替换算法 | 第38-40页 |
·NC-Trie 缓存的访问控制 | 第40-42页 |
·NC-Trie 结点更新缓存 | 第42-44页 |
·NC-Trie 更新结点的缓存组织 | 第42页 |
·NC-Trie 更新结点的数据一致性 | 第42-43页 |
·缓存内容更新优化 | 第43-44页 |
·记录的缓存技术 | 第44页 |
·记录的结构 | 第44页 |
·记录的缓冲器设计 | 第44页 |
·记录的缓存更新优化 | 第44页 |
·记录缓存优化和NC-Trie 结点缓存优化试 | 第44-46页 |
·实验描述 | 第44-45页 |
·实验结果和分析 | 第45-46页 |
·NC-Trie 索引缓存试验 | 第46-49页 |
·实验描述 | 第46-47页 |
·实验结果及分析 | 第47-49页 |
第4章 基于指令流水思想的海量URL 管理优化 | 第49-56页 |
·引入指令流水模型原因 | 第49页 |
·提高程序的并发度 | 第49页 |
·提高计算机处理器执行指令效率 | 第49页 |
·海量URL 的指令管理 | 第49-50页 |
·海量URL 的查询指令流水模型 | 第50-52页 |
·查询操作执行过程 | 第50页 |
·查询任务的分割 | 第50页 |
·查询任务处理器设计 | 第50-52页 |
·海量URL 的更新指令流水模型 | 第52-54页 |
·更新操作执行过程 | 第52页 |
·更新任务分割 | 第52页 |
·更新任务处理器的设计 | 第52-54页 |
·优化后的效果及其分析 | 第54-56页 |
第5章 基于硬盘NC-Trie 索引的海量URL 管理系统 | 第56-61页 |
·系统设计与实现 | 第56-57页 |
·开发平台及工具 | 第56页 |
·实现意义及目标 | 第56页 |
·系统总体设计 | 第56-57页 |
·系统详细设计 | 第57页 |
·系统的模块设计 | 第57-60页 |
·任务预处理器 | 第57-58页 |
·NC-Trie 索引管理模块 | 第58页 |
·记录管理模块 | 第58-59页 |
·任务流水线 | 第59-60页 |
·外存优化访问管理器 | 第60页 |
·流水线管理器 | 第60页 |
·本章小结 | 第60-61页 |
结论 | 第61-62页 |
参考文献 | 第62-66页 |
致谢 | 第66页 |