摘要 | 第4-6页 |
ABSTRACT | 第6-7页 |
目录 | 第8-11页 |
第一章 绪论 | 第11-18页 |
1.1 研究背景 | 第11页 |
1.2 相关工作 | 第11-14页 |
1.2.1 P2P视频点播技术 | 第11-12页 |
1.2.2 PPlayer视频点播系统原型 | 第12-14页 |
1.3 本文贡献 | 第14-17页 |
1.3.1 面临的挑战 | 第14-15页 |
1.3.2 提出问题 | 第15-16页 |
1.3.3 解决方案 | 第16-17页 |
1.4 本文组织结构 | 第17页 |
1.5 本章小结 | 第17-18页 |
第二章 Hadoop分布式文件系统研究与分析 | 第18-27页 |
2.1 Apache Hadoop项目简介 | 第18-19页 |
2.2 Hadoop分布式文件系统架构分析 | 第19-22页 |
2.2.1 HDFS的基本架构 | 第19-20页 |
2.2.2 HDFS的数据存储 | 第20-22页 |
2.3 HDFS的通信机制及数据流程 | 第22-23页 |
2.3.1 HDFS的RPC通信机制 | 第22页 |
2.3.2 HDFS的数据读写流程 | 第22-23页 |
2.4 几种相关分布式文件系统的研究 | 第23-26页 |
2.4.1 Google文件系统 | 第23-24页 |
2.4.2 亚马逊简单存储服务 | 第24页 |
2.4.3 Facebook的图片存储系统 | 第24-25页 |
2.4.4 Taobao文件系统 | 第25-26页 |
2.5 本章小结 | 第26-27页 |
第三章 基于HDFS的P2P-VoD存储系统的设计与实现 | 第27-36页 |
3.1 P2P-VoD系统的媒体源服务器 | 第27-29页 |
3.2 适用于P2P-VoD业务的分布式存储系统 | 第29-33页 |
3.2.1 架构设计 | 第29-31页 |
3.2.2 可行性分析 | 第31-33页 |
3.3 数据流程分析 | 第33-35页 |
3.3.1 读取媒体文件 | 第33-34页 |
3.3.2 写入媒体文件 | 第34-35页 |
3.4 本章小结 | 第35-36页 |
第四章 HDFS的RPC通信及数据节点源码分析 | 第36-50页 |
4.1 Hadoop源码框架概况 | 第36-37页 |
4.2 Hadoop的RPC通信实现 | 第37-39页 |
4.2.1 客户端的通信实现 | 第37-38页 |
4.2.2 服务器端的通信实现 | 第38-39页 |
4.3 DataNode | 第39-49页 |
4.3.1 DataNode的数据存储 | 第39-40页 |
4.3.2 DataNode类结构分析 | 第40-41页 |
4.3.3 DataXceiverServer和DataXceiver | 第41-49页 |
4.4 本章小结 | 第49-50页 |
第五章 HDFS本地缓存的设计与实现 | 第50-54页 |
5.1 Hadoop的分布式缓存策略 | 第50-51页 |
5.2 适用于P2P VoD系统的数据节点的本地缓存策略 | 第51-52页 |
5.3 缓存模块设计 | 第52-53页 |
5.4 缓存模块调用 | 第53页 |
5.5 本章小结 | 第53-54页 |
第六章 实验和测试 | 第54-69页 |
6.1 实验环境 | 第54-55页 |
6.1.1 硬件配置 | 第54-55页 |
6.1.2 主要参数 | 第55页 |
6.2 Hadoop分布式文件系统功能及性能测试 | 第55-60页 |
6.2.1 测试场景 | 第55页 |
6.2.2 Hadoop集群的启动和关闭 | 第55-56页 |
6.2.3 读/写文件功能 | 第56-57页 |
6.2.4 可靠性与可扩展性 | 第57-59页 |
6.2.5 数据节点本地缓存的可用性 | 第59-60页 |
6.3 PPlayer系统性能测试 | 第60-68页 |
6.3.1 测试方法 | 第60-62页 |
6.3.2 系统运行 | 第62-63页 |
6.3.3 请求响应时间 | 第63-64页 |
6.3.4 缓存命中率 | 第64-65页 |
6.3.5 数据节点负载 | 第65-66页 |
6.3.6 媒体源服务器负载 | 第66-68页 |
6.4 本章小结 | 第68-69页 |
第七章 总结和展望 | 第69-71页 |
7.1 本文工作总结 | 第69页 |
7.2 今后研究展望 | 第69-71页 |
参考文献 | 第71-74页 |
缩略语 | 第74-75页 |
致谢 | 第75-76页 |
攻读学位期间发表的学术论文和科研情况 | 第76页 |