基于hadoop影视碎片云存储的设计与实现

发布时间：2017-12-19 18:34

  本文关键词：基于hadoop影视碎片云存储的设计与实现　出处：《山东大学》2015年硕士论文　论文类型：学位论文

  更多相关文章： 云计算 Hadoop HDFS 影视碎片 碎片索引 多线程

【摘要】：近年来,随着计算机技术的高速发展、互联带宽的提高、网络用户的增加、以及数码产品的普及,互联网视频点播应用、视频共享应用等以星火燎原之势大规模发展。国内外著名视频网站如You tube、Hulu、优酷土豆等在大环境下应用而生。当前视频服务已向多终端快速发展,视频数据已达到海量,而且数据量正在迅速的增长。今天,如何为多终端用户提供优质的视频服务以及海量视频数据存储已成为各大视频互联网公司研究的热门技术,广电行业也争相投入这场数据与服务的盛宴中来。自Google发表的三大论文之后,IT界便掀起了云计算热潮。著名的开源云计算框架Hadoop也横空出世。Hadoop云平台的开源特性不仅为云计算研究降低了成本,而且Hadoop分布式文件解决了海量数据的高效、稳定的存储。本文的主要目的是设计和实现一种基于海量影视碎片数据云存储的普适分布式系统。首先对Hadoop分布式框架概念以及原理做了详细的阐述,并详细描述了Hadoop HDFS工作原理,为全文海量存储奠定了基础。其次,研究并分析了当前针对HDFS小文件存储问题业界常用方案,并根据项目实际现状构思适合应用背景的海量影视碎片存储的方法与思想。最后根据HDFS影视碎片存储设计文件索引并采用多线程并发技术提高影视文件系统的延迟与吞吐。在文章的最后,通过具体的项目实例进行试验验证。并根据试验数据得出最终结论。
【学位授予单位】：山东大学
【学位级别】：硕士
【学位授予年份】：2015
【分类号】：TP333

【参考文献】

中国期刊全文数据库 前2条

1 田秀霞;周耀君;毕忠勤;彭源;;基于Hadoop架构的分布式计算和存储技术及其应用[J];上海电力学院学报;2011年01期

2 ;集群存储应对新媒体时代[J];中国数字电视;2008年07期

，

本文编号：1309011