基于Hadoop平台的视频转码系统设计与实现

发布时间：2018-06-20 16:40

本文选题：视频转码 + Hadoop　；参考：《上海交通大学》2014年硕士论文

【摘要】：随着当前移动互联网技术的迅猛发展,传统的广电行业正逐渐向新媒体领域拓展,他们需要同时向手机电视、互联网、网络电视台等多个业务平台提供视频内容。然而,不同业务平台对视频文件格式有着不同的要求,最常见的是对编码格式、分辨率、码率等参数的要求不同。为了满足这种要求,广电行业必须将原始视频文件进行格式转换。当前常用的传统视频转码系统一般采用一台或几台高性能机器对统一存储的视频文件进行离线转码,但这种转码方案存在着处理能力有限、一次只能转一种格式、当处理大批量转码任务时消耗时间较长等缺点。因此,急需一种灵活高效的转码方案来满足当前广电行业的转码需求。目前,云技术得到了不断的发展和成熟,它因其具有强大的并行处理能力、灵活的扩展性和低廉的成本等优点,必将在未来得到广泛应用。本文首先描述了杭州电视台全台网下的转码系统,及其面临的问题,提出采用Hadoop技术处理视频转码任务的方法。然后,通过分析HDFS和MapReduce两大Hadoop核心技术的特点,结合视频编解码技术和文件封装原理,提出基于GOP组的分片策略,将原始视频文件分割成若干视频片段存储在HDFS上,利用MapReduce编程原理对视频分片进行分布式转码,并采用工作流的方式对整个转码系统进行灵活的配置和管理。这样既充分利用了集群的并行计算能力,解决了单机性能瓶颈问题,又很好的满足了杭州电视台对于转码同时生成多种格式视频文件的需要。最后本文通过对分布式转码系统的测试,验证了基于Hadoop的视频转码系统能够有效的降低视频大文件处理的时间功能,而且系统的计算能力与存储能力可以随着转码需求的增加进行自由扩展。该系统有效提高了杭州电视台视频节目的转码效率,在当前高清视频即将普及的时刻,具有很高的现实意义。
[Abstract]:With the rapid development of the current mobile Internet technology , the traditional broadcasting industry is gradually expanding to the new media field , and they need to provide video content to multiple service platforms such as mobile TV , Internet , network TV , etc .
【学位授予单位】：上海交通大学
【学位级别】：硕士
【学位授予年份】：2014
【分类号】：TN919.81

【参考文献】