Web视频流量分析与资源管理

发布时间：2020-06-01 01:02

【摘要】：快速发展的互联网已成为许多人生活中不可或缺的一部分,网络视频数据成为互联网数据的重要组成部分。从海量的互联网数据中,过滤并识别网络视频数据,定位具体的业务模块,对掌握网络视频的流量特征、用户行为逻辑以及促进网络视频业务的发展具有重要意义。另外,视频流量以及视频流量分发服务器的相关信息有助于流量工程和拥塞控制等网络规划任务。论文首先介绍了互联网基于HTTP协议的视频流媒体数据传输的发展现状和技术背景。后续内容主要完成以下工作:一、总结视频业务的基本逻辑、视频业务行为的识别特征以及视频流量的分布特征。二、通过细致分析-HTTP报文数据,探索视频流量的独有特征,构造利用机器学习算法进行视频流量识别的特征。其中主要构造了两类特征:(一)六个数值特征。通过对流量数据进行探索式数据分析,利用传统机器学习算法进行视频流量识别。(二)文本特征。根据HTTP协议基于文本的特性,提出将HTTP报文看作文本进行分析的思路。提出将HTTP报文信息转换为文本语料的方案,利用文本分类的传统机器学习方法和深度学习方法,进行视频流量识别。三、本课题识别并提取的视频分发服务器IP地址资源需要一个自动化、低上手门槛的系统来管理。故本文设计了IP地址资源管理系统,并介绍了该系统的设计架构和关键技术点对应的解决方案。通过分析真实的视频网站浏览数据,本文利用业务逻辑梳理、统计分析和数据挖掘的方法归纳了视频业务的逻辑,提出HTTP视频流量识别特征提取方案,实现了高效且自动化的视频流量识别和视频服务器发现方法。
【图文】：

视频格式,视频,架构,编码格式

ＨＬＳ协议规定：视频的封装格式是ｔｓ；视频的编码格式为Ｈ２６４，音频编码格逡逑式为ＭＰ３、ＡＡＣ或者ＡＣ－３；除了邋ｔｓ视频文件本身，，还定义了用来控制播放的逡逑ｍ３ｕ８文件（文本文件）。ＨＬＳ的协议架构图如图２－１所示。逡逑Ｓｅｒｖｅｒ逦Ｄｉｓｔｒｉｂｕｔｉｏｎ逡逑ｗｅｂ邋ｓｅｒｖｅｒ逡逑Ｍｅｄｉａ邋ｅｎｃｏｄｅｒ逦Ｓｔｒｅａｍ邋ｓｅｇｍｅｎｔｅｒ逦、逡逑ｔｆｄｒｔＳｐＣＫｌ逦，逡逑ｓｔｒｅａｍ逦＿逡逑逦－一一一＿—邋■逦■邋ｉ邋！逦？逡逑Ｌｊ邋龙逡逑Ａｕｄ？ｏＡｍｉｅｏ逡逑ｉｎｐｕｔｓ逡逑ＨＴＴＰ逡逑Ｃｌｉｅｎｔ逡逑ｊ逦：逡逑图２－１邋ＨＬＳ架构图逡逑图２－１左下方的ｉｎｐｕｔｓ的视频源可以是任意视频格式，其与ｓｅｒｖｅｒ之间的通逡逑信协议也可以是任意（比如ＲＴＭＰ），总之只要把视频数据传输到服务器上即可。逡逑视频将转换为服务器服务器上的ＨＬＳ格式视频（ｔｓ和ｍ３ｕ８文件）文件。用于逡逑在服务器中查看媒体编码器的精细分割是代码转换模块，其负责将视频源中的视逡逑频数据代码转换为目标编码格式的视频数据（Ｈ２６４）。视频源的编码格式也可以逡逑是任何视频编码格式。转码成Ｈ２６４视频数据后，视频在流分段器模块中被切逡逑片，切片的结果是索引文件（ｍ３ｕ８）和ｔｓ文件。图中的分布实际上只是一个普逡逑通的ＨＴＴＰ文件服务器，然后客户端只需要访问第一级索引文件的路径即可自动逡逑播放ＨＬＳ视频流。逡逑２．邋３邋ＨＴＴＰ视频传输机制逡逑由于ＨＴＴＰ协议己成为万维网的基础

过程图,过程,视频流,视频

逦北京邮电大学工学硕士学位论文逦逡逑ＤＡＳＨ等视频传输技术取得了很大进展。这些基于ＨＴＴＰ协议的视频传输技术的逡逑基本思路是将视频流的传输过程分割为连续的视频分片文件的下载过程。由于逡逑ＨＴＴＰ协议是一个无连接协议，为了下载完整的视频流，客户端需向视频服务器逡逑按序发送一系列的请求以请求视频分片文件。服务器收到请求根据请求顺序后将逡逑视频分片文件返回给客户端，客户端将这一系列视频分片文件组装成完整视频流。逡逑通过研宄多个中国互联网在线视频网站的视频播放会话过程与上一节讲述逡逑的ＨＴＴＰ流媒体分发技术，我们发现这些在线视频网站的ＨＴＴＰ视频流传输机制逡逑基本相同，如图２－２所示。逡逑
【学位授予单位】：北京邮电大学
【学位级别】：硕士
【学位授予年份】：2019
【分类号】：TN919.8;TP393.09

【相似文献】