基于视频元数据的网络视频爬取平台的研究与实现

发布时间：2019-11-10 20:02

【摘要】：随着互联网的迅猛发展以及网络带宽逐年的扩容，使人们在网络上能做的事情不仅仅是文字信息，还有观看消耗大量带宽的视频数据，这些变化使在线收看视频甚至是高清视频成为现实，这是一件很有历史性突破的事情，因为随着互联网技术的各方面发展，网络视频开始逐渐渗透了传统电视这一天然地位，人们通过网络视频来观看视频，已经成为一个重要的选择。随着越来越多的用户的目光聚焦于互联网信息，互联网信息中的视频信息已经成为用户关注的非常重要的一部分。因此，想要了解用户喜爱何种网络视频，特别是对做网络视频的互联网企业，对网络视频信息进行快速收集是很重要的。在网络中，人们可以观看的视频，有很多的选择，人们在获取视频信息时，如何很快的获取到，这是一个非常重要的学术课题。 针对上述问题，本文主要设计了一个基于视频元数据的爬取平台，用于获取全国各大视频网站的信息。本文的主要工作内容包括：一：本课题采用基于视频元数据的方式，设计出了一个网络视频爬取平台，通过对相关视频的元数据信息进行分析，从而制定出爬取网络视频数据的配置文件，爬取程序根据相应的配置文件对网络视频数据进行解析，返回粗糙的视频数据集，然后通过对解析之后的视频数据根据一定的规则进行清洗，之后通过视频数据的类型，进一步使爬虫爬取的网络视频数据分解开来，最后对所有的已处理数据进行入库操作，最终目的是实现对视频元数据信息的树枝型的持久化操作。二：为了保障网络视频爬取平台中信息的安全性以及可靠性，网络视频爬取平台通过构建一个基于角色的访问控制权限管理模型策略，对平台的安全性通过多个不同的层次进行分析，最终提出平台的安全策略，使平台不仅有很好的数据的机密性能而且平台的安全可控性能也得到了很好的保证。针对平台建设中用户密码等重要数据的安全问题，，采用MD5算法对重要数据进行加密保证数据存储的安全，采用RSA加密算法保证数据传输的安全。
【学位授予单位】：北京工业大学
【学位级别】：硕士
【学位授予年份】：2014
【分类号】：TP393.08

【相似文献】

相关期刊论文 前10条

1 莫黎,方骅;多媒体技术在视频领域中的应用[J];计算机与数字工程;2002年05期

2 ;2008年市场规模超15亿 网络视频业格局渐明[J];中国传媒科技;2008年01期

3 穆刚;多媒体技术在视频领域的应用[J];软件世界;1997年06期

4 ;来自意大利的视讯专家———访爱斯乐电讯公司[J];电信科学;1999年02期

5 ;网络视频和视频监控市场潜力巨大[J];中国公共安全(综合版);2008年04期

6 润雨;;新兴的在线电视和视频[J];卫星电视与宽带多媒体;2009年06期

7 本刊编辑部;;风行与SMG百视通融合为何与众不同[J];声屏世界·广告人;2012年06期

8 ;智能强大的侦查平台 集“五易”功能于一身——东方网力视频侦查实战平台(PVI)评测[J];中国公共安全;2013年22期

9 万佳欢;;谁为中国收费视频买单[J];中国新闻周刊;2011年13期

10 李正豪;;视频网站面临盈利“烦恼”[J];通信世界;2007年36期

相关重要报纸文章 前10条

1 李国华;国外视频网站怎么玩？[N];中国经营报;2008年

2 沈敬怡;一张牌照引发的视频革命[N];中国高新技术产业导报;2008年

3 本报记者 赵明;分享模式遭弃 网络视频热衷“点播”[N];中国经济时报;2009年

4 CUBN 见习记者 刘安然;网络视频盛宴将近[N];中国联合商报;2010年

5 高燃(海川媒体总裁);战火纷飞的网络视频[N];中国图书商报;2007年

6 张学琦;视频网冲击传统电视 赢利模式待探索[N];中国电子报;2007年

7 本报见习记者 叶勇;今年市场规模超15亿 网络视频业格局渐明[N];上海证券报;2008年

8 李忠存;国内首家视频购房网上线[N];江苏科技报;2008年

9 本报见习记者 任晓宁;Hulu能否催熟视频业？[N];中国新闻出版报;2010年

10 林咏晴;谁能成为中国网络视频领域的领头羊？[N];通信信息报;2008年

相关博士学位论文 前8条

1 刘桂清;视频摘要技术的研究与实现[D];国防科学技术大学;2004年

2 梅涛;家用视频内容分析方法研究[D];中国科学技术大学;2006年

3 宋彦;视频语义标注方法和理论的研究[D];中国科学技术大学;2006年

4 付畅俭;基于内容的视频结构挖掘方法研究[D];国防科学技术大学;2008年

5 白亮;本体支持的视频情报分析方法与技术研究[D];国防科学技术大学;2008年

6 罗青山;面向视频挖掘的视觉内容分析[D];上海交通大学;2009年

7 张静;视频信息检索研究[D];复旦大学;2006年

8 郭戈;数字视频语义信息提取与分析[D];解放军信息工程大学;2010年

相关硕士学位论文 前10条

1 李亚;解析新浪视频的成功运作[D];华中科技大学;2009年

2 陈锦星;视频监控云系统架构及运营模式的研究[D];大连理工大学;2013年

3 李春亮;广告视频探测技术研究[D];国防科学技术大学;2004年

4 郭婧;中国视频网站现状探析[D];上海交通大学;2011年

5 汪芬;压缩域内视频切换检测的研究[D];北京邮电大学;2006年

6 蹇易;基于混合方法的个性化视频推荐技术研究与实现[D];华中科技大学;2012年

7 何伟;面向公众的教育视频共建共享平台的设计与实践研究[D];浙江师范大学;2011年

8 张枣;体育视频中慢镜头探测技术的研究与实现[D];国防科学技术大学;2004年

9 李毅;“随看”—面向用户的视频聚合解决方案[D];西南交通大学;2013年

10 张菲;我国网络体育视频的现状及对策研究[D];武汉体育学院;2014年

本文编号：2559011