基于大数据的民间艺术资料数字化系统研究与设计

发布时间：2017-07-30 14:13

  本文关键词：基于大数据的民间艺术资料数字化系统研究与设计

  更多相关文章： 民间艺术资料 数字化方法 元数据 Hadoop 存储与检索问题

【摘要】：历史悠久文化灿烂夺目的镇江,具有数目庞大、种类众多、内容珍贵的非物质文化遗产资源。但是镇江民间艺术馆的民间艺术资料的保护正处于初级阶段,目前仍然采用传统的纸质版本,由于历史久远很多资料已经成为孤本。纸质材质给资料的保存、利用都带来的极大的问题,资料的数字化已经迫在眉睫。本文针对这些现有的状况,探索适合镇江民间艺术资料数字化的方法(重点是数量巨大的民间艺术文档);开发民间艺术资料数字化管理系统,对资料的元数据和数字化文档建立电子档案;并且设计大数据存储检索平台。具体研究内容为:1.首先从镇江民间艺术馆馆藏资料本身的特征进行分析,对不同种类的非物质资料设计合适的数字化方案。对于数字化的重点民间艺术资料首先进行文档扫描,然后对文档进行预处理。对于处理好的民间文化资料设计了网络协同文本化方案,包括采用网络协同识别的方法和网络协同校对的方法,在保证文本化的高效性的同时也保证了安全性。2.对非物质文化遗产进行整理和分析,总结元数据的特征。设计了元数据管理系统,实现了对元数据的定义与管理。在此基础上,设计的民间文化管理系统可以实现基于元数据的资料管理与利用。3.对于海量数字化后的图片,需要在提高数据检索的效率的同时,还要能够保证民间艺术资料数据的全面性以及降低硬件设备的成本。设计了基于Hadoop的大数据平台来实现海量图片的存储与检索,解决了数量巨大的民间文化资料扫描文档和文本化文档的存储与检索问题。
【关键词】：民间艺术资料 数字化方法 元数据 Hadoop 存储与检索问题
【学位授予单位】：江苏大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP311.52
【目录】：

• 摘要4-5
• ABSTRACT5-10
• 第1章 绪论10-14
• 1.1 研究背景与意义10-11
• 1.2 研究现状11-12
• 1.3 研究内容12
• 1.4 论文的组织结构12-14
• 第2章 相关理论知识和关键技术14-22
• 2.1 大数据技术与民间文化资料14-15
• 2.1.1 大数据概念14
• 2.1.2 大数据在非物质文化遗产中的应用14-15
• 2.2 Hadoop简述15-20
• 2.2.1 HDFS基本原理16-17
• 2.2.2 MapReduce基本原理17-19
• 2.2.3 HBase基本原理19-20
• 2.3 Hadoop架构原理20-21
• 2.4 本章小结21-22
• 第3章 基于大数据的民间文化资料数字化系统需求分析与设计22-29
• 3.1 基于大数据的民间文化资料数字化系统的需求分析22-24
• 3.1.1 需求分析22-23
• 3.1.2 可行性分析23-24
• 3.2 基于大数据的民间文化资料数字化系统的总体架构24-27
• 3.3 基于大数据的民间文化资料数字化系统功能模块设计27-28
• 3.4 本章小结28-29
• 第4章 非物质文化遗产元数据管理29-39
• 4.1 引言29
• 4.2 元数据29-30
• 4.2.1 元数据的内涵29-30
• 4.2.2 元数据的特点30
• 4.3 元数据的描述30-34
• 4.4 非物质文化遗产元数据管理设计34-38
• 4.4.1 元数据数据库设计34-36
• 4.4.2 功能设计36-38
• 4.5 本章小结38-39
• 第5章 基于HADOOP平台的分布式图片检索功能实现39-50
• 5.1 引言39
• 5.2 镇江民间艺术资料预处理39-40
• 5.3 传统的图片检索系统架构与分析40-42
• 5.3.1 传统的图片检索系统架构40-41
• 5.3.2 传统图片检索系统架构分析41-42
• 5.4 镇江民间艺术资料并行检索的模块实现42-44
• 5.4.1 分布式存储系统HDFS模块43
• 5.4.2 并行计算框架MapReduce模块43-44
• 5.5 基于MapReduce的民间艺术资料图片检索作业的具体实现44-49
• 5.5.1 准备工作44-46
• 5.5.2 Map()函数的具体实现46-48
• 5.5.3 Reduce()函数48
• 5.5.4 Main()函数48-49
• 5.6 本章小结49-50
• 第6章 基于大数据的民间艺术资料数字化系统的实现50-63
• 6.1 概述50
• 6.2 数据资料录入以及文本化的实现50-55
• 6.1.1 数据资料录入的实现50-53
• 6.1.2 文本化的实现53-55
• 6.3 大数据平台搭建55-59
• 6.2.1 实验的软件及硬件配置55
• 6.2.2 Hadoop平台搭建55-59
• 6.4 分布式图片检索性能测试59-62
• 6.5 本章小结62-63
• 第7章 总结与展望63-65
• 7.1 研究总结63-64
• 7.2 研究展望64-65
• 参考文献65-68
• 致谢68-69
• 发表的论文69

【相似文献】

中国期刊全文数据库 前10条

1 于海燕,周顺平;空间元数据系统的研究与设计[J];现代计算机(专业版);2002年09期

2 吕秋培,解素芳,李新利,卢晓慧,任凤仙,于慧敏,刘彩霞,陈晓;关于元数据及其应用[J];档案学通讯;2003年03期

3 王继周,李成名,林宗坚;面向共享的空间元数据管理框架研究与设计[J];国土资源遥感;2003年03期

4 李双文;;论元数据的概念、层次和作用[J];云南档案;2009年09期

5 杨茹;张爱文;;黑龙江省交通数字化中元数据创建问题研究[J];黑龙江工程学院学报(自然科学版);2010年03期

6 曹树金,马利霞;描述教育资源的元数据标准[J];大学图书馆学报;2004年02期

7 熊志刚,徐梅林;基于元数据及语意网的学习技术探讨[J];开放教育研究;2004年05期

8 袁平,韩景润,党海飞;空间元数据自动生成技术研究[J];地理信息世界;2005年01期

9 李晓霞;;元数据在空间信息网上发布中的实现方法与应用[J];计算机时代;2006年04期

10 傅海洋;黄俊;刘晓晨;;物流元数据及其管理研究[J];物流科技;2008年10期

中国重要会议论文全文数据库 前10条

1 赵培翔;张铭;杨冬青;唐世渭;;数字化文档元数据的自动提取[A];第二十届全国数据库学术会议论文集（研究报告篇）[C];2003年

2 陈胜鹏;邱文;;基于元数据的空间地理信息管理系统整合的研究与实现[A];中国测绘学会第九次全国会员代表大会暨学会成立50周年纪念大会论文集[C];2009年

3 万甜甜;刘强;董海良;;西南资源环境信息元数据研究[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年

4 白云;高国勇;;基于Web的城市地下管线元数据共享机制的研究[A];吉林省测绘学会2008年学术年会论文集（上）[C];2008年

5 殷宁欣;张卫平;张涛;;空间信息系统中的模型方法元数据标准研究[A];吉林省测绘学会2008年学术年会论文集（上）[C];2008年

6 韩先培;赵军;;基于Wikipedia的语义元数据生成[A];第四届全国信息检索与内容安全学术会议论文集（上）[C];2008年

7 王蜀安;张铭;王爱华;杨冬青;;构建基于OAI协议的可互操作数字图书馆元数据服务[A];第十九届全国数据库学术会议论文集（技术报告篇）[C];2002年

8 廖轶;黄磊;袁芳;;元数据在高校数据中心的应用探索[A];中国高等教育学会教育信息化分会第十二次学术年会论文集[C];2014年

9 徐佳沅;;规划信息数据库的元数据集成管理研究[A];广东省测绘学会第九次会员代表大会暨学术交流会论文集[C];2010年

10 陈X;李心科;;基于可扩展数据清理框架的元数据的研究[A];计算机技术与应用进展·2007——全国第18届计算机技术与应用（CACIS）学术会议论文集[C];2007年

中国博士学位论文全文数据库 前5条

1 刘海学;基于语义标注的元数据自动构建及其相关技术研究[D];华东师范大学;2010年

2 符海芳;网络地理信息组织和提取的研究及其在农业信息中的应用[D];中南大学;2003年

3 辜寄蓉;基于元数据的综合数据管理与信息共享[D];成都理工大学;2003年

4 徐昊;科技知识对象的语义模式研究[D];吉林大学;2013年

5 王霞;卫生统计调查元数据概念模型的研究[D];第四军医大学;2006年

中国硕士学位论文全文数据库 前10条

1 安静;基于元数据动态获取的数据质量检查技术[D];中国地质大学(北京);2015年

2 李欣;交通物流信息平台元数据研究与应用[D];长安大学;2015年

3 施伟;高性能分布式文件系统元数据服务设计与实现[D];电子科技大学;2014年

4 吕鹏程;一个分布式文件系统元数据服务器设计与实现[D];电子科技大学;2015年

5 赵卓;禽肉质量安全追溯元数据研究[D];河北科技师范学院;2014年

6 秦超;本体元数据设计、提取及应用[D];南京大学;2014年

7 白雷;云存储中独立元数据的设计与实现[D];西安电子科技大学;2014年

8 袁进俊;DOA下分布式DRC的元数据分级存储模型研究[D];成都理工大学;2015年

9 张雷;DOA下的数据注册中心元数据存储策略研究[D];成都理工大学;2013年

10 王芳;基于XML的网上阅卷系统设计[D];太原理工大学;2016年

，

本文编号：594592