基于hadoop高校数字图书馆系统设计和实现.pdf 全文免费在线阅读

  本文关键词：基于Hadoop高校数字图书馆系统的设计与实现，由笔耕文化传播整理发布。

网友jd234568近日为您收集整理了关于基于hadoop高校数字图书馆系统设计和实现的文档，希望对您的工作和学习有所帮助。以下是文档介绍：分类号密级UDC注1学位论文基于Hadoop高校数字图书馆系统的设计与实现(题名和副题名)董园园(作者姓名)指导教师夏琦副教授电子科技大学成都任天新高工济南旭景科技有限公司济南(姓名、职称、单位名称)申请学位级别硕士专业学位类别工程硕士工程领域名称软件工程提交论文日期2014.09.25论文答辩日期2014.11.21学位授予单位和日期电子科技大学2014年12月25日答辩委员会主席评阅人注1:注明《国际十进分类法UDC》的类号。DESIGNANDIMPLEMENTATION OFUNIVERSITYDIGTILLIBRARYSYSTEMBASEDONHADOOPAMasterThesisSubmittedtoUniversityof ElectronicScienceandTechnologyofChinaMajor:Masterof EngineeringAuthor:DongYuanyuanAdvisor:XiaQiSchool:School ofInformation and Software Engineering独创性声明本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研究成果。据我所知,除了文中特别加以标注和致谢的地方外,论文中不包含其他人已经发表或撰写过的研究成果,也不包含为获得电子科技大学或其它教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示谢意。作者签名:日期:年月日论文使用授权本学位论文作者完全了解电子科技大学有关保留、使用学位论文的规定,有权保留并向国家有关部门或机构送交论文的复印件和磁盘,允许论文被查阅和借阅。本人授权电子科技大学可以将学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。(保密的学位论文在解密后应遵守此规定)作者签名:导师签名:日期:年月日摘要I摘要随着计算机技术的发展,人类社会步入了信息时代,电子出版物盛行,网络数据以爆炸式的速度激增,海量的多类型数据给信息检索带来了极大的困难,严重制约了数据的利用率,在此背景下,数字图书馆这一新的数据组织管理模式受到越来越多的关注。数字图书馆是一种没有时空限制的、便于使用的、超大规模的知识中心,它面向电子数据,以统一的标注和规范构建知识组织体系,通常以分布式存储,信息检索和计算机网络为技术支撑,实现丰富多彩的多媒体信息的有效传播。本文研究高校图书馆系统中数字图书馆系统的设计与实现,首先,我们基于传统图书馆管理理论,结合数字图书馆的实际应用,在分析国内外优秀的数字图书馆系统的基础上,对数字图书馆的数据范围和业务内容进行了清晰的定义。其次,论文详细阐述了数字图书馆建设的整体架构、业务流程以及数据模型,系统采用B/S结构,基于流程图建模各项业务流程,通过关系数据模型建模电子资料的元数据。然后,我们采用J2EE环境下的MVC分层开发框架,阐述了系统核心功能的实现过程,具体包括4个部分:元数据抽取,数据存储,建立索引以及用户服务。对应以上4个核心功能,我们分别设计了基于启发式规则的电子文档的元数据抽取方法,基于Hadoop的文件存储策略,在Hadoop平台建立基于Lucene的全文索引和基于元数据的关系数据索引,在以查询为核心的用户服务功能中,我们设计了基于下载和查询记录的查询优化技术。在论文最后,我们对系统进行了整体测试并对测试结果进行了分析。面向高校的数字图书馆系统不仅可以帮助高校组织管理现有的电子资料,例如教学视频、电子期刊、电子文献以及科研数据等,提高数据的检索准确性;还可以数字化现有的实体书刊,集成网络信息资源,为教育和科研提供统一的信息资源平台,提高知识的获取效率。关键词:数字图书馆,元数据,全文索引,Lucene,putertechnology,wehaveenteredtheinformationagenowadays.workdatagrowsintheformofexplosion.Avastamountofdatawithmultipletypeshasbroughtgeartdifficultiestoinformationretrievalandseverelyrestrictsthedatautilization.Inthisbackground,digitallibrary,anizationandmanagementform,hasattractedmoreandmoreattention.Digitallibraryisakindofnotimeandspacelimit,easytouseandverylargescaleknowledgecenter.Takingdigitaldataasmanagementobject,digitallibrary,supportedbydistributedstroe,technologies,adoptsunifiedknowledgesystemtosaveandtransmitmutilmediainformation.Thisthesisfocusesontheresearchofthedesignandimplementoftheuniversity-orienteddigitallibrarysystembasedonHadoop,whichisanimportantpartofmordenlibrarysystem.Firstly,inthestepofrequirementanalysis,basedonlibrarymanagementtheoryandthepraticalapplicationbackgroundofdigitallibrary,wegivethedefinitionofsystemscopeandcontentthoughttheanalysisofdomesticandforeignexcellentlibrarysystemsandpracticalresearch.Then,inthestageofsystemdesign,weintroducethesystemstructure,businessprocessanddatamodel.Indetail,thesystemadoptB/Sthreelayerarchitecture,modeltheprocessthoughprocessgraphandbuildmetadatamodelbasedonrelationdatabase.Finally,weadoptMVCframeworktodevelopthesystem,including4improtantparts:metadataextraction,datastorage,indexstrategyandsystemfunctionsforusers.Detailly,weextractmetadatafromelectronic

12>

  本文关键词：基于Hadoop高校数字图书馆系统的设计与实现，由笔耕文化传播整理发布。