基于Hadoop的高校图书馆云平台设计与实现

发布时间：2021-01-06 17:51

　　“图书馆联盟”是目前高校图书馆发展的重要趋势,其出于共享、互惠的目的,通过对图书、电子期刊等资源的共享,极大地提高了图书馆资源的利用率。但是我国的“图书馆联盟”建设工作依然处于初级阶段,由于行政管理体制等原因,我国众多的高校图书馆间相互独立,数据异构、“信息孤岛”等现象普遍存在。因此,若能够在保留各图书馆原有系统的基础上,建立高效率的信息共享平台,促进高校图书馆间的馆际合作与资源共享将具有重大现实意义。基于此目的,本文通过对Hadoop等分布式技术的研究与应用,设计并实现了对多个高校图书馆数据进行集成共享的高校图书馆云平台,通过对图书馆信息的集成与展示,协助高校图书馆进行更好的信息交互,进而促进高校图书馆实现合作与共享。本论文的主要工作如下:（1）构建校内图书馆的数据集成中心。针对不同图书馆间的数据异构问题,提出了一种基于Flume的数据集成方案,该方案通过改写的source与sink单元,使数据的抽取、清洗、补充、标准化等操作可配置化。通过该方案,实现了图书馆内的异构数据集成功能。同时针对原始数据与集成数据的同步问题,设计并实现了一种基于触发器的数据同步方案,保证了集成数据的有效性。... 

【文章来源】：浙江工业大学浙江省

【文章页数】：82 页

【学位级别】：硕士

【部分图文】：

borrowBooks表数据示例图

图 3-4 z_book_lend_sys 表数据示例图Figure 3-4. Sample of data in z_book_lend_sys table(2)图书表 z_book_sys 集成展示对图书表 z_book_sys 的集成，除上述的处理汇总外，还包括数据间的同步，因此，这里除了给出数据集成的前后对比外，还给出了基于触发器的行为记录表

books表数据示例图

【参考文献】：
期刊论文
[1]Big Data Analytics for Healthcare Industry:Impact,Applications,and Tools[J]. Sunil Kumar,Maninder Singh.  Big Data Mining and Analytics. 2019(01)
[2]基于战略规划的国外高校图书馆联盟合作共享研究[J]. 张黎,郭敏,王茜.  图书馆建设. 2018(08)
[3]基于HBase的支持频繁更新与多用户并发的R树[J]. 王波涛,梁伟,赵凯利,钟汉辉,张玉圻.  计算机科学. 2018(07)
[4]基于SSD-SMR混合存储的LSM树键值存储系统的性能优化[J]. 王洋洋,韦皓诚,柴云鹏.  计算机科学. 2018(07)
[5]浅谈高校图书馆发展趋势[J]. 程焕文.  图书馆论坛. 2018(07)
[6]总分馆体系下公共图书馆大数据应用平台建设研究[J]. 孙振东.  图书馆工作与研究. 2018(03)
[7]基于内存的HBase二级索引设计[J]. 崔晨,郑林江,韩凤萍,何牧君.  计算机应用. 2018(06)
[8]大数据流式计算框架Storm的任务迁移策略[J]. 鲁亮,于炯,卞琛,刘月超,廖彬,李慧娟.  计算机研究与发展. 2018(01)
[9]一种通用的数据可视化模型设计与实现[J]. 宋美娜,崔丹阳,鄂海红,欧中洪.  计算机应用与软件. 2017(09)
[10]基于连接驱动SQL捕获的远程数据库同步机制[J]. 丁建立,周冬雪,王静,王家亮.  计算机工程. 2017(09)

硕士论文
[1]手机阅读BI平台的数据采集系统的改进与优化[D]. 伊静.北京邮电大学 2017



本文编号：2960997