基于Hadoop的实时文献资料搜索引擎研究

发布时间：2017-12-11 00:31

  本文关键词：基于Hadoop的实时文献资料搜索引擎研究

  更多相关文章： 实时搜索引擎 云存储 文献资料 内存索引 热度积累

【摘要】：数据的存储和检索是大数据时代有效构建系统应用的关键技术问题。针对高校教育信息系统数据量大、存储异构、查找困难等问题,提出一种基于分类索引以及热度积累的云存储及实时搜索引擎设计方案。该方法首先建立持久性硬盘分类索引。然后,通过一种索引热点数据缓存技术和一种高效的热度累积缓存替换策略,利用内存提升查询性能,降低对硬盘索引表的磁盘访问开销。
【作者单位】： 广东金融学院;桂林电子科技大学;
【基金】：全国教育科学“十二五”规划课题(DCA130225) 广东省高等院校学科与专业建设专项(2013KJCX0134) 国家863计划项目(2012AA011005)
【分类号】：TP311.13;TP391.3
【正文快照】： 随着高校信息化的发展,信息管理系统应用大大促进高校教学和管理现代化。这些信息系统产生的数字信息,日积月累形成海量数据,但这些信息资源受制于传统数据库架构,具有海量、复杂、异构、动态变化等特点,存在高成本、低效率、低可靠性、管理难度大、并行处理程序开发复杂等诸

【相似文献】

中国期刊全文数据库 前10条

1 郑玮;;Hadoop释放大数据潜能[J];软件和信息服务;2012年10期

2 刘尔凯;崔振东;;基于HADOOP技术 实现银行历史数据线上化研究[J];金融电子化;2014年01期

3 邹群;;一种基于Hadoop的数字图书存储系统设计方案[J];黑龙江史志;2014年01期

4 谌章义;毕伟;向万红;王国安;吴爱国;;基于Hadoop的海量电费数据处理模型[J];计算机系统应用;2014年05期

5 ;大数据不等于Hadoop[J];办公自动化;2014年06期

6 ;保障Hadoop数据安全的十大措施[J];计算机与网络;2013年08期

7 苏小会;何婧媛;;Hadoop中任务调度算法的改进[J];电子设计工程;2012年22期

8 黄德才;陈欢;;Hadoop平台下海量数据排行榜过滤算法[J];计算机系统应用;2012年03期

9 周航;申秋慧;王迤冉;;基于Hadoop平台的任务调度方案分析[J];周口师范学院学报;2013年02期

10 陈吉荣;乐嘉锦;;基于Hadoop生态系统的大数据解决方案综述[J];计算机工程与科学;2013年10期

中国重要报纸全文数据库 前3条

1 本报记者 郭涛;机器大数据也离不开Hadoop[N];中国计算机报;2013年

2 乐天　编译;Hadoop：打开大数据之门的金钥匙[N];计算机世界;2012年

3 范范　编译;Hadoop用户可以使用多种搜索引擎[N];网络世界;2013年

中国硕士学位论文全文数据库 前10条

1 汲磊举;大数据环境下动车组故障关联关系分析关键技术研究与实现[D];北京交通大学;2016年

2 王郑委;基于大数据Hadoop平台的出租车载客热点区域挖掘研究[D];北京交通大学;2016年

3 张博洋;基于Hadoop的动车组故障诊断关键技术的研究与实现[D];北京交通大学;2016年

4 施云霄;Hadoop组件管理软件Data Hub的设计与实现[D];南京大学;2014年

5 宋莹玮;Hadoop云平台下基于本体的图像检索系统研究[D];吉林大学;2016年

6 王霄霄;基于Hadoop的电信云计算开放平台研究设计[D];南京邮电大学;2015年

7 白亮;基于Hadoop的民航高价值旅客发现方法研究[D];中国民航大学;2015年

8 张丽云;基于Hadoop的企业知识管理系统的主要功能的研究与实现[D];东北师范大学;2014年

9 夏志刚;基于Hadoop的数字大棚云系统的设计和实现[D];大连理工大学;2014年

10 杨宁;基于Hadoop平台的广告检测系统研究与实现[D];复旦大学;2012年

，

本文编号：1276515