基于Hadoop的倒排索引的研究与实现

发布时间：2017-12-05 20:27

  本文关键词：基于Hadoop的倒排索引的研究与实现

  更多相关文章： 大数据 Hadoop MapReduce 倒排索引

【摘要】：随着计算机与网络的发展,人们信息获取的方式开始越来越依赖于网络。而作为信息展现与搜索的工具——搜索引擎,在需求的驱动下也有了长足的发展。面对日益庞大的数据和信息,如何确保搜索引擎的效率已经成为各大搜索引擎商们急需解决的问题。本论文旨在通过使用大数据技术对大规模数据集进行搜集和整理,并在开源架构Hadoop下实现这一搜索引擎的基础算法——倒排索引。
【作者单位】： 电子科技大学成都学院;
【分类号】：TP391.3;TP311.13
【正文快照】： 1引言全文检索技术是现代计算机信息学、计算机网络学科的一项重要技术,在万维网搜索引擎、数字图书馆、数字多媒体技术等领域都有广泛而深远的利用价值和研究价值。因此,对于倒排索引以及全文检索技术的研究和探索不仅具有理论价值,而且极具商业前景。2算法介绍倒排索引,通常

【参考文献】

中国期刊全文数据库 前1条

1 董新华;李瑞轩;周湾湾;王聪;薛正元;廖东杰;;Hadoop系统性能优化与功能增强综述[J];计算机研究与发展;2013年S2期

中国博士学位论文全文数据库 前1条

1 韩海雯;MapReduce计算任务调度的资源配置优化研究[D];华南理工大学;2013年

【共引文献】

中国期刊全文数据库 前9条

1 李冰利;刘钊远;贾威威;;基于NBD的弹性云存储研究与设计[J];计算机与数字工程;2015年02期

2 刘青;鲍爱华;倪桂强;;大数据技术专题讲座(二) 第3讲 面向大数据处理的MapReduce优化技术[J];军事通信技术;2015年02期

3 曹畋;;浅析建立面向图书馆用户的HDFS云存储服务系统[J];农业图书情报学刊;2015年09期

4 宋宝燕;王俊陆;王妍;;基于范德蒙码的HDFS优化存储策略研究[J];计算机学报;2015年09期

5 李德有;赵立波;解晨光;;Hadoop构建的银行海量数据存储系统研究[J];哈尔滨理工大学学报;2015年04期

6 任桂禾;王晶;;浅谈大数据处理技术架构的演进[J];信息通信技术;2014年06期

7 卢小宾;王涛;;Google三大云计算技术对海量数据分析流程的技术改进优化研究[J];图书情报工作;2015年03期

8 戴中华;盛鸿彬;王丽莉;;基于Hadoop平台的大数据分析与处理[J];通讯世界;2015年06期

9 马艳;陈玉峰;刘兴华;郭志红;苏东亮;孙溪;;面向设备状态评估的大数据底层平台设计（英文）[J];山东电力技术;2015年08期

中国硕士学位论文全文数据库 前1条

1 潘梦云;基于Hadoop的数据处理系统的设计[D];河北工程大学;2014年

【二级参考文献】

中国期刊全文数据库 前10条

1 刘正伟;文中领;张海涛;;云计算和云数据管理技术[J];计算机研究与发展;2012年S1期

2 黄，

本文编号：1256099