Heritrix在电子信息垂直搜索平台中的应用

发布时间：2017-09-04 01:07

  本文关键词：Heritrix在电子信息垂直搜索平台中的应用

  更多相关文章： Heritrix ELFHash算法 多线程 电子信息 垂直搜索引擎

【摘要】：介绍了垂直搜索引擎和网络爬虫的基本概念,以及Heritrix系统的体系结构,分析了Heritrix工作流程,针对Heritirx中存在的一些不完善的地方,引入了ELFHash算法并通过扩展Heritrix实现了电信信息搜索平台信息的定向与多线程抓取,为建立面向电子信息的垂直搜索引擎提供了信息源.
【作者单位】： 西华大学数学与计算机学院;成都大学电子信息工程学院;
【关键词】： Heritrix ELFHash算法 多线程 电子信息 垂直搜索引擎
【基金】：四川省科技基础条件平台资助项目
【分类号】：TP391.3
【正文快照】： 0引言随着互联网技术的发展,万维网已成为大量信息的载体,如何有效地提取并利用这些信息已成为一个巨大的挑战.搜索引擎作为检索信息的工具成为用户访问万维网的入口和指南,但是,作为传统搜索引擎,如Goolge、百度等,存在一定的局限性:传统搜索引擎不能很好地解决个人搜索需求

【共引文献】

中国重要会议论文全文数据库 前2条

1 王栋;陈勇;徐建良;;基于预测的BitTorrent种子评估方法[A];2008'中国信息技术与应用学术论坛论文集（二）[C];2008年

2 戴玉刚;;藏文网页采集技术研究[A];民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C];2007年

中国硕士学位论文全文数据库 前10条

1 李新安;基于领域主题的Web信息检索技术研究[D];山东大学;2006年

2 刘洁清;网站聚焦爬虫研究[D];江西财经大学;2006年

3 罗兵;支持AJAX的互联网搜索引擎爬虫设计与实现[D];浙江大学;2007年

4 杜光芹;效用驱动的主题Web挖掘算法研究[D];山东师范大学;2007年

5 李文泽;个性化垂直搜索引擎研究[D];河南大学;2007年

6 王庆涛;基于本体的Web信息采集研究[D];中南大学;2007年

7 高岭;Deep Web分类搜索引擎关键技术研究[D];苏州大学;2007年

8 方利伟;个性化在线答疑系统的研究与实现[D];浙江师范大学;2007年

9 吕昊;面向垂直搜索的聚焦爬虫研究及应用[D];浙江大学;2008年

10 郑健珍;定题爬虫搜索策略研究[D];厦门大学;2007年

【二级参考文献】

中国期刊全文数据库 前3条

1 郝凤英;垂直网站及其信息服务模式[J];情报理论与实践;2002年02期

2 肖冬梅;垂直搜索引擎研究[J];图书馆学研究;2003年02期

3 沈贺丹;潘亚楠;邵良杉;;关于搜索引擎的研究综述[J];计算机技术与发展;2006年04期

【相似文献】

中国期刊全文数据库 前10条

1 孟祥成;;基于Lucene和Heritrix技术搜索引擎的设计与实现[J];中国现代教育装备;2010年03期

2 李丹;顾保磊;;基于Heritrix的内容搜索引擎系统[J];软件导刊;2010年04期

3 高伟锋;;基于Heritrix的主题网络爬虫设计与实现[J];南宁职业技术学院学报;2011年01期

4 陈俊彬;曹树金;;基于Heritrix的Web信息抽取[J];图书情报工作;2009年09期

5 张盼;聂刚;;基于Lucene的全文检索系统的设计与实现[J];电脑知识与技术;2010年01期

6 陶荣;陈燕;;基于Lucene小型搜索引擎的研究与实现[J];大众科技;2010年02期

7 王琦;张戈;何婧;;基于Lucene与Heritrix的图书垂直搜索引擎的研究与实现[J];计算机时代;2010年02期

8 孙庚;冯艳红;于红;史鹏辉;;一种基于Heritrix的网络定题爬虫算法——以渔业信息网络为例[J];软件导刊;2010年05期

9 刘博卿;;基于军事的主题搜索引擎研究[J];福建电脑;2011年09期

10 张瑞;;城市公交专题搜索引擎的实现[J];电脑知识与技术;2010年30期

中国重要会议论文全文数据库 前1条

1 汪沛;;Isolex股市预测系统的设计与实现[A];促进企业信息化进程——第十届中国Java技术及应用大会文集[C];2007年

中国硕士学位论文全文数据库 前10条

1 刘显一;基于Lucene和Heritrix的主题搜索引擎的设计与实现[D];北京邮电大学;2012年

2 张伟;垂直搜索引擎设计与实现[D];西安电子科技大学;2008年

3 李亮;基于Lucene和Heritrix的职位垂直搜索引擎的设计与实现[D];中国地质大学（北京）;2010年

4 吕昊;面向垂直搜索的聚焦爬虫研究及应用[D];浙江大学;2008年

5 丁照波;基于Lucene的AEP垂直搜索引擎的研究与实现[D];华中科技大学;2008年

6 刘运佳;基于Lucene和Heririx构建搜索引擎的研究和示例实现[D];电子科技大学;2008年

7 张书江;基于Java的垂直搜索引擎的设计与实现[D];安徽理工大学;2009年

8 谢侨;一个基于二次过滤的垂直搜索引擎的设计与实现[D];暨南大学;2008年

9 翟晓玲;面向学科的基础教育资源垂直搜索引擎的研究与实现[D];东北师范大学;2009年

10 李山亭;基于语义的网络化制造资源智能检索技术研究[D];浙江大学;2008年

，

本文编号：788419