基于高校信息垂直搜索引擎的研究与实现
发布时间：2021-11-09 00:08
近年来随着计算机的普及和网络的高速发展，网络信息呈爆炸似的增长，人们已经迈进了信息时代。网络已经成为日常生活、工作和学习必不可少的一部分。面对海量的信息资源，像百度、Google等通用的搜索引擎系统在帮助人们查找信息的同时，也带来了大量的无用的信息给用户带来了一定的困扰。人们迫切需要一个查询质量更高，反馈效果更好尤其是针对某一领域的搜索引擎，在此背景下，面向专业领域的搜索引擎——垂直搜索引擎诞生了。垂直搜索引擎通俗来讲是将某一类或是某一领域方面的网络信息集中起来构建成一个资源库，为只关心这方面信息的人群服务。相对于通用搜索引擎用户比较单一，但它能为用户提供更加准确、更加专业的主题信息，这也是它的特点所在。目前网络上针对旅游、汽车、房产等方面的都有比较好的垂直搜索引擎网站，但还没有或比较成熟的针对于高校信息领域的搜索引擎系统，而随着高等教育信息化快速发展网络上这一类信息日益增多且分布松散，所以创建一个面向高校信息查询的搜索引擎系统对关注这方面的群体是很有帮助的。本文首先论述搜索引擎的研究意义和背景，并认真分析当前流行的搜索引擎的特点和不足，进而引入垂直搜索引擎的概念、工作原理和体系结构。...
【文章来源】：沈阳建筑大学辽宁省
【文章页数】：62 页
【学位级别】：硕士
【文章目录】：
摘要
Abstract
第一章 绪论
1.1 引言
1.2 选题背景和研究意义
1.2.1 选题背景
1.2.2 研究意义
1.3 论文的主要内容和结构
第二章 搜索引擎相关知识介绍
2.1 搜索引擎概述
2.1.1 搜索引擎的概念
2.1.2 搜索引擎的发展历史
2.1.3 搜索引擎的分类
2.2 搜索引擎的工作原理
2.3 通用搜索引擎的局限性
2.4 垂直搜索引擎
2.4.1 垂直搜索引擎概述
2.4.2 垂直搜索引擎的工作原理
2.4.3 垂直搜索引擎的体系结构
2.5 本章小结
第三章 垂直搜索引擎关键技术研究
3.1 网络爬虫的搜索策略
3.1.1 基于网页链接的搜索策略
3.1.2 基于网页内容分析的搜索策略
3.2 信息处理技术
3.2.1 网页结构化信息抽取技术
3.2.2 网页消重
3.3 中文分词技术的研究
3.4 LUCENE 索引技术研究
3.5 本章小结
第四章 高校信息的垂直搜索引擎研究与设计
4.1 需求分析和实现目标
4.2 高校信息垂直搜索引擎的设计
4.3 网络爬虫的设计
4.4 索引和检索设计
4.5 本章小结
第五章 高校信息垂直搜索引擎的实现
5.1 网络爬虫抓取信息功能的实现
5.1.1 构建主题知识库
5.1.2 主题爬行器类与接口实现
5.1.3 页面相关度分析
5.2 索引和检索的实现
5.2.1 Lucene 索引建立
5.2.2 索引器实现
5.3 实现结果与比较
5.4 本章小结
第六章 总结
6.1 总结
6.2 展望
参考文献
作者简介
致谢
【参考文献】：
期刊论文
[1]面向垂直搜索引擎的Web站点划分方案[J]. 李学凯,许笑,孙春奇,张伟哲,李斌. 计算机工程. 2010(08)
[2]基于内容和链接分析的主题爬虫策略[J]. 刘朋,林泓,高德威. 计算机与数字工程. 2009(01)
[3]一种基于Lucene的中文全文检索系统[J]. 苏潭英,郭宪勇,金鑫. 计算机工程. 2007(23)
[4]自适应最优搜索算法的网络蜘蛛的设计与实现[J]. 魏文国,谢桂园. 计算机应用. 2007(11)
[5]Web信息的自主抽取方法[J]. 许建潮,侯锟. 计算机工程与应用. 2005(14)
[6]专业搜索引擎搜索策略综述[J]. 欧阳柳波,李学勇,李国徽,王鑫. 计算机工程. 2004(13)
[7]HITS算法与PageRank算法比较分析[J]. 何晓阳,吴强,吴治蓉. 情报杂志. 2004(02)
[8]爬行虫算法设计与程序实现[J]. 杜亚军,严兵,宋亮. 计算机应用. 2004(01)
[9]一种基于向量空间模型的个性化搜索引擎研究[J]. 张元馨,赵仲孟,沈钧毅. 微电子学与计算机. 2003(11)
[10]垂直搜索引擎研究[J]. 肖冬梅. 图书馆学研究. 2003(02)
博士论文
[1]文本检索中若干问题研究[D]. 王秀娟.北京邮电大学 2006
硕士论文
[1]垂直搜索引擎系统的研究与设计[D]. 姚琪.上海交通大学 2008
本文编号：3484269
【文章来源】：沈阳建筑大学辽宁省
【文章页数】：62 页
【学位级别】：硕士
【文章目录】：
摘要
Abstract
第一章 绪论
1.1 引言
1.2 选题背景和研究意义
1.2.1 选题背景
1.2.2 研究意义
1.3 论文的主要内容和结构
第二章 搜索引擎相关知识介绍
2.1 搜索引擎概述
2.1.1 搜索引擎的概念
2.1.2 搜索引擎的发展历史
2.1.3 搜索引擎的分类
2.2 搜索引擎的工作原理
2.3 通用搜索引擎的局限性
2.4 垂直搜索引擎
2.4.1 垂直搜索引擎概述
2.4.2 垂直搜索引擎的工作原理
2.4.3 垂直搜索引擎的体系结构
2.5 本章小结
第三章 垂直搜索引擎关键技术研究
3.1 网络爬虫的搜索策略
3.1.1 基于网页链接的搜索策略
3.1.2 基于网页内容分析的搜索策略
3.2 信息处理技术
3.2.1 网页结构化信息抽取技术
3.2.2 网页消重
3.3 中文分词技术的研究
3.4 LUCENE 索引技术研究
3.5 本章小结
第四章 高校信息的垂直搜索引擎研究与设计
4.1 需求分析和实现目标
4.2 高校信息垂直搜索引擎的设计
4.3 网络爬虫的设计
4.4 索引和检索设计
4.5 本章小结
第五章 高校信息垂直搜索引擎的实现
5.1 网络爬虫抓取信息功能的实现
5.1.1 构建主题知识库
5.1.2 主题爬行器类与接口实现
5.1.3 页面相关度分析
5.2 索引和检索的实现
5.2.1 Lucene 索引建立
5.2.2 索引器实现
5.3 实现结果与比较
5.4 本章小结
第六章 总结
6.1 总结
6.2 展望
参考文献
作者简介
致谢
【参考文献】：
期刊论文
[1]面向垂直搜索引擎的Web站点划分方案[J]. 李学凯,许笑,孙春奇,张伟哲,李斌. 计算机工程. 2010(08)
[2]基于内容和链接分析的主题爬虫策略[J]. 刘朋,林泓,高德威. 计算机与数字工程. 2009(01)
[3]一种基于Lucene的中文全文检索系统[J]. 苏潭英,郭宪勇,金鑫. 计算机工程. 2007(23)
[4]自适应最优搜索算法的网络蜘蛛的设计与实现[J]. 魏文国,谢桂园. 计算机应用. 2007(11)
[5]Web信息的自主抽取方法[J]. 许建潮,侯锟. 计算机工程与应用. 2005(14)
[6]专业搜索引擎搜索策略综述[J]. 欧阳柳波,李学勇,李国徽,王鑫. 计算机工程. 2004(13)
[7]HITS算法与PageRank算法比较分析[J]. 何晓阳,吴强,吴治蓉. 情报杂志. 2004(02)
[8]爬行虫算法设计与程序实现[J]. 杜亚军,严兵,宋亮. 计算机应用. 2004(01)
[9]一种基于向量空间模型的个性化搜索引擎研究[J]. 张元馨,赵仲孟,沈钧毅. 微电子学与计算机. 2003(11)
[10]垂直搜索引擎研究[J]. 肖冬梅. 图书馆学研究. 2003(02)
博士论文
[1]文本检索中若干问题研究[D]. 王秀娟.北京邮电大学 2006
硕士论文
[1]垂直搜索引擎系统的研究与设计[D]. 姚琪.上海交通大学 2008
本文编号：3484269
本文链接：https://www.wllwen.com/kejilunwen/sousuoyinqinglunwen/3484269.html
