搜索引擎中Robot搜索算法的优化

发布时间：2021-01-13 11:46

　　目前的搜索引擎越来越暴露出不足之处 ,当用户使用搜索引擎时输入特定关键词之后 ,返回的查询结果往往有数千甚至几百万之多 ,而且其中包含大量的重复信息与垃圾信息 ,用户从中筛选出自己感兴趣的网页仍然需要耗费很长的时间。另外一种情况就是 ,Web上明明存在某些重要网页 ,却没有被搜索引擎的robot发现。本文针对这种现象 ,重点讨论搜索引擎中的搜索策略 ,改善搜索算法 ,使Robot在搜索阶段就能够充分处理与Robot频繁交互的URL列表。根据网页的内容、HTML结构以及其中包含的超链信息计算网页的PageRank ,使URL列表能够根据重要性调整排列顺序。初步的试验结果表明 ,本文的优化算法可以较大程度地改进搜索引擎的整体性能 

【文章来源】：情报学报. 2002,(02)北大核心CSSCI

【文章页数】：4 页

【部分图文】：

URL的并行处理流程图

【参考文献】：
期刊论文
[1]搜索引擎优化视角通信系统网址设计研究[J]. 畅玉洁.  电子元器件与信息技术. 2020(02)
[2]基于共词分析的国内搜索引擎研究热点分析[J]. 梁晓婷,刘丽华.  内蒙古科技与经济. 2015(05)
[3]搜索引擎学术研究知识图谱[J]. 刘阳,宋余庆.  图书情报知识. 2010(06)
[4]基于Java的网络制造资源主题信息采集模块设计[J]. 谢大吉.  计算机工程与设计. 2010(19)
[5]一种面向农业信息主题网络爬虫的设计[J]. 汪斌,张云伟,刘健,陈晶.  安徽农业科学. 2009(20)
[6]Robot算法分析[J]. 江禅志,王才元.  舰船电子工程. 2008(06)
[7]一种面向主题的搜索引擎的实现[J]. 高波.  常州工学院学报. 2008(02)
[8]Robot算法分析[J]. 吴楠.  舰船电子工程. 2008(01)
[9]基于行模式的网页信息提取算法[J]. 查志琴.  常州工学院学报. 2007(04)
[10]启发式算法在搜索引擎的应用[J]. 高磊,徐东平.  电脑知识与技术(学术交流). 2007(02)

博士论文
[1]搜索引擎智能行为的研究及实现[D]. 杜亚军.西南交通大学 2005
[2]信息获取中的两类不确定问题研究[D]. 张宏斌.华中科技大学 2004

硕士论文
[1]FTP搜索引擎的关键技术研究[D]. 曹仲伟.湖北工业大学 2011
[2]基于规则引擎的个性化网页爬虫研究[D]. 赵思佳.中南大学 2010
[3]法院内网搜索引擎的设计与实现[D]. 王小君.内蒙古大学 2010
[4]面向农业领域的垂直搜索技术的研究[D]. 仇亚东.南京农业大学 2010
[5]分布式信息检索引擎的分析与实现[D]. 赵联冠.华东师范大学 2010
[6]基于双语翻译搜索引擎的智能用户接口的研究[D]. 卢苇.武汉理工大学 2009
[7]搜索引擎技术改进及其行业发展对策研究[D]. 闫冬.合肥工业大学 2009
[8]基于TSE的特定领域搜索引擎研究及实现[D]. 侯锐.东北师范大学 2008
[9]古建主题搜索引擎研究[D]. 白毅.北京化工大学 2008
[10]垂直搜索引擎系统的研究与设计[D]. 姚琪.上海交通大学 2008



本文编号：2974818