基于教育信息资源本体的主题爬虫的研究

发布时间：2019-05-11 22:37

【摘要】：随着网络资源的迅速发展，基于关键词匹配的搜索引擎已经不能满足用户专业化、个性化的查询请求。同时，由于受到万维网架构的影响，传统的基于关键词匹配的网络爬虫很大程度上降低了网页抓取的查全率和查准率。如何从海量网络数据中获取用户所需的专业化、个性化的数据已成为当前的研究热点。 面对这种情况，主题爬虫应运而生。主题爬虫是一种能在互联网上针对特定主题进行资源采集的网络爬虫。本文在深入研究主题爬虫的相关理论和技术的基础上，充分利用了领域本体在语义表达上的优势，将领域本体和主题爬虫的爬行过程相结合，提出一种基于本体语义树的主题爬虫模型。 本文首先构建了教育信息资源本体库，并扩展了教育信息资源的特有属性，在此基础上描述了主题爬虫的特定主题。其次，，通过对大量网页进行结构分析，运用相应的算法分析页面中的title文本、URL文本和anchor文本等信息，提取出链接概念集合；同时运用相应的算法分析页面中的title文本、页面描述信息和关键词等信息，提取出页面内容概念集合。然后，本文提出了基于领域本体的链接相关度算法和页面内容相关度算法。在主题爬虫的爬行过程中，通过分析领域本体中的概念与链接概念集合的语义关系，过滤与主题不相关的链接；通过分析领域本体中的概念与页面内容概念集合的语义关系,过滤与主题不相关的网页。最后，本文实现了基于教育信息资源本体的主题爬虫原型系统，并通过对实验结果的分析，验证了主题爬虫系统提高了网页抓取的查全率和查准率。
[Abstract]:......
【学位授予单位】：云南师范大学
【学位级别】：硕士
【学位授予年份】：2014
【分类号】：TP391.1

【相似文献】

相关期刊论文 前10条

1 任兴洲;论网络教育信息资源的获取与利用[J];农业图书情报学刊;2005年10期

2 郭治虎;杨晓宏;;甘肃省教育信息资源建设现状分析[J];软件导刊;2005年05期

3 胡卫星;;网络教育信息资源的组织模式问题研究[J];现代远距离教育;2006年04期

4 叶惠文;莫f虎;;教育信息资源系统安全及解决方法[J];中国信息界;2006年13期

5 唐检云;贺佐成;;谈教育信息资源共享的环境优化[J];教育信息化;2006年09期

6 魏丽洁;王海顺;;教育信息资源建设的现状及发展规范[J];河南科技;2007年12期

7 胡小勇;詹斌;胡铁生;;区域教育信息资源建设现状与发展策略研究[J];中国电化教育;2007年06期

8 卫建刚;;关于教育信息资源应用问题的思考[J];中国教育技术装备;2009年26期

9 杨欣;于勇;;我国教育信息资源建设现状及对策分析[J];软件导刊;2010年03期

10 林文婷;;网络环境下教育信息资源的比较研究——动态教育信息资源与光盘教育资源的比较[J];中国教育信息化;2010年16期

相关会议论文 前8条

1 申小玲;;加强现代远程教育信息资源的共建与共享[A];贵阳市经济社会文化大发展与生态文明建设理论研究[C];2010年

2 曾介平;;教育信息资源与教师素养的和谐发展 课题《教师教育教学资源建设专项研究》研究报告[A];国家教师科研基金十一五阶段性成果集（福建卷）[C];2010年

3 段宝霞;;中小学教育信息化投资问题探讨[A];2007年中国教育经济学年会会议论文集[C];2007年

4 蔡新元;;面向对象的网络设计教育资源构建[A];高等学校艺术教育研究[C];2003年

5 刘丽萍;;整合外语教育资源,构建信息资源数据库[A];教育技术：信息化阶段新发展的研究[C];2007年

6 王蓓蓓;孙雪冬;;辽宁省中小学信息化建设现状分析[A];中国教育技术协会2004年年会论文集[C];2004年

7 梁雄静;;构筑“三位一体”的信息化教育网络[A];全国教育科研“十五”成果论文集（第三卷）[C];2005年

8 张德祥;;关于义务教育区域内均衡发展的思考[A];第五届中国科学家教育家企业家论坛论文集[C];2006年

相关重要报纸文章 前10条

1 沈殿萱;全力推进教育信息化公共服务体系建设[N];江苏教育报;2010年

2 杨冰之;大力提升教育信息化的效益[N];光明日报;2005年

3 见习记者 郑旺;教育信息化迸发千亿级采购需求[N];中华工商时报;2012年

4 本报记者 邸晓伟;教育升级“云”推动[N];中国电脑教育报;2013年

5 本版撰稿 王英;扬信息风帆 开教育新路[N];吉林日报;2002年

6 记者 郜云雁;第五代教育资源浮出水面[N];中国教育报;2001年

7 黄智军;教育资源共享难在何处[N];计算机世界;2006年

8 雷小鹏 吴瑞 记者 强国峰;谋百年计 走强县路[N];延安日报;2010年

9 前线;2006教育行业信息存储大会[N];中国电脑教育报;2006年

10 本报记者 朱振岳;为更多的人提供更好的教育[N];中国教育报;2010年

相关硕士学位论文 前10条

1 房晓瑞;知识管理视角下的教育信息资源管理系统研究[D];东北师范大学;2010年

2 朱爱芝;基础教育信息资源区域共建共享模式研究[D];浙江师范大学;2010年

3 周杰;基于用户反馈的教育信息资源质量提升研究[D];华中师范大学;2014年

4 徐刘杰;网络教育信息资源动态发展利用的周期及影响因素研究[D];华中师范大学;2013年

5 夏秀明;网络教育信息资源动态发展的知识节点研究[D];华中师范大学;2013年

6 胡敏;村镇教育信息资源组织策略及应用研究[D];华中师范大学;2011年

7 曹树青;网络教育信息资源动态发展研究[D];华中师范大学;2013年

8 张栋科;统筹城乡发展中教育信息资源共享模式研究[D];西南大学;2012年

9 江星玲;用户激励视角下教育信息资源利用率提升研究[D];华中师范大学;2014年

10 海欣;教育信息资源利用效益提升研究[D];华中师范大学;2014年

本文编号：2474902