面向中小学教育资源的网络爬虫的研究与设计

发布时间：2017-11-22 01:30

  本文关键词：面向中小学教育资源的网络爬虫的研究与设计

  更多相关文章： 网络教学资源 爬虫 抓取 网页解析

【摘要】：对于中小学师生来说,教学资源是辅助师生开展教学活动的重要参考资料和辅助工具。对教学资源的合理利用,能提高师生授课和学习的效率。而随着信息技术的不断发展,越来越多的教学资源由传统的线下实体资源转变成了线上的数字资源和网络资源。同时,随着信息技术的发展,互联网上包括教育资源在内的网络资源信息呈爆炸式增长,人们已经习惯利用搜索引擎来获取自己所需的信息。中小学师生们则使用搜索引擎搜索相关的教育资源,如各种教学资源站,获取所需的试题、课件等资料,或利用学校内网访问学校内部资源库进行信息的访问。然而,互联网上现有的资源站众多,其中一部分站点存在资源更新不及时、分类混乱、需要收费下载资源等问题,这对于广大中小学师生,尤其是缺乏学校内部教学资源库的师生的学习工作是不利的。本文阐述了爬虫的基本原理和相关技术,并基于当前面临的问题,采用Python语言,编写了面向中小学教育资源的网络爬虫原型系统,实现对目标资源站点的页面爬取、页面解析、资源下载等工作。
【学位授予单位】：中央民族大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：G434

【相似文献】

中国期刊全文数据库 前9条

1 朱向彩;万齐飞;;基于网络爬虫的优惠商品搜索平台研究[J];周口师范学院学报;2014年02期

2 郑志高;刘庆圣;陈立彬;;基于主题网络爬虫的网络学习资源收集平台的设计[J];中国教育信息化;2010年01期

3 李耀华;杨海燕;;论网络爬虫搜索策略[J];山西广播电视大学学报;2013年02期

4 刘骄阳;;基于网络爬虫的四川大学资讯整合网站的研究与设计[J];科协论坛(下半月);2013年07期

5 王艳红;周军;;基于Hadoop的网络爬虫技术研究[J];吉林工程技术师范学院学报;2014年08期

6 高伟锋;;基于Heritrix的主题网络爬虫设计与实现[J];南宁职业技术学院学报;2011年01期

7 赵靖;潘志舟;梅芳婷;程振;钱吕见;;多中文搜索引擎的联合网络爬虫及LUCENCE实现[J];安阳师范学院学报;2012年05期

8 李向阳;李铮;;基于Struts和Hibernate框架的比价网设计与实现[J];龙岩学院学报;2007年06期

9 ;[J];;年期

中国重要会议论文全文数据库 前4条

1 夏诏杰;郭力;李晓霞;;化学主题网络爬虫的研究[A];第十届全国计算(机)化学学术会议论文摘要集[C];2009年

2 李楠;谷利泽;钮心忻;;用于XSS扫描的网络爬虫的设计与实现[A];2010年全国通信安全学术会议论文集[C];2010年

3 张军;于浩;内野宽治;;UGC中产品评论信息的挖掘[A];内容计算的研究与应用前沿——第九届全国计算语言学学术会议论文集[C];2007年

4 徐剑;柯贵明;;网络爬虫技术在搜索引擎中的应用[A];全国第21届计算机技术与应用学术会议（CACIS·2010）暨全国第2届安全关键技术与应用学术会议论文集[C];2010年

中国硕士学位论文全文数据库 前10条

1 陶俊文;基于Heritrix框架的专业镇信息网络爬虫系统[D];华南理工大学;2015年

2 马汉超;基于主题网络爬虫的汽车行业多元信息web系统设计与实现[D];西南交通大学;2015年

3 李威;基于交通流量图的交通信息提取技术研究[D];长安大学;2015年

4 朱嵘良;分布式并行环境下的网络爬虫研究[D];中央民族大学;2015年

5 周思华;股票系统之热门话题发现子系统的设计与实现[D];哈尔滨工业大学;2015年

6 丁杰;基于网络爬虫的虚假网页主动智能检测[D];华北电力大学;2015年

7 唐华栋;网页防抓取系统的设计与实现[D];哈尔滨工业大学;2015年

8 白剑飞;基于层次主题模型的网络新闻汇聚[D];浙江大学;2015年

9 袁野;企业内网搜索引擎关键技术研究与实现[D];电子科技大学;2014年

10 滕以芳;基于本体的多媒体素材网络爬虫设计与实现[D];吉林大学;2015年

，

本文编号：1213023