多监测点数据采集的Web文本挖掘算法及应用

发布时间：2018-06-27 16:35

本文选题：Web文本挖掘 + 多监测点　；参考：《实验室研究与探索》2013年06期

【摘要】：在多点数据监测系统中,为了将各区域服务器的数据有效整合,对海量数据的有效采集和处理成为必须解决的关键问题。文章通过引入Web文本挖掘原理和数据抽取方法,将网页列表页的抽取算法应用到多点数据采集,并构建了相应的多监测点数据采集体系。通过对多监测点海洋数据的处理实例表明,基于网页列表页的抽取算法有效地抽取到了准确数据项,解决了嵌套数据记录、自动抽取和多台计算机协同工作问题,提高了数据采集效率。
[Abstract]:In the multi-point data monitoring system, in order to effectively integrate the data of the regional servers, the effective collection and processing of the massive data becomes the key problem that must be solved. By introducing the principle of Web text mining and the method of data extraction, this paper applies the extraction algorithm of web page list page to multi-point data acquisition, and constructs the corresponding multi-monitoring point data acquisition system. An example of ocean data processing at multiple monitoring points shows that the algorithm based on web page list page can extract accurate data items effectively and solve the problems of nested data record, automatic extraction and cooperative work of multiple computers. The efficiency of data acquisition is improved.
【作者单位】：钦州学院数学与计算机科学学院;
【基金】：广西自然科学基金资助项目(0899017) 广西教育厅科研基金资助项目(200808MS079)
【分类号】：TP391.1;TP393.09

【参考文献】

相关期刊论文前10条

1 王志明;沙莎;;Web文本挖掘技术在新闻主题检测中的应用研究[J];长沙大学学报;2007年05期

2 查志琴;;基于行模式的网页信息提取算法[J];常州工学院学报;2007年04期

3 叶君;;web网站信息采集系统的设计方案[J];硅谷;2008年22期

4 唐翔弘;汪林林;文展;;基于Web的数据采集[J];计算机科学;2004年08期

5 孙长征;朱小谦;张卫民;;基于Web的数值天气预报系统的研究与设计[J];计算机工程与科学;2009年S1期

6 余少云;;基于XML的科研管理信息系统研究[J];江西农业学报;2011年02期

7 黄鲁成;赵盼;;关于采用Web挖掘方法分析技术发展趋势的思考[J];科技管理研究;2010年21期

8 余肖生;孙珊;;基于信息抽取的文本知识挖掘模型研究[J];情报科学;2010年05期

9 曾锡山;胡俊荣;;WEB文本海量数据挖掘应用中的多点数据采集及处理问题研究[J];情报杂志;2010年08期

10 辛艳辉;袁合才;;水情数据远程采集系统设计[J];人民黄河;2010年03期

相关期刊论文前10条

1 朱俊峰;;关联规则在“基于网络的课程考核改革试点”工作中的应用[J];安徽广播电视大学学报;2009年03期

2 李欣宇;傅彦;;一种适合于科学数据的聚类算法[J];成都信息工程学院学报;2006年03期

3 杨朝敏;李欣宇;;一种改进型聚类算法应用于科学数据挖掘[J];成都信息工程学院学报;2006年03期

4 李欣宇;傅彦;;改进型的K-mediods算法[J];成都信息工程学院学报;2006年04期

5 韩喜球;邱中炎;;中太平洋铁锰结壳灰度序列中米兰柯维奇周期的识别及结壳生长速率的演化[J];沉积学报;2010年05期

6 陈洪;安德拉RCM-4S型海流计的一种使用技巧[J];东海海洋;2000年02期

7 黄树生;南麂站定常波风浪波高与风速的经验关系[J];东海海洋;1994年04期

8 黄树生;南麂海域大浪与大风的分布关系[J];东海海洋;1995年01期

9 沈雪龙;大气垂直速度计算中校正方法的探讨[J];东海海洋;1997年04期

10 武艳强,黄立人;时间序列处理的新插值方法[J];大地测量与地球动力学;2004年04期

相关期刊论文前10条

1 薛为民;陆玉昌;;文本挖掘技术研究[J];北京联合大学学报(自然科学版);2005年04期

2 张军国;李文彬;韩宁;阚江明;;基于ZigBee无线传感器网络的森林火灾监测系统的研究[J];北京林业大学学报;2007年04期

3 暴海龙,李金林;专利检索中的IPC和主题词识别方法研究[J];北京理工大学学报(社会科学版);2003年05期

4 邵汝峰;张彪;张矢;温阳;徐晓辉;;无线传感器网络节能技术的研究[J];传感器世界;2007年07期

5 王志明;沙莎;;Web文本挖掘技术在新闻主题检测中的应用研究[J];长沙大学学报;2007年05期

6 查志琴;;基于行模式的网页信息提取算法[J];常州工学院学报;2007年04期

7 屈明佑;雷航;郭文生;;基于ZigBee的现场数据采集系统设计与实现[J];电讯技术;2008年04期

8 赵屹;陈晓晖;;数字化时代XML在档案管理中的应用[J];档案学通讯;2009年05期

9 胡黎黎;陈向东;陈欢;;无线传感器网络的簇头功率控制技术[J];电光与控制;2007年06期

10 黄双华;赵志宏;郭志;谭浩;;Zigbee无线传感器网络路由研究与实现[J];电子测量技术;2007年02期

相关期刊论文前10条

1 赵艳辉;赵修良;陈武;;基于LABVIEW的温度数据采集系统的软件设计[J];科技创新导报;2009年08期

2 张茵;;浅谈“组织机构代码电子档案数据采集系统”的构建[J];术语标准化与信息技术;2009年03期

3 李娟;;基于CART的焦化生产实时数据库设计[J];计算机工程;2010年02期

4 高向阳;;简述HD-STGPS超站仪碎部测量数据采集系统的实现[J];中国地名;2011年04期

5 吕亚军;秦李颗;;基于智能移动平台的矿产资源数据采集系统设计与实现[J];矿山测量;2009年01期

6 涂钦;蔡坚勇;;基于LabVIEW嵌入式的便携式检测仪采集系统软件的设计[J];计算机与现代化;2009年09期

7 秦伟;;基于C8051F064数据采集的程序设计[J];湖南农机;2010年11期

8 李志林;徐文佳;丁倩;靳继聪;;一体化生产调度指挥信息管理系统的设计[J];仪器仪表用户;2011年03期

9 何火娇;乔振先;;水稻籽粒电场效应实验仪数据采集系统的设计[J];江西农业大学学报;1993年04期

10 刘志杰;沈胜强;;基于Visual Basic 6.0开发的数据采集系统软件[J];沈阳工程学院学报(自然科学版);2007年01期