并行数据采集器任务分配策略的设计与实现

发布时间：2018-04-19 19:51

  本文选题：搜索引擎 + 并行数据采集　； 参考：《华中科技大学学报(自然科学版)》2003年S1期

【摘要】：介绍了搜索引擎数据采集器的并行技术 ,分析了并行数据采集器的任务分配模式及其工作原理 ,讨论了任务粒度对动态分配效果的影响 ,并提出了动态分配模式下的任务分配策略 ,最后介绍了SunONEGridEngine的任务调度机制 ,并利用SunONEGridEngine对所提出的动态任务分配策略进行了实现
[Abstract]:This paper introduces the parallel technology of the search engine data collector, analyzes the task assignment mode and its working principle of the parallel data collector, and discusses the influence of task granularity on the dynamic assignment effect. Finally, the task scheduling mechanism of SunONEGridEngine is introduced, and the dynamic task allocation strategy is implemented by using SunONEGridEngine.
【作者单位】： 华南理工大学广东省计算机网络重点实验室 华南理工大学广东省计算机网络重点实验室 华南理工大学广东省计算机网络重点实验室
【基金】：广东省计算机网络重点实验室项目 (2 0 0 1 2 7)
【分类号】：TP393.09

【共引文献】

相关硕士学位论文 前2条

1 王颖;智能搜索用户个性化定制模块的设计与开发[D];吉林大学;2007年

2 刘琳;校园网搜索引擎系统的设计与实现[D];山东大学;2007年

【相似文献】

相关期刊论文 前10条

1 林君，任人，刘福春;多通道并行数据采集技术[J];长春科技大学学报;1996年01期

2 王俊强,何晓青,王伟,张坤;用于检测油膜厚度的光纤传感器系统[J];光子学报;1999年12期

3 ;新品之窗[J];国外电子测量技术;1999年06期

4 田春廷,史慧;并行高速数据采集在VXI总线技术中的应用[J];计算机自动测量与控制;2000年06期

5 胡少青,张春熹,杜新政;应用高分辨率A/D和DSP实现的加速度计并行数据采集系统[J];电子测量与仪器学报;2002年01期

6 王明洲,郝重阳,黄晓文;高频水声信号空间相关特性研究[J];声学与电子工程;2002年03期

7 张润洲,程德福;基于DSP的并行数据采集系统设计与实现[J];吉林大学学报(信息科学版);2003年01期

8 吕晓峰,董守斌,张凌;并行数据采集器任务分配策略的设计与实现[J];华中科技大学学报(自然科学版);2003年S1期

9 孙义,于岱峰,宋春宁;运动人体三维测力分析系统的设计与实现[J];计算机工程与应用;2004年05期

10 于岱峰,孙义,宋春宁,马翠玉,徐德波;并行数据采集技术在三维测力系统中的应用[J];北京体育大学学报;2004年04期

相关会议论文 前4条

1 何卫;;解析仪器打印端口数据在检验中的应用[A];2004第二届世界华人临床生化和检验医学大会第六届全国检验医学学术会议论文汇编[C];2004年

2 田爱芸;方光廷;;中医院检验设备购置和使用的体会[A];2004第二届世界华人临床生化和检验医学大会第六届全国检验医学学术会议论文汇编[C];2004年

3 郑阳;殷玉U，

本文编号：1774480