云制造环境下海量信息采集技术研究
本文关键词:云制造环境下海量信息采集技术研究
更多相关文章: 制造业信息化 云制造 信息采集 数据库 PHP
【摘要】:随着云制造服务模式的提出,创建出一种装备制造业信息化发展的全新商业服务模式。这是互联网的技术与制造技术相结合的网络信息化,应用于产品生命周期服务。这种模式将制造资源虚拟化、协同化、智能化的异地充分共享,,为制造业的服务提供商和用户提供专业的服务。 云制造平台搭建的研究目前还在起飞阶段,在资源感知,物联及接入适配技术上有所探索,但在海量的信息采集技术方面的研究略显匮乏。现阶段的信息采集模式多为大范围的搜索,信息采集基于最大化抓取数据的原则,只注重采集到的数量和范围,而忽略了采集到的主题内容相关性和顺序权重。这样往往因采集的页面数量过多而消耗了硬件资源和网络带宽,造成采集的效率低和用户体验差。因此不很适合于云制造创新服务平台中的信息采集。 本文以云制造创新服务平台为依托,结合云制造平台的特点来设计一种新的采集方法,并进行研究分析与实践应用,使云制造创新服务平台能在采集海量信息的同时保证信息与制造业信息的相关性,提高资源的利用率,为用户提供更有针对性、灵活多变的专业性服务。具体工作如下: (1)分析现有的信息采集方法,结合云制造平台所需要采集的海量、多态、无序、多重的互联网信息的特征,据此设计一个相对完善高效的信息采集方法。 (2)综合比较已有搜索引擎所使用的技术和编写规则,对页面采集、页面分析、信息提取、内容提取、链接解析、内容过滤各个步骤进行详细的规则设定和编写。将会更适应于制造业资源的采集工作。 (3)学习计算机网络平台编程语言及数据库理论,确定合适的网络平台构架及数据库结构;在搭建好的云制造创新服务平台中实现信息采集模块的运作并与数据库的连接。 经过运行测试表明,本文所构建的信息采集方法满足对海量装备制造业信息采集的要求;信息采集系统建立在制造信息的收集是可以实现的;作为云制造平台的一部分,信息采集模块可以实现其访问数据库的操作。
【关键词】:制造业信息化 云制造 信息采集 数据库 PHP
【学位授予单位】:内蒙古科技大学
【学位级别】:硕士
【学位授予年份】:2014
【分类号】:TP274.2
【目录】:
- 摘要3-4
- Abstract4-8
- 1 引言8-17
- 1.1 制造业信息化8-11
- 1.1.1 制造业信息化的概念8-9
- 1.1.2 制造业信息化的发展技术9
- 1.1.3 制造业信息化发展趋势9-10
- 1.1.4 制造业信息化建设的意义10-11
- 1.2 云制造11-17
- 1.2.1 云制造的概念11-13
- 1.2.3 云制造的发展现状13-15
- 1.2.4 云制造的研究意义15-17
- 2 云制造环境下的信息采集17-24
- 2.1 制造业资源的分类和特性17
- 2.2 信息采集方法的确定17-22
- 2.3 信息采集方法的设计22-24
- 3 索引数据库24-29
- 3.1 MySQL 数据库24-26
- 3.2 数据库表单的建立26-29
- 4 信息采集29-43
- 4.1 信息采集方法的设计思路29-30
- 4.2 信息采集方法的流程30-43
- 4.2.1 页面采集32-34
- 4.2.2 页面分析34-36
- 4.2.3 信息提取36-38
- 4.2.4 内容提取38-41
- 4.2.5 链接解析41-43
- 5 内容过滤43-47
- 5.1 广告过滤44
- 5.2 超链接过滤44-45
- 5.3 图片、视频的过滤45
- 5.4 其他框架的过滤45-47
- 6 信息采集的构建与实现47-51
- 结论51-53
- 参考文献53-58
- 在学研究成果58-59
- 致谢59
【参考文献】
中国期刊全文数据库 前10条
1 李强;秦波;包柏峰;;基于云制造的模具协同制造模式探讨[J];锻压技术;2011年03期
2 叶允明,于水,马范援,宋晖,张岭;分布式Web Crawler的研究:结构、算法和策略[J];电子学报;2002年S1期
3 张倩;齐德昱;;面向服务的云制造协同设计平台[J];华南理工大学学报(自然科学版);2011年12期
4 林海霞;原福永;陈金森;刘俊峰;;一种改进的主题网络蜘蛛搜索算法[J];计算机工程与应用;2007年10期
5 欧阳柳波,李学勇,李国徽,王鑫;专业搜索引擎搜索策略综述[J];计算机工程;2004年13期
6 尹胜;尹超;刘飞;郭坤毅;;网络化协同产品开发资源集成服务机制研究[J];计算机集成制造系统;2009年11期
7 李伯虎;张霖;王时龙;陶飞;曹军威;姜晓丹;宋晓;柴旭东;;云制造——面向服务的网络化制造新模式[J];计算机集成制造系统;2010年01期
8 郜震霄;肖田元;范文慧;;面向复杂产品设计的分布式仿真优化技术研究[J];计算机集成制造系统;2010年03期
9 李伯虎;张霖;任磊;柴旭东;陶飞;罗永亮;王勇智;尹超;黄刚;赵欣培;;再论云制造[J];计算机集成制造系统;2011年03期
10 张霖;罗永亮;范文慧;陶飞;任磊;;云制造及相关先进制造模式分析[J];计算机集成制造系统;2011年03期
本文编号:816422
本文链接:https://www.wllwen.com/kejilunwen/sousuoyinqinglunwen/816422.html