对等网络在科技奖励平台中的应用
本文关键词:对等网络在科技奖励平台中的应用
更多相关文章: 对等网络 多维关联规则 Simhash查重算法 Zernike矩
【摘要】:科技奖励评审系统是为科技管理部门提供年度科研奖励评审工作而服务的业务平台。其中还包括对申报人提供电子材料的严格形式审查及查重和在大量科研奖励历史数据中挖掘出有指导科研发展价值的信息提供给科技管理部门人员。面对不断增长并且分布式存储的海量科研奖励评审数据,对等网络平台相对于依托高性能服务器的客户端-服务器计算模式有更好的计算优势和经济价值。利用对等网络平台解决分布式数据挖掘,相对于普通数据挖掘的计算模式多了计算节点间数据融合与任务调度,但每台计算服务器节点间根据当前数据挖掘进程占CPU和内存量自动调整计算任务量以达到了网络计算节点自动负载均衡,从而可以计算出4项或更高维度关联规则计算结果集。Simhash算法是优秀的文本去重算法,并且有支持分布式计算和海量文本查重的优势,将该算法的优化算法应用到科技奖励申请材料的形式审查中可达到快速准确定位式文本查重检测;最后利用分布式对等网络平台和Simhash去重算法优势,结合图像几何特征值Zernike矩向量化数据及YCbCr空间特征值组合集为图片唯一标示的特征码,计算出图片之间相似度,达到对抄袭和窜改图像的定位检测。
【关键词】:对等网络 多维关联规则 Simhash查重算法 Zernike矩
【学位授予单位】:石家庄铁道大学
【学位级别】:硕士
【学位授予年份】:2015
【分类号】:TP393.02
【目录】:
- 摘要4-5
- Abstract5-8
- 第一章 绪论8-15
- 1.1 引言8
- 1.2 国内外研究现状8-12
- 1.2.1 P2P网络研究现状10
- 1.2.2 对等网络数据挖掘研究现状10-11
- 1.2.3 对等网络文本查重检测研究现状11
- 1.2.4 对等网络图像抄袭检测研究现状11-12
- 1.3 研究的目的和意义12-13
- 1.3.1 研究的意义12-13
- 1.3.2 研究的目的13
- 1.4 研究内容及章节安排13-15
- 第二章 对等网络架构及关键技术15-24
- 2.1 对等网络概述15-16
- 2.2 对等网络socket通信16-21
- 2.2.1 对等网络数据传输基础协议17
- 2.2.2 对等网络文本传输模型17-18
- 2.2.3 对等网络数据通信工作原理18-20
- 2.2.4 网络应用层数据包压缩20
- 2.2.5 网络数据多线程传输和断点续传20-21
- 2.3 B编码介绍21
- 2.4 网络加密系统介绍21-22
- 2.5 高维快速排序算法22-24
- 第三章 对等网络数据挖掘24-33
- 3.1 Apriori关联规则数据挖掘算法24-26
- 3.2 对等网络数据挖掘26-28
- 3.3 对等网络数据挖掘数据解析28-31
- 3.3.1 技术水平相关性29
- 3.3.2 投入相关性29
- 3.3.3 利润产出相关性29-30
- 3.3.4 产学研科技成果相关性30
- 3.3.5 科技成果负责人相关性30-31
- 3.3.6 科技成果完成人年龄相关性31
- 3.3.7 知识结论31
- 3.4 计算时间效率分析31-33
- 第四章 分布式文本查重33-44
- 4.1 文本查重33
- 4.2 Simhash算法原理及第四步信息熵无损压缩证明33-35
- 4.3 空间相识度35
- 4.4 中文分词35-38
- 4.4.1 正向最大匹配分词36-37
- 4.4.2 逆向最大匹配分词37-38
- 4.5 抄袭的法律定义38
- 4.6 分布式对等文本数据查重算法38-40
- 4.7 特征值分片计算和汉明距离不完全计算加速算法40-41
- 4.8 算法时间效率分析41
- 4.9 查重效果展示41-44
- 第五章 对等网络图像查重计算44-58
- 5.1图像特征值提取及特征效率44-49
- 5.2 YCbCr空间图像特征提取49-52
- 5.3 图像分布式查重检索52-53
- 5.4 图像抄袭检测效果展示53-58
- 第六章 总结与展望58-60
- 参考文献60-62
- 致谢62-63
- 个人简历、在学期间的研究成果及发表的学术论文63
【相似文献】
中国期刊全文数据库 前10条
1 李玲;;对等网络能否做大?[J];Internet信息世界;2001年02期
2 刘向彦;;对等网络有很大的获利能力,但无人指出如何去做[J];Internet信息世界;2001年02期
3 刘杰;对等网络嫁接企业应用[J];互联网周刊;2002年12期
4 常晓鹏;程凯;;关于对等网络结构的研究[J];河南教育学院学报(自然科学版);2006年03期
5 罗慧慧;刘凤鸣;;对等网络信誉系统的研究[J];电脑与电信;2007年04期
6 李小林;杨晓亚;张力娜;;对等网络搜索机制研究[J];天水师范学院学报;2007年02期
7 杜宏博;肖力千;胡星;;对等网络文件分发算法优化[J];计算机工程;2007年16期
8 于莉;;对等网络的应用研究[J];科技风;2008年05期
9 朱晓姝;;对等网络开发平台的比较分析与研究[J];网络安全技术与应用;2009年08期
10 徐蕾;;对等网络的发展与现状[J];读与写(教育教学刊);2010年09期
中国重要会议论文全文数据库 前10条
1 梁克;;对等网络技术的研究[A];江苏省通信学会2004年学术年会论文集[C];2004年
2 王东升;;浅谈P2P技术发展对网监工作带来的影响及对策[A];第二十次全国计算机安全学术交流会论文集[C];2005年
3 马晓梅;刘莹;;P2P及其对网络传播的影响[A];山东省计算机学会2005年信息技术与信息化研讨会论文集(一)[C];2005年
4 汤筠;张萌;孙立峰;杨士强;钟玉琢;;基于多发送结点的对等网络流媒体组播结构[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
5 李文清;张常有;段淑凤;;一种分布式Web服务内容的匹配方法研究[A];2010年全国开放式分布与并行计算机学术会议论文集[C];2010年
6 赵葆华;林海旦;陈海永;;移动对等网络数据检索新方法研究[A];2006年全国开放式分布与并行计算学术会议论文集(二)[C];2006年
7 任潇;董剑;刘宏伟;李洋;杨孝宗;;对等网络中基于失效规律的自适应失效检测器研究[A];第十四届全国容错计算学术会议(CFTC'2011)论文集[C];2011年
8 韩丽;雷振明;;对等网络的资源查找机制[A];通信理论与信号处理新进展——2005年通信理论与信号处理年会论文集[C];2005年
9 励铮;李卫明;;基于对等网络的公共密钥基础设施信任模型[A];浙江省电子学会第七次会员代表大会暨2007学术年会论文集[C];2007年
10 陶九阳;魏祥麟;张东戈;刘浩;;基于间接互惠的P2P激励机制研究[A];2009年全国开放式分布与并行计算机学术会议论文集(下册)[C];2009年
中国重要报纸全文数据库 前10条
1 ;竞开协同之星(GK-Star)独特的网络技术架构 扩展对等网络[N];中国计算机报;2004年
2 庄林;企业需要什么样的商用网络?[N];中国电力报;2002年
3 ;Web2.0的典型应用[N];人民邮电;2008年
4 本报记者 姜波;P2P,,迈进企业的未来[N];网络世界;2001年
5 刘宇红;利用SBS改造对等网络[N];中国计算机报;2001年
6 晴雪;打造真正的入门级无线打印解决方案[N];国际商报;2005年
7 朱冰;HP无线打印缔造企业办公室的自由国度[N];中国高新技术产业导报;2005年
8 本报记者 刘春辉;管理与应用——IPv6面临的最大挑战[N];人民邮电;2003年
9 上海交通大学金桥网络工程中心 李振武 白英彩;影响Internet未来的对等网络(P2P)[N];计算机世界;2002年
10 郭莹;点击科技综合·协同·对等[N];中国计算机报;2003年
中国博士学位论文全文数据库 前10条
1 余一娇;基于文件复制的对等网络搭便车抑制技术研究[D];华中科技大学;2009年
2 杨舰;对等网络有效搜索机制研究[D];复旦大学;2004年
3 韩定一;对等网络的社区模型及其在搜索中的应用[D];上海交通大学;2007年
4 彭浩;复杂对等网络系统中安全机制的研究[D];上海交通大学;2012年
5 王春枝;对等网络中节点合作激励机制研究[D];武汉理工大学;2013年
6 徐婕;基于对等网络的资源搜索策略的研究[D];华中科技大学;2007年
7 卢苇;对等网络分组搜索算法研究[D];四川大学;2006年
8 郭磊涛;对等网络中信任感知的资源交易模型[D];中国科学技术大学;2007年
9 陈汉华;基于对等网络的大地规模内容检索研究[D];华中科技大学;2010年
10 黄国伟;对等网络中服务可用性问题研究[D];南开大学;2009年
中国硕士学位论文全文数据库 前10条
1 余星;基于结构化对等网络的云资源多维查询算法的研究[D];上海理工大学;2014年
2 胡林;对等VPN网络实现技术研究及其应用[D];湘潭大学;2015年
3 彭浩;对等网络在科技奖励平台中的应用[D];石家庄铁道大学;2015年
4 许锋;对等网络平台的设计与架构[D];浙江大学;2002年
5 向俊凌;结构化对等网络复杂查询机制的研究[D];电子科技大学;2006年
6 曹华;对等网络安全匿名和文件真实性问题的研究[D];中南大学;2007年
7 施聪;对等网络中基于关键字的搜索[D];上海交通大学;2008年
8 杨武;对等网络中搭便车问题研究[D];湖南工业大学;2011年
9 施婷婷;基于博弈论的对等网络资源共享均衡机制的研究[D];吉林大学;2012年
10 张燕;对等网络中搭便车行为的分析与抑制机制[D];曲阜师范大学;2009年
本文编号:978496
本文链接:https://www.wllwen.com/guanlilunwen/ydhl/978496.html