当前位置:主页 > 科技论文 > 自动化论文 >

基于多目标进化算法的任务驱动模式挖掘研究

发布时间:2018-11-04 18:58
【摘要】:多目标优化问题是一类常见于各种科研以及工程应用中的问题,与经典单目标最优化问题不同,多目标问题中涉及到的各个目标相互之间存在着一定的冲突关系。目前在多目标领域存在很多不同类型的算法来解决该问题,而这其中,进化算法由于具有良好并行性、全局搜索以及对任何函数类可用等特性,在解决多目标优化问题上体现出了良好的性能,因此,多目标进化算法成为解决多目标优化问题的一个主流方法,并引起学者们的广泛关注。任务驱动的模式挖掘作为频繁模式挖掘领域的一个分支,由于其广阔的应用场景,例如商品组合推荐、网页打印区域推荐等等,已经越来越多地引起人们的关注。在这些任务驱动的应用中,推荐给用户的模式作为一个完整的任务并且该任务有许多子任务组成,因此这些模式称之为任务驱动模式。考虑到任务驱动模式中往往是一系列相互关联的子任务,因此子任务间的相关性较高,在挖掘过程中就需要考虑挖掘模式的完整性,以免影响用户的体验。传统任务驱动的模式挖掘算法采用对事务数据库(Transaction Database)的字典子集树进行深度优先遍历搜索的方式,在搜索的过程中利用剪枝的策略提高运行效率。然而基于字典子集树遍历的传统方法难以在实际应用中开展,因为算法需要根据具体问题的先验知识设置参数,例如:搜索时最小的支持度阈值min_sup,最小的占有度阈值min_occ以及支持度与占有度之间的一个偏好权值λ等,而且不同的参数对算法的结果影响很大,另外算法的效率也不尽人意。基于以上问题,本文对任务驱动模式挖掘问题进行了探索与研究,考虑从多目标优化的角度解决任务驱动模式挖掘问题,具体研究工作分为如下两部分:(1)本文从多目标优化的角度出发解决任务驱动模式挖掘问题,并提出了一种有效的多目标模式挖掘算法。在任务驱动模式挖掘领域中,传统算法需要用户设置一些必要的先验参数。而这些参数往往对传统算法有较大的影响,不同的参数使得算法的运行时间以及运行效果差别很大。因此,为了获得较好的性能,传统算法需要用户预先设置合适的参数。但在实际应用中,用户在缺乏具体问题先验知识的情况下难以选择出合适的参数,而且对于不同的问题其合适的参数也会大不相同。为了寻找合适的参数,用户需要尝试不同参数进行多次实验以寻找最佳效果,这样使得算法的运行代价昂贵,效率低下,最终难以在实际应用中展开。基于此,本文考虑多目标进化算法不需要根据具体问题设置先验参数这一良好特性,将任务驱动模式挖掘问题转化为一个3目标(支持度,占有度以及覆盖度)的多目标优化问题来处理。在经典多目标进化算法NSGA-II的基础上,本文提出了一种有效的多目标模式挖掘算法,简称MOPM。最后通过在真实数据集Smart Print数据集、Taobao数据集以及合成数据集IBM数据集上分别进行实验,结果表明,MOPM算法不需要根据具体问题设置先验参数,解决了传统算法中参数敏感性的问题,而且MOPM算法在实验效果以及运行效率上都较传统算法有一定的优势。因此,从多目标优化的角度来解决任务驱动模式挖掘问题是一种行之有效的方式。(2)本文提出了一种基于代理模型的多目标模式挖掘算法。从第一个研究工作中可以发现,用多目标优化的视角来解决任务驱动模式挖掘问题能够有效解决传统算法遇到的参数敏感性等挑战,促进了算法在实际中的应用。然而随着事务数据库规模的增大,MOPM算法在运行时效率会受到很大的影响。通过分析,发现由于进化算法在计算个体的3个目标值时都需要对事务数据库的全部数据进行遍历,因此真实评价个体的目标值代价昂贵。基于此,本文提出了一种基于代理模型的多目标模式挖掘算法,简称SA-MOPM,用以提高算法的运行效率。SA-MOPM算法采用改进的基于K-Prototype聚类算法的径向基函数网络模型作为代理模型,使径向基函数网络模型可以应用到离散的任务驱动模式挖掘问题上。在进化过程中利用代理模型对个体进行评估,因此可以大大降低适应度评估的代价。最后,本文在真实数据集Smart Print数据集、Taobao数据集以及合成数据集IBM数据集上分别进行实验,结果显示,在精度降低有限范围内,SA-MOPM算法的运行效率比MOPM算法有着更大的优势。因此,基于代理模型的多目标模式挖掘算法是解决大规模数据集上任务驱动模式挖掘问题的有效方法。
[Abstract]:......
【学位授予单位】:安徽大学
【学位级别】:硕士
【学位授予年份】:2017
【分类号】:TP18

【相似文献】

相关期刊论文 前10条

1 王宇新;田佳;郭禾;吴树朋;杨元生;;应用模糊方法的设计模式挖掘策略研究[J];计算机工程与应用;2010年02期

2 陆亿红;王子仁;黄燕;;适合稀少空间特征的同位模式挖掘算法[J];浙江工业大学学报;2007年04期

3 郭燕萍;辛伯宇;;高选票例外模式挖掘研究与实现[J];电脑开发与应用;2007年08期

4 徐显九;杨燕;岳爱萍;;高效的用户移动模式挖掘方法[J];计算机应用研究;2007年09期

5 李帆;夏士雄;张磊;;基于模糊理论的不确定轨迹模式挖掘[J];微电子学与计算机;2011年08期

6 李中元;边馥苓;;空间同位模式挖掘研究进展[J];地理空间信息;2013年06期

7 邢东山,沈钧毅,宋擒豹;用户浏览偏爱模式挖掘算法的研究[J];西安交通大学学报;2002年04期

8 刘洪辉;吴岳芬;;用户行为模式挖掘问题的研究[J];计算机技术与发展;2006年05期

9 付晓翠;许盈;车路;;游戏访问模式挖掘的研究与应用[J];郑州大学学报(理学版);2007年04期

10 颜一鸣;郭鑫;李仁发;;一种非确定树模式挖掘算法[J];计算机工程与应用;2011年15期

相关会议论文 前10条

1 王肃;杜军平;高田;;基于本体与知识背景的模式挖掘框架研究[A];2009年中国智能自动化会议论文集(第二分册)[C];2009年

2 缪裕青;尹东;;分布式存储结构的频繁闭合模式挖掘并行算法[A];2007年全国开放式分布与并行计算机学术会议论文集(下册)[C];2007年

3 王淼;尚学群;谢华博;李战怀;;行常量差异共表达基因模式挖掘算法研究[A];第29届中国数据库学术会议论文集(B辑)(NDBC2012)[C];2012年

4 刘玉葆;蔡嘉荣;印鉴;黄志兰;;基于最大访问模式挖掘的数据库异常行为检测[A];第二十三届中国数据库学术会议论文集(研究报告篇)[C];2006年

5 陆叶;王丽珍;陈红梅;赵丽红;;基于可能世界的不确定空间co-location模式挖掘研究[A];NDBC2010第27届中国数据库学术会议论文集(B辑)[C];2010年

6 王丽珍;陆叶;陈红梅;肖清;;基于前缀树结构的空间co-location模式挖掘算法研究[A];NDBC2010第27届中国数据库学术会议论文集(B辑)[C];2010年

7 胡伟成;曹三省;李丹;;一种基于QPop增量时域分割升维的媒体内容应用模式挖掘改进算法[A];第二十二届中国数据库学术会议论文集(技术报告篇)[C];2005年

8 薛丹;李德敏;裴仁林;;移动计算中基于PrefixSpan算法的用户移动模式挖掘[A];第二十一届中国数据库学术会议论文集(技术报告篇)[C];2004年

9 宋国杰;马帅;唐世渭;杨冬青;;基于模式挖掘的交通预测模型[A];第十九届全国数据库学术会议论文集(技术报告篇)[C];2002年

10 夏庆;马元元;孙志挥;;路径遍历模式挖掘方法的改进[A];第十六届全国数据库学术会议论文集[C];1999年

相关重要报纸文章 前1条

1 辛苑薇;谁将分享“大数据”的智慧盛宴?[N];21世纪经济报道;2012年

相关博士学位论文 前7条

1 Shafqat Ali Shad;移动用户轨迹与行为模式挖掘方法研究[D];中国科学技术大学;2013年

2 钱烽;同位模式挖掘研究[D];浙江大学;2012年

3 刘勇;图模式挖掘技术的研究[D];哈尔滨工业大学;2010年

4 覃桂敏;复杂网络模式挖掘算法研究[D];西安电子科技大学;2012年

5 王乐;数据流模式挖掘算法及应用研究[D];大连理工大学;2013年

6 林耀进;多源环境中数据预处理与模式挖掘的研究[D];合肥工业大学;2014年

7 曾海泉;时间序列挖掘与相似性查找技术研究[D];复旦大学;2003年

相关硕士学位论文 前10条

1 杨阳;云计算环境下时空轨迹伴随模式挖掘研究[D];南京师范大学;2015年

2 李海;基于用户轨迹数据的周期活动模式挖掘[D];江苏科技大学;2015年

3 周青峰;云计算环境下的模式挖掘算法研究[D];浙江工商大学;2015年

4 陈瑞;基于分治子图和极大有序团树的co-location模式挖掘研究[D];云南大学;2015年

5 尹腾腾;软件执行轨迹中行为模式挖掘算法研究[D];燕山大学;2015年

6 陈明福;缩小候选集的Top-k高效模式挖掘算法研究[D];重庆大学;2015年

7 张子瀚;面向大数据的高效用模式挖掘方法研究[D];北方工业大学;2016年

8 张刚领;一种基于团的闭频繁Co-location模式挖掘方法[D];云南大学;2016年

9 江万国;基于领域驱动的空间高效用Co-location模式挖掘[D];云南大学;2016年

10 吴锡宇;基于约束的城市co-location模式挖掘[D];云南大学;2016年



本文编号:2310846

资料下载
论文发表

本文链接:https://www.wllwen.com/kejilunwen/zidonghuakongzhilunwen/2310846.html


Copyright(c)文论论文网All Rights Reserved | 网站地图 |

版权申明:资料由用户a2fca***提供,本站仅收录摘要或目录,作者需要删除请E-mail邮箱bigeng88@qq.com