基于MapReduce的并行模糊规则分类算法研究及应用

发布时间：2023-03-27 19:25

　　分类问题是模式识别和机器学习的重要研究内容之一,现已经广泛应用到了工业、商业和科研等领域。基于模糊规则的分类算法有着分类精度高、分类结果具有语义性、可解释性、容易被用户理解等优点。并行计算的出现能够极其有效的解决当前大数据环境下的传统单个计算机在面对大规模数据集时所表现出的耗费时间长,效率低下,甚至内存溢出无法处理的问题。由Google提出的MapReduce模型是一个易于开发的,可以并行处理海量数据的编程模型。它能够降低并行程序设计的复杂度,用户只需要简单设计自身要解决的并行计算任务,大大节省了设计时间,效率极高。本文提出了一种基于MapReduce模型的并行模糊规则分类算法。该算法运用并行计算的方式来提取模糊规则,并构建模糊规则分类器,使其既具有模糊系统处理不确定性方面的优势,又有MapReduce模型并行计算的能力。在实验研究部分,本文将该并行算法应用到期货自动交易平台—交易开拓者(TradeBlazer,TB)以及印刷厂的标签印刷生产任务中,主要内容如下:(1)将提出的并行算法应用在期货交易上,从期货数据中提取模糊规则,将得到的模糊规则转换为TB公式,形成交易策略,并将其应用到...

【文章页数】：56 页

【学位级别】：硕士

【文章目录】：
摘要
Abstract
1 绪论
    1.1 研究背景及意义
    1.2 模式识别介绍
        1.2.1 模式识别简介
        1.2.2 模式识别常见分类方法
    1.3 本文主要研究内容
2 基于数据的模糊系统构建
    2.1 引言
    2.2 Wang-Mendel算法简介
        2.2.1 Wang-Mendel算法实现步骤
        2.2.2 Wang-Mendel算法优点
    2.3 本章小结
3 并行计算框架Hadoop介绍
    3.1 Hadoop简介
    3.2 Hadoop分布式文件系统
        3.2.1 HDFS的概念
        3.2.2 HDFS的架构
    3.3 分布式计算模型MapReduce
        3.3.1 MapReduce简介
        3.3.2 MapReduce程序模型
        3.3.3 MapReduce执行流程
    3.4 本章小结
4 基于MapReduce的并行模糊规则分类算法研究
    4.1 引言
    4.2 基于MapReduce的并行模糊规则分类算法的实现
        4.2.1 数据预处理
        4.2.2 确定模糊数
        4.2.3 提取模糊规则
        4.2.4 简化规则库
        4.2.5 确定类标签
    4.3 本章小结
5 基于MapReduce的并行模糊规则分类算法应用
    5.1 实验运行环境
    5.2 在期货数据上的应用
        5.2.1 TB平台介绍
        5.2.2 实验说明
        5.2.3 数据预处理
        5.2.4 实验结果及分析
    5.3 在工业印刷厂的应用
        5.3.1 印刷业务简介
        5.3.2 实验说明
        5.3.3 数据预处理
        5.3.4 系统设计及应用
    5.4 本章小结
6 总结与展望
    6.1 总结
    6.2 展望
参考文献
攻读硕士学位期间发表学术论文情况
致谢



本文编号：3772713