面向移动应用检测的分布式任务管理系统研究与实现

发布时间：2020-03-17 20:54

【摘要】：随着移动互联网的飞速发展,移动应用逐渐渗透到人们生活的方方面面,但由于有效监管的缺乏和灰色利益驱动等原因,互联网中的恶意应用越来越多,引发的安全问题也愈发严峻。针对恶意应用存在的安全隐患,急需使用具备高性能计算能力的分布式系统对应用进行批量安全检测。不同于传统的分布式任务,移动应用检测任务具有难以切分、执行时间跨度大的特点。目前国内学者已经提出根据移动应用控制流复杂度来度量检测任务负载,在负载均衡算法中引入移动应用控制流复杂度以平衡集群节点之间的检测任务负载,提高分布式系统整体的任务执行效率。但是,该策略从代码逻辑层面去度量检测任务的负载耗时较长,而且逻辑的复杂度不能准确衡量检测任务负载。本文从代码底层特征入手,统计应用的指令规模,并通过指令规模来衡量检测任务负载。本文的主要工作如下:1.研究了移动应用检测技术的现状和移动应用检测任务的特点,研究了现有的分布式任务管理框架及核心技术点,包括负载均衡算法、任务调度、文件系统,并分析其优势和不足之处。2.结合移动应用检测任务执行时间跨度大的特点,从更直观的应用文件底层特征入手,提出一种指令级的移动应用软件规模衡量方法,在负载均衡算法中引入移动应用软件规模,并通过该负载均衡算法指导任务调度。同时对移动应用检测的海量小文件存储进行优化。3.设计了一个适合移动应用检测任务特点的分布式任务管理系统,并阐述了系统架构和主要功能模块的具体实现。4.通过实验验证了引入移动应用软件规模的动态负载均衡算法更加有效的平衡了集群节点之间的检测任务负载,提高了检测任务的执行效率。同时,实验验证了基于TFS的海量小文件存储可以有效提高文件读写效率。综合实验结果,本文设计的分布式任务管理系统具有高效性,能满足海量移动应用检测的业务需求。
【图文】：

图２－１邋Ｈａｄｏｏｐ整体架构逡逑

２．２．２．３邋Ｄｕｂｂｏ逡逑Ｄｕｂｂｏ［２５］是Ａｌｉｂａｂａ的开源分布式服务框架，它分层架构的设计思路使得各逡逑个层次之间最大限度的松耦合。如图２－３所示，，Ｄｕｂｂｏ系统框架至上而下总共有逡逑十层，分别是服务接口层、配置层、服务代理层、服务注册层、集群层、监控层、逡逑远程调用层、信息交换层、网络传输层、数据系列化层。较底层为服务提供方，逡逑较上层为服务消费方。例如，服务层作为配置层的调用层，能够调用配置层的相逡逑关接口，从而实现对配置的读取、修改、删除、更新等操作；传输层作为序列化逡逑层的调用层，能够调用序列化层中对象序列化、对象反序列化等接口，从而实现逡逑对象在网络传输中的自巾转换。逡逑１１逡逑
【学位授予单位】：北京邮电大学
【学位级别】：硕士
【学位授予年份】：2018
【分类号】：TP311.52

【参考文献】

相关期刊论文 前10条

1 侯海波;黄云霞;马霁阳;;移动应用测试的发展现状分析[J];电信网技术;2017年03期

2 蒋煦;张长胜;戴大蒙;慕德俊;;Android平台恶意应用程序静态检测方法[J];计算机系统应用;2016年04期

3 王秀;孙忠林;姜莉;;任务定时调度在企业级开发中的研究[J];电子科技;2015年10期

4 李挺;董航;袁春阳;杜跃进;徐国爱;;基于Dalvik指令的Android恶意代码特征描述及验证[J];计算机研究与发展;2014年07期

5 张凯;;一种Android应用软件的分包实现方案[J];电子技术与软件工程;2014年11期

6 白超;杨静;吴建国;;基于并行计算的海量日志分析系统实现[J];计算机技术与发展;2013年07期

7 赵洋;;淘宝TFS深度剖析[J];数字化用户;2013年03期

8 鲁阳;郑岩;;利用Zookeeper对HDFS中Namenode单点失败的改进方法[J];软件;2012年12期

9 张玉芳;魏钦磊;赵膺;;基于负载权值的负载均衡算法[J];计算机应用研究;2012年12期

10 王鸣涛;;软件规模估算方法综述[J];安阳师范学院学报;2012年05期

相关硕士学位论文 前5条

1 翁晓熠;海量移动应用检测任务的分布式调度技术研究与实现[D];北京邮电大学;2016年

2 高扬;海量移动应用数据处理技术研究[D];北京邮电大学;2015年

3 吴适;基于二进制代码混淆的软件保护研究[D];电子科技大学;2013年

4 张慧芳;基于动态反馈的加权最小连接数服务器负载均衡算法研究[D];华东理工大学;2013年

5 董峰;LLVM编译系统结构分析与后端移植[D];上海交通大学;2007年

本文编号：2587691