海量车辆传感数据分布式管理平台的研究与设计
发布时间:2021-08-26 16:37
在城市计算系统中.需要对多种异构大数据进行分析、挖掘和融合以解决城市中面临的各种问题,提供相关的智能应用和服务。车辆传感数据是城市计算系统中重要的数据组成部分,其具有海量、高速、多样等特征,对其的管理工作面临着诸多的挑战。本文提出了面向海量车辆传感数据的管理平台,提供高效数据预处理和海量分布式数据管理功能。针对车辆传感数据的数据特征和城市计算应用和服务的需求提出一系列有针对性的算法设计以及工程设计优化方案。本文首先分析海量车辆传感数据分布式管理平台的研究背景和主要挑战,明确平台在城市计算系统的定位和应用场景。随后结合车辆传感数据特征、业界数据规范和平台应用需求等多方面因素,提出了完整的车辆传感数据规范。进一步根据数据规范和应用需求,提出了一系列在不同层面的数据预处理规则和算法。其中根据信息论思想提出了具有可扩展性的轨迹压缩算法HESAVE和轨迹地图匹配算法InfoMatch,相较于对照算法均有一定的提升。之后对平台进行了需求分析、设计和可行性验证,提出了一套合理的软件框架及部署模型设计,以及完整的数据预处理、主数据管理和统一查询接口等功能模块的软件设计方案,针对车辆传感数据管理中面对的...
【文章来源】:北京邮电大学北京市 211工程院校 教育部直属院校
【文章页数】:94 页
【学位级别】:硕士
【部分图文】:
姐Fliok程序运行时姑构
北京邮电大学工学硕士学位论文度数据的感知对象是车辆本身,主要表征车辆行驶过程中的一车速、能源状态等,其中包括连续值属性也有离散属性。一种车辆事件属性,使用离散值表示一个在特定时空点某个事件事件有不同的参数用以辅助描述。??按维度划分?按感知对象划分??
3.2.3.1轨迹偏离点检测??偏离点是属于异常数据中语法异常中的一种,由于传感器的精确度或者网络??条件造成的,如图3-2所示。??p5??Pio@-?Pii??Vi/;V2??Pi?Pa?Ps??图3-2数据偏离点示例??对于偏离点的检测,使用每个点到其前后点所在的线性回归线的欧式距离来??判断,如果其欧式距离超过给定的阈值则说明该点一个偏离点,在确定了偏离点??之后,利用该点前、后各n个点以及该点本身共(2n+l)个点的均值或者中值作??为该点的估值。??以图3-2中的P5为例,采用Pl到P4和口5到p9共8个点进行线性回归计算,??得到所在的直线方程,然后计算点P5到该直线的距离,距离超过阈值(T)则视??为偏离点,然后使用pl至p的所有点的坐标的均值作为P5的估值。??19??
【参考文献】:
期刊论文
[1]分布式流处理技术综述[J]. 崔星灿,禹晓辉,刘洋,吕朝阳. 计算机研究与发展. 2015(02)
[2]城市计算概述[J]. 郑宇. 武汉大学学报(信息科学版). 2015(01)
[3]基于REIDS缓存框架的分析与实践[J]. 马冰,姜学军,史海洋. 科技视界. 2014(26)
[4]分布式文件系统的应用研究[J]. 崔力升. 科技视界. 2014(02)
[5]Google Protobuf在Linux Socket通讯中的应用[J]. 李纪欣,王康,周立发,章军. 电脑开发与应用. 2013(04)
[6]地理信息系统时空数据模型分类[J]. 张山山. 测绘科学. 2012(04)
硕士论文
[1]基于Markov链的整句输入算法研究与实现[D]. 吴鹏.北京邮电大学 2007
[2]分布式流处理系统的研究[D]. 高偲.哈尔滨工程大学 2007
本文编号:3364589
【文章来源】:北京邮电大学北京市 211工程院校 教育部直属院校
【文章页数】:94 页
【学位级别】:硕士
【部分图文】:
姐Fliok程序运行时姑构
北京邮电大学工学硕士学位论文度数据的感知对象是车辆本身,主要表征车辆行驶过程中的一车速、能源状态等,其中包括连续值属性也有离散属性。一种车辆事件属性,使用离散值表示一个在特定时空点某个事件事件有不同的参数用以辅助描述。??按维度划分?按感知对象划分??
3.2.3.1轨迹偏离点检测??偏离点是属于异常数据中语法异常中的一种,由于传感器的精确度或者网络??条件造成的,如图3-2所示。??p5??Pio@-?Pii??Vi/;V2??Pi?Pa?Ps??图3-2数据偏离点示例??对于偏离点的检测,使用每个点到其前后点所在的线性回归线的欧式距离来??判断,如果其欧式距离超过给定的阈值则说明该点一个偏离点,在确定了偏离点??之后,利用该点前、后各n个点以及该点本身共(2n+l)个点的均值或者中值作??为该点的估值。??以图3-2中的P5为例,采用Pl到P4和口5到p9共8个点进行线性回归计算,??得到所在的直线方程,然后计算点P5到该直线的距离,距离超过阈值(T)则视??为偏离点,然后使用pl至p的所有点的坐标的均值作为P5的估值。??19??
【参考文献】:
期刊论文
[1]分布式流处理技术综述[J]. 崔星灿,禹晓辉,刘洋,吕朝阳. 计算机研究与发展. 2015(02)
[2]城市计算概述[J]. 郑宇. 武汉大学学报(信息科学版). 2015(01)
[3]基于REIDS缓存框架的分析与实践[J]. 马冰,姜学军,史海洋. 科技视界. 2014(26)
[4]分布式文件系统的应用研究[J]. 崔力升. 科技视界. 2014(02)
[5]Google Protobuf在Linux Socket通讯中的应用[J]. 李纪欣,王康,周立发,章军. 电脑开发与应用. 2013(04)
[6]地理信息系统时空数据模型分类[J]. 张山山. 测绘科学. 2012(04)
硕士论文
[1]基于Markov链的整句输入算法研究与实现[D]. 吴鹏.北京邮电大学 2007
[2]分布式流处理系统的研究[D]. 高偲.哈尔滨工程大学 2007
本文编号:3364589
本文链接:https://www.wllwen.com/guanlilunwen/glzh/3364589.html