基于公交车刷卡数据的客流分析研究

发布时间：2017-12-29 09:00

  本文关键词：基于公交车刷卡数据的客流分析研究　出处：《北方工业大学》2017年硕士论文　论文类型：学位论文

  更多相关文章： 公交IC卡数据 数据清洗 时空属性数据 海量数据 公交客流量 公交站间运达时速

【摘要】：公交行业的发展,产生了海量多元的公交IC卡刷卡数据,为行业应用提供快速、准确的站点客流量统计,以及站间公交时速的服务一直是智能公交建设的重点。以往对站点客流量的研究只是针对上下车客流量进行了简单的数据统计;在站点换乘客流量方面,根据站点吸引等方法对站点换乘客流量进行预测,缺乏大量出行记录作为其数据支撑,使得准确度不高;在公交站点区间行程时间及公交站间运达时速等方面的研究,也主要集中于小规模样本数据统计的基础上进行的预测,提出的并行算法在海量数据规模下不具备水平扩展能力。本文在总结已有的相关工作和研究成果的基础上,对海量公交刷卡数据进行数据清洗,并在此基础上,根据数据所具有的时空特性对站点客流量、及站间公交运达时速等方面进行分析研究,并对提出的计算分析方法在Hadoop MapReduce上进行了实现验证,具体的研究工作如下:(1)在公交数据清洗方面,针对具有时空属性的原始公交IC卡数据,提出了在大数据环境下基于时间的聚类、和基于规则的过滤的分析计算方法。基于时间的聚类主要是根据时间一致性原则判断数据时间范围,并根据数据所在城市,即北京市的交通运营情况等,采取基于规则的过滤策略,对异常数据进行修改、剔除,为后续对数据的深入分析提供了数据支持。(2)在公交站点客流量方面,主要针对站点上下车客流量、站点换乘客流量进行分析:在公交站点上下车客流量方面,提出了在大数据环境下的一种公交刷卡时间的聚类方法,通过对每趟次刷卡数据的聚类分析,来判断该辆车上车刷卡数据或下车刷卡数据的归属时间段,在清洗后的数据基础上,通过两次计算得到所有站点在不同时间段的上车刷卡数据量和下车刷卡数据量;在站点换乘客流量方面,通过时空等条件的约束,判断是否有换乘行为,进而得到站点在不同时段的换乘客流量。(3)在反映相邻站间客流运达能力方面,针对相邻站间公交运达时速进行了分析,提出了在大数据环境下对公交车在站点停靠时刻、离站时刻的计算分析方法,在清洗后的公交刷卡数据的基础上,根据上述方法,计算公交车在不同线路方向上的相邻站点区间的行程时间和站间公交运达时速。本文搭建了实验环境,在Hadoop平台上,采用HDFS来存储海量原始公交刷卡数据及中间结果集,采用MapReduce编程模型对大规模数据集进行并行处理,并通过大量实验,对上述计算分析方法在大数据环境下的可行性、准确性及扩展性进行了验证。
[Abstract]:......
【学位授予单位】：北方工业大学
【学位级别】：硕士
【学位授予年份】：2017
【分类号】：TP311.13

【参考文献】

相关期刊论文 前10条

1 张庆;;基于大数据的公交车GPS历史轨迹的数据处理[J];物联网技术;2016年04期

2 周敏;韩印;姚佼;;基于广义回归神经网络的公交车运行时间预测模型[J];交通与运输(学术版);2013年02期

3 左忠义;汪磊;;公交到站时间实时预测信息发布技术研究[J];交通运输系统工程与信息;2013年01期

4 周雪梅;杨熙宇;吴晓飞;;基于IC卡信息的公交客流起止点反推方法[J];同济大学学报(自然科学版);2012年07期

5 陈绍辉;陈艳艳;尹长勇;;基于特征站点的公交IC卡数据站点匹配方法研究[J];北京工业大学学报;2012年06期

6 陈绍辉;陈艳艳;赖见辉;;基于GPS与IC卡数据的公交站点匹配方法[J];公路交通科技;2012年05期

7 亓开元;赵卓峰;房俊;马强;;针对高速数据流的大规模数据实时处理方法[J];计算机学报;2012年03期

8 张孜;邹亮;朱玲湘;;基于公交IC卡的公交换乘数据获取方法研究[J];交通信息与安全;2011年06期

9 张春辉;宋瑞;孙杨;;基于卡尔曼滤波的公交站点短时客流预测[J];交通运输系统工程与信息;2011年04期

10 姚宝珍;杨成永;于滨;;动态公交车辆运行时间预测模型[J];系统工程学报;2010年03期

相关博士学位论文 前1条

1 宋晓梅;常规公交网络运行可靠性多层次评价模型与算法[D];北京交通大学;2010年

相关硕士学位论文 前10条

1 卢帅;移动对象数据流下相似轨迹查询方法研究[D];北方工业大学;2015年

2 王鑫;基于GPS数据的公交车停靠站时间预测研究[D];重庆大学;2015年

3 汤月华;基于GPS数据的公交站点区间行程时间分布与可靠性分析[D];浙江大学;2015年

4 靳佳;基于IC卡的北京市公交出行特征分析[D];首都师范大学;2013年

5 唐真;基于hadoop的推荐系统设计与实现[D];电子科技大学;2013年

6 吴祥国;基于公交IC卡和GPS数据的居民公交出行OD矩阵推导与应用[D];山东大学;2011年

7 姜文;基于Hadoop平台的数据分析和应用[D];北京邮电大学;2011年

8 程功;基于公交到站时间预测的公交调度模型研究[D];华南理工大学;2010年

9 章玉;基于数据挖掘的动态公交客流OD获取方法研究[D];北京交通大学;2010年

10 廖泽容;基于公交IC数据的公交客流量分析[D];云南大学;2010年

，

本文编号：1349611