基于ElasticSearch的海量AIS数据存储方法

发布时间：2017-09-13 15:11

  本文关键词：基于ElasticSearch的海量AIS数据存储方法

  更多相关文章： 时空索引 船舶自动识别系统 轨迹压缩 数据集群

【摘要】：船舶自动识别系统(AIS)数据具有海量性、时空性和小记录频繁更新等特性。面向海量AIS数据,提出了一种基于分布式集群的AIS数据存储方法。该方法对AIS数据存储索引结构进行了设计,通过对时间维按月切分,以及对空间范围聚类切分,构造了索引时空立方体,从而提升了时空查询效率。讨论了索引分片和副本设计与数据安全性和系统服务可靠性的关系,分析了时空立方体性能,并针对索引分片与副本数对索引性能的影响,进行了理论分析和试验验证。
【作者单位】： 中国人民解放军91635部队;
【关键词】： 时空索引 船舶自动识别系统 轨迹压缩 数据集群
【分类号】：TP333
【正文快照】：

【参考文献】

中国期刊全文数据库 前3条

1 钟运琴;方金云;赵晓芳;;大规模时空数据分布式存储方法研究[J];高技术通讯;2013年12期

2 潘家财;邵哲平;姜青山;;数据挖掘在海上交通特征分析中的应用研究[J];中国航海;2010年02期

3 王贺封;;时空数据模型及TGIS研究[J];测绘与空间地理信息;2006年04期

【共引文献】

中国期刊全文数据库 前10条

1 郑义成;莫钦华;王海鸿;;基于ElasticSearch的海量AIS数据存储方法[J];指挥信息系统与技术;2016年03期

2 雷进宇;初秀民;徐武雄;;基于AIS的桥区船舶轨迹三维可视化模型[J];交通运输系统工程与信息;2016年03期

3 杨娟;管续栋;;基于基态修正模型的历史数据回溯实现方法研究[J];科技资讯;2016年02期

4 孟范立;;利用AIS数据挖掘建立船舶到达规律模型[J];舰船科学技术;2016年10期

5 邵_g;;大数据云存储中的并行优化处理方法仿真[J];计算机仿真;2016年04期

6 周晋;;基于时空数据模型的土地地籍管理研究[J];中国农业资源与区划;2016年01期

7 王建丽;;地理空间框架数据的联动更新技术研究与实现[J];地理空间信息;2015年06期

8 肖潇;邵哲平;潘家财;纪贤标;;基于AIS信息的船舶轨迹聚类模型及应用[J];中国航海;2015年02期

9 周立;赵新生;王继刚;汤均博;白钰莹;;北斗系统在海上智能交通安全系统中应用研究[J];导航定位学报;2015年02期

10 陈国伟;杨春;周需要;张正平;胡勤友;;海量船舶自动识别系统中数据检索系统的设计与实现[J];计算机应用;2015年S1期

【二级参考文献】

中国期刊全文数据库 前10条

1 张书彬;韩冀中;刘志勇;王凯;;基于MapReduce实现空间查询的研究[J];高技术通讯;2010年07期

2 刘旭辉;韩冀中;贺劲;韩承德;;基于集群系统的空间数据并行处理策略研究[J];高技术通讯;2009年10期

3 邵哲平;孙腾达;潘家财;纪贤标;;基于ECDIS和AIS的船舶综合信息服务系统的开发[J];中国航海;2007年02期

4 纪贤标;邵哲平;潘家财;孙腾达;;AIS信息分布式采集系统的开发及关键技术[J];上海海事大学学报;2007年01期

5 王家耀,魏海平,成毅,熊自明;时空GIS的研究与进展[J];海洋测绘;2004年05期

6 吴忠东,张照录,乔忠,周秀慧;时空数据模型研究原则与表达方法的探讨[J];山东理工大学学报(自然科学版);2004年02期

7 陈志泊,陆守一;TGIS中的时空数据模型的研究进展[J];河北林果研究;2003年04期

8 ;Spatio-temporal GIS Data Model Based on Event Semantics[J];Geo-Spatial Information Science;2003年03期

9 闫宏斌;时态GIS数据模型及基态修正时空数据模型的扩展[J];三晋测绘;2002年Z1期

10 李小娟,尹连旺,崔伟宏;土地利用动态监测中的时空数据模型研究[J];遥感学报;2002年05期

【相似文献】

中国期刊全文数据库 前10条

1 郑士贵;数据存储的全面管理[J];管理科学文摘;1997年09期

2 相晓明;网上存储:X:Drive[J];互联网周刊;2000年30期

3 王宇葳;谁来吞吐你的数据[J];互联网周刊;2000年30期

4 袁胜,冯毅,伍显峰,涂春明,盛云川;移动计费营业系统中数据存储的考虑[J];电信技术;2001年01期

5 杨向东;数据存储——深化金融电子化的奠基之石[J];华南金融电脑;2002年03期

6 李子臣,王振光,王文静;外包数据存储——经济、安全、高效[J];现代情报;2002年11期

7 杨向东;数据存储——金融电子化的基石[J];中国金融电脑;2002年03期

8 黄重讯;企业的数据存储[J];乡镇企业研究;2003年06期

9 李婕;;医院信息化促进数据存储中心的建立[J];医学信息;2006年09期

10 夏欢;熊前兴;冯樱;;数据存储的探讨[J];科技信息;2006年S4期

中国重要会议论文全文数据库 前10条

1 孙峥皓;汪宏f;阎岩;岑小锋;邓志均;;浅谈信息化战争对大数据存储与分析的要求及对策[A];2013第一届中国指挥控制大会论文集[C];2013年

2 张沁川;王厚军;;基于大容量闪存的数据存储与管理[A];2008中国仪器仪表与测控技术进展大会论文集（Ⅲ）[C];2008年

3 霍跃华;;IP SAN在煤炭企业数据存储的应用研究[A];煤矿自动化与信息化——第20届全国煤矿自动化与信息化学术会议暨第2届中国煤矿信息化与自动化高层论坛论文集[C];2010年

4 盛磊;李美华;程林;;一种轧钢过程数据存储方法[A];全国冶金自动化信息网2014年会论文集[C];2014年

5 王文峰;李佳;;刍议信息系统数据存储与备份系统的构建方式[A];2011年云南电力技术论坛论文集（入选部分）[C];2011年

6 张艳秋;李建中;杨艳;张兆功;;混合负载多媒体服务器的数据存储和数据提交[A];第二十届全国数据库学术会议论文集（研究报告篇）[C];2003年

7 王淑江;;烟台日报传媒集团存储体系规划[A];中国新闻技术工作者联合会五届一次理事会暨学术年会论文集（上篇）[C];2009年

8 ;Wallstor网络数据存储的新技术应用[A];江苏省微型电脑应用协会产学研成果交流会会议资料[C];2010年

9 韦大伟;;分布式数据存储中的机密性保护[A];2006年全国开放式分布与并行计算机学术会议论文集（三）[C];2006年

10 韩德志;;内网数据存储安全关键技术的研究与实现[A];2010年第16届全国信息存储技术大会（IST2010）论文集[C];2010年

中国重要报纸全文数据库 前10条

1 中国惠普公司网络存储事业部技术顾问 周志峰;数据存储面临七大挑战[N];计算机世界;2001年

2 本报记者 郭涛;中兴通讯打造安全高效的大数据存储[N];中国计算机报;2013年

3 本报记者 陈巍巍;数据存储 进化正当时[N];计算机世界;2013年

4 本报记者 黄锐;绿源巢:大数据存储弄潮儿[N];东莞日报;2014年

5 毛玲玲 吴非;数据存储 安全为重[N];解放军报;2014年

6 本报记者 郭涛;华为存储：高端存储、大数据存储齐头并进[N];中国计算机报;2013年

7 本报记者 方慧玲;纠删码技术：大数据存储的“安全卫士”[N];江苏科技报;2014年

8 ;培养皿中的数据存储[N];网络世界;2007年

9 ;2010年中小企业数据存储市场六大趋势[N];网络世界;2010年

10 本报实习记者 陈勋燕;数据存储网络凸现商机 上海邮通转型前景看好[N];通信信息报;2002年

中国博士学位论文全文数据库 前3条

1 付松龄;分布式在线社交网络数据存储及优化技术研究[D];国防科学技术大学;2014年

2 张杰;一种高速数据存储方法的研究[D];中国科学技术大学;2013年

3 付永忠;基于AFM和硫系相变材料的超高密度数据存储机理研究[D];江苏大学;2010年

中国硕士学位论文全文数据库 前10条

1 葛佳;P2P网络信誉数据存储与恢复方法的研究与实现[D];昆明理工大学;2015年

2 潘阳;基于Hadoop技术在分布式数据存储中的应用研究[D];大连海事大学;2015年

3 秦峥惠;基于Leveldb的企业级大数据集群化存储设计与实现[D];辽宁科技大学;2015年

4 吉瑛;基于MongoDB的团队协作数据存储方案研究与实现[D];中国科学院大学(工程管理与信息技术学院);2015年

5 姜威灵;CT仿真数据存储与高速传输装置设计[D];东北大学;2014年

6 方颀;基于行数据存储的CBCT图像重建FPGA电路的优化与设计[D];哈尔滨工业大学;2015年

7 张路路;基于MongoDB的大数据存储方法研究与应用[D];成都理工大学;2015年

8 张磊;基于Hadoop分布式数据存储传感设备平台的描述[D];南京邮电大学;2015年

9 贾新宇;基于云计算的GIS栅格数据存储与算法研究[D];吉林大学;2015年

10 李青;科技云平台的数据存储管理技术研究[D];北方工业大学;2016年

，

本文编号：844429