当前位置:主页 > 科技论文 > 软件论文 >

大数据分析:方向、方法与工具

发布时间:2020-02-15 21:11
【摘要】:[目的/意义]大数据分析正成为学术界的热门课题。但现有的研究主要集中在大数据的意义和现象上,对大数据分析本身,包括分析的方向、分析方法等讨论甚少。本研究希望部分填补该空白,本研究对我国大数据分析的发展具有重要的参考价值。[方法/过程]从情报学的角度,通过总结国外的论文、研究报告和案例,结合笔者长期情报分析的经验,总结共识和提出建议。[结果/结论]大数据分析首先需要确定分析的方向和拟解决的问题,然后才能确定需要的数据和分析范围。获得数据常常需要创造性的方法,大数据分析是情报分析的一部分,需要将大数据分析发现的关系置于相关背景和宏观环境下解读。分析没有统一的分析工具,因分析的目标、处理的数据量不同而不同。
【图文】:

增长趋势,论文


lysistargetandamountsofdatatobeprocessed.Keywords:bigdataanalytics;analysisdirection;analysismethod最近几年大数据成为学术界的一个热门题目。笔者于2016年7月18日在相关期刊论文搜索篇名中有“大数据”一词的核心期刊论文,共有3239篇,其中2011年及以前,仅77篇,2012年26篇,2013年增长到359篇,2014年达到861篇,2015年达到1297篇,2016年截至7月18日收录的论文,已有612篇。按百分比计算,有关大数据的论文,59%是2015年和2016年7月发表的,27%是2014年发表的。2012年以前(不含2012)发表的仅占3%(见图1)。这显示,大数据研究,过去两年在我国已非常火热。但由于研究的时间太短,发表的论文大部分都不是基于充足的知识积累撰写的。根据论文的标题和摘要,以及重点选读部分论文,笔者发现,现有的研究重点主要集中在讨论大数据意义、大数据现象和大数据软件技术方面。而有关大数据分析方法的讨论则较少。在标题中有“大数据分析”短语的文章有90篇,但讨论大数据分析方法的论文只有两篇。涉及分析方向、数据来源、分析方法、分析工具的研究都非常缺乏。而要让大数据分析进入政府机构或企业的实际运作图1有关大数据文章数量的增长趋势之中,这些内容非常重要。本文希望能部分弥补这方面的缺陷,从情报学的角度来审视大数据分析的方向与方法,并通过总结国外的期刊论文、博士论文、政府和咨询公司的报告的成果,结合笔者在竞争情报分析方面的经验,,对上述问题进行了讨论和评价。1分析方向在讨论大数据的文献中,很多人认为,大数据分析就·第40卷2017年第1期·—1—

增长趋势,论文


lysistargetandamountsofdatatobeprocessed.Keywords:bigdataanalytics;analysisdirection;analysismethod最近几年大数据成为学术界的一个热门题目。笔者于2016年7月18日在相关期刊论文搜索篇名中有“大数据”一词的核心期刊论文,共有3239篇,其中2011年及以前,仅77篇,2012年26篇,2013年增长到359篇,2014年达到861篇,2015年达到1297篇,2016年截至7月18日收录的论文,已有612篇。按百分比计算,有关大数据的论文,59%是2015年和2016年7月发表的,27%是2014年发表的。2012年以前(不含2012)发表的仅占3%(见图1)。这显示,大数据研究,过去两年在我国已非常火热。但由于研究的时间太短,发表的论文大部分都不是基于充足的知识积累撰写的。根据论文的标题和摘要,以及重点选读部分论文,笔者发现,现有的研究重点主要集中在讨论大数据意义、大数据现象和大数据软件技术方面。而有关大数据分析方法的讨论则较少。在标题中有“大数据分析”短语的文章有90篇,但讨论大数据分析方法的论文只有两篇。涉及分析方向、数据来源、分析方法、分析工具的研究都非常缺乏。而要让大数据分析进入政府机构或企业的实际运作图1有关大数据文章数量的增长趋势之中,这些内容非常重要。本文希望能部分弥补这方面的缺陷,从情报学的角度来审视大数据分析的方向与方法,并通过总结国外的期刊论文、博士论文、政府和咨询公司的报告的成果,结合笔者在竞争情报分析方面的经验,对上述问题进行了讨论和评价。1分析方向在讨论大数据的文献中,很多人认为,大数据分析就·第40卷2017年第1期·—1—

【相似文献】

相关期刊论文 前10条

1 张文霖;;数据分析初体验[J];数据;2013年05期

2 古福;;让大数据分析更快速、更简化[J];互联网周刊;2013年11期

3 于宗民;;数据分析应用的最大障碍[J];中国金融电脑;2007年08期

4 魏巍巍;;论数据分析在企业经营管理中的重要性[J];产业与科技论坛;2012年12期

5 张文霖;;数据分析六步曲[J];数据;2013年06期

6 戴未琰;;大数据分析概要[J];物联网技术;2013年08期

7 王海蕴;;大数据分析 市场成倍增长 深耕空间巨大[J];财经界;2013年10期

8 ;大数据分析系列3:大数据分析如何权衡存储[J];电脑与电信;2013年10期

9 马_";;对大数据分析相关问题的思考[J];信息通信技术;2013年06期

10 ;数据分析3.0[J];董事会;2014年01期

相关会议论文 前10条

1 申敏;;数据分析的原则和一般方法[A];2010年云南电力技术论坛论文集(文摘部分)[C];2010年

2 刘刚;;小学生数据分析观念的培养[A];中华教育理论与实践科研论文成果选编(第五卷)[C];2013年

3 石勇;;在银行和金融数据分析中的评分方法[A];Data Analysis, Econo-physics and Risk Management--Proceedings of CCAST (World Laboratory) Workshop[C];2001年

4 吴一平;;基于数据分析的离校工作改进[A];中国高等教育学会教育信息化分会第十二次学术年会论文集[C];2014年

5 吕大青;;送变电施工企业中数据分析的运用[A];第二届浙江中西部科技论坛论文集(第一卷)[C];2005年

6 李小花;李姝;;大数据分析在指挥信息系统中的应用[A];2014第二届中国指挥控制大会论文集(下)[C];2014年

7 范丽伟;唐焕文;唐一源;;空间独立成分分析在fMRⅠ数据分析中的应用[A];第九次全国生物物理大会学术会议论文摘要集[C];2002年

8 张军;李婕;;中国国民休闲状态变化研究——基于网上数据分析[A];第十五届全国区域旅游学术开发研讨会暨度假旅游论坛论文册[C];2010年

9 徐小龙;王汝传;姜波;;一种新的基于P2P的电信海量数据分析业务模式[A];普适计算及其软件新技术——第三届长三角计算机科技论坛文集[C];2006年

10 邵东华;;高速公路的平面控制复测与数据分析[A];第四届“测绘科学前沿技术论坛”论文精选[C];2012年

相关重要报纸文章 前10条

1 匿铭;数据分析的“磨刀阶段”[N];中华读书报;2013年

2 胡英;澳发布政府可信数据分析指导草案[N];人民邮电;2014年

3 郑爱民;陕西加强消费维权数据分析利用[N];中国工商报;2014年

4 本报驻美国记者 吴成良;“数据分析”成了“金饭碗”[N];人民日报;2014年

5 本报记者 杨群;大数据分析亮出专家的“自贸研判”[N];解放日报;2014年

6 周桂生 汤建国;数据分析行业登陆湖南,带来巨大商机[N];中国企业报;2008年

7 朱文明 甫瀚公司咨询专家;数据分析提升决策智慧[N];中国审计报;2009年

8 ;国采中心空调协议供货数据分析[N];政府采购信息报;2010年

9 武虹 审计署驻沈阳特派办;以数据分析为统领开展数字化审计工作[N];中国审计报;2012年

10 杰弗尼;行走在大数据分析误区旁的零售商[N];中国商报;2013年

相关博士学位论文 前6条

1 刘岳;区域地球化学数据分析及成矿信息融合模型研究[D];中国地质大学;2015年

2 董媛香;基于软集合的不完备不一致数据分析及决策方法研究[D];重庆大学;2014年

3 张睿;数据分析在污染控制领域的节能优化应用[D];中国科学技术大学;2014年

4 陈宜治;函数型数据分析若干方法及应用[D];浙江工商大学;2011年

5 郭广报;基于并行统计计算的金融数据分析[D];山东大学;2012年

6 孙建强;生物磁共振数据分析中的几个问题[D];中国科学院研究生院(武汉物理与数学研究所);2014年

相关硕士学位论文 前10条

1 周儒军;基于Hadoop的分布式监控平台的研究与实现[D];华南理工大学;2015年

2 施建辉;中职生职业道德认识现状调查研究[D];上海师范大学;2015年

3 丁国辉;核磁共振数据分析中的两个问题[D];中国科学院研究生院(武汉物理与数学研究所);2015年

4 张清;面向精准广告投放的数据分析与可视化系统设计与实现[D];山东大学;2015年

5 周徐;基于分层采样的DeepWeb数据分析方法研究[D];苏州大学;2015年

6 王佳琦;纠正性反馈对高中生英语冠词习得的影响[D];内蒙古师范大学;2015年

7 顾星竹;基于Hadoop的PCF系统的设计与实现[D];南京大学;2014年

8 张海洋;大数据的统计分析技术比较研究[D];南京大学;2014年

9 扎娟娟;银保通管理系统的构建与实施[D];电子科技大学;2014年

10 关晨静;高中生英语跨文化交际能力的调查研究[D];江西师范大学;2015年



本文编号:2579917

资料下载
论文发表

本文链接:https://www.wllwen.com/kejilunwen/ruanjiangongchenglunwen/2579917.html


Copyright(c)文论论文网All Rights Reserved | 网站地图 |

版权申明:资料由用户d15e8***提供,本站仅收录摘要或目录,作者需要删除请E-mail邮箱bigeng88@qq.com