基于大数据技术的电信网络诈骗案件分析实验设计
发布时间:2021-01-25 19:06
大数据技术极大提高了各类犯罪案件的案情分析能力和侦破效率。该文利用大数据技术对电信网络诈骗案件进行分析,首先详细介绍了大数据集群环境搭建和数据仓库构建的过程,接着导入电信网络诈骗案件数据,随后运用Hive对数据进行处理和分析,最后将结果应用ECharts进行可视化展示。通过实验可以使学生掌握大数据处理的关键技术,提高案件分析的能力。
【文章来源】:实验技术与管理. 2020,37(10)北大核心
【文章页数】:6 页
【部分图文】:
实验总体流程
完成关闭防火墙、免密登录、时间同步等配置,安装并开启Zookeeper、Hadoop、Spark等服务;搭建数据仓库,包括安装并配置MySQL、Hive等。2)数据导入和数据分析。在Hive中建立与电信网络诈骗案件相对应的表,将文件中的案件数据导入数据表中,然后对数据进行分析。3)数据可视化。利用ECharts对Hive的数据分析结果进行可视化展示,可以通过绘制的饼图、折线图、柱状图等直观展示案件类别比例、案件损失程度频次及破案率对比等信息。2搭建大数据环境2.1搭建大数据集群搭建拥有3个节点的大数据集群实验环境,如图2所示。图2大数据集群主节点master:充当NTP服务器,Zookeeper的follower以及Hadoop集群的NameNode、ResourceManager和SecondaryNameNode。从节点slave1:充当NTP客户端,Zookeeper的leader以及Hadoop集群的DataNode和NodeManager。从节点slave2:充当NTP客户端,Zookeeper的follower以及Hadoop集群的DataNode和NodeManager。首先,集群所用的节点都位于同一个局域网并关闭各个机器的防火墙;其次,配置host文件,设置master、slave1和slave2的IP地址;再次,为了保证数据的同时性和同步性,设定master为NTP服务器,slave1和slave2为NTP客户端,以此让时间同步更为精确;最后,从节点上配置SSH无密码登录。然后,完成下面软件的安装与配置。1)安装JDK。把JDK解压到/usr/lib/java目录,命令如下:sudotar-zxvf/opt/soft/jdk-8u171-linux-x64.tar.gz-C/usr/java配置并生效JAVA_HOME等环境变量。2)安装并启动Zookeeper。把Zookeeper解压到/usr/zookeeper目录,命令如下:sudotar-zxvf/opt/soft/zookeeper-3.4.10.tar.gz-C/usr/zookeeper/配置并生效ZOOKEEPER_HOME等环境变量,修改zo
?执行如下命令:selectdegree,count(*)astotalfromfinalwhereyear(take_time)=2016groupbydegreeorderbytotal;运行结果如图4所示,经济损失特别巨大类案件145起,巨大类案件414起,较大类案件1461起。图42016年经济损失程度频次统计结果3)题目3:统计A派出所2019年案件受理情况。执行如下命令:selectstate,count(*)astotalfromfinalwhereyear(take_time)=2019andaccept_unit="A派出所"groupbystateorderbytotal;运行结果如图5所示,A派出所受理案件200起,其中立案状态40起,破案状态160起。图5A派出所2019年案件受理情况4数据可视化运用ECharts对数据分析结果进行可视化1)题目1:绘出所有案件副类别比例图。要求:(1)图形类别为饼状图;
【参考文献】:
期刊论文
[1]大数据时代电信网络诈骗犯罪的防控反思[J]. 娄永涛,唐祥. 重庆理工大学学报(社会科学). 2020(03)
[2]语音伪造与鉴伪的发展与挑战[J]. 陶建华,傅睿博,易江燕,王成龙,汪涛. 信息安全学报. 2020(02)
[3]大数据背景下的现代警务创新[J]. 王东旭. 广西警察学院学报. 2020(01)
[4]论电信诈骗犯罪的特点、成因及防控[J]. 朱艾男. 法制与社会. 2020(06)
[5]“大数据技术”实验教学环境构建研究[J]. 杨丹,姜华,张玉军,赵骥. 实验技术与管理. 2019(11)
[6]深化公安院校大数据条件下实战化教学改革的实践与思考[J]. 夏存喜. 公安教育. 2019(11)
[7]大数据背景下的现代警务人才教育培养探究[J]. 周国民,朱龙飞,刘强. 公安教育. 2019(02)
[8]基于大数据的公安警务实训共享平台构建与运用[J]. 房汉平. 实验技术与管理. 2018(11)
[9]美国预测警务中基于大数据的犯罪情报分析[J]. 吕雪梅. 情报杂志. 2015(12)
[10]论大数据驱动下的预测警务创新[J]. 李国军. 中国人民公安大学学报(社会科学版). 2015(06)
本文编号:2999730
【文章来源】:实验技术与管理. 2020,37(10)北大核心
【文章页数】:6 页
【部分图文】:
实验总体流程
完成关闭防火墙、免密登录、时间同步等配置,安装并开启Zookeeper、Hadoop、Spark等服务;搭建数据仓库,包括安装并配置MySQL、Hive等。2)数据导入和数据分析。在Hive中建立与电信网络诈骗案件相对应的表,将文件中的案件数据导入数据表中,然后对数据进行分析。3)数据可视化。利用ECharts对Hive的数据分析结果进行可视化展示,可以通过绘制的饼图、折线图、柱状图等直观展示案件类别比例、案件损失程度频次及破案率对比等信息。2搭建大数据环境2.1搭建大数据集群搭建拥有3个节点的大数据集群实验环境,如图2所示。图2大数据集群主节点master:充当NTP服务器,Zookeeper的follower以及Hadoop集群的NameNode、ResourceManager和SecondaryNameNode。从节点slave1:充当NTP客户端,Zookeeper的leader以及Hadoop集群的DataNode和NodeManager。从节点slave2:充当NTP客户端,Zookeeper的follower以及Hadoop集群的DataNode和NodeManager。首先,集群所用的节点都位于同一个局域网并关闭各个机器的防火墙;其次,配置host文件,设置master、slave1和slave2的IP地址;再次,为了保证数据的同时性和同步性,设定master为NTP服务器,slave1和slave2为NTP客户端,以此让时间同步更为精确;最后,从节点上配置SSH无密码登录。然后,完成下面软件的安装与配置。1)安装JDK。把JDK解压到/usr/lib/java目录,命令如下:sudotar-zxvf/opt/soft/jdk-8u171-linux-x64.tar.gz-C/usr/java配置并生效JAVA_HOME等环境变量。2)安装并启动Zookeeper。把Zookeeper解压到/usr/zookeeper目录,命令如下:sudotar-zxvf/opt/soft/zookeeper-3.4.10.tar.gz-C/usr/zookeeper/配置并生效ZOOKEEPER_HOME等环境变量,修改zo
?执行如下命令:selectdegree,count(*)astotalfromfinalwhereyear(take_time)=2016groupbydegreeorderbytotal;运行结果如图4所示,经济损失特别巨大类案件145起,巨大类案件414起,较大类案件1461起。图42016年经济损失程度频次统计结果3)题目3:统计A派出所2019年案件受理情况。执行如下命令:selectstate,count(*)astotalfromfinalwhereyear(take_time)=2019andaccept_unit="A派出所"groupbystateorderbytotal;运行结果如图5所示,A派出所受理案件200起,其中立案状态40起,破案状态160起。图5A派出所2019年案件受理情况4数据可视化运用ECharts对数据分析结果进行可视化1)题目1:绘出所有案件副类别比例图。要求:(1)图形类别为饼状图;
【参考文献】:
期刊论文
[1]大数据时代电信网络诈骗犯罪的防控反思[J]. 娄永涛,唐祥. 重庆理工大学学报(社会科学). 2020(03)
[2]语音伪造与鉴伪的发展与挑战[J]. 陶建华,傅睿博,易江燕,王成龙,汪涛. 信息安全学报. 2020(02)
[3]大数据背景下的现代警务创新[J]. 王东旭. 广西警察学院学报. 2020(01)
[4]论电信诈骗犯罪的特点、成因及防控[J]. 朱艾男. 法制与社会. 2020(06)
[5]“大数据技术”实验教学环境构建研究[J]. 杨丹,姜华,张玉军,赵骥. 实验技术与管理. 2019(11)
[6]深化公安院校大数据条件下实战化教学改革的实践与思考[J]. 夏存喜. 公安教育. 2019(11)
[7]大数据背景下的现代警务人才教育培养探究[J]. 周国民,朱龙飞,刘强. 公安教育. 2019(02)
[8]基于大数据的公安警务实训共享平台构建与运用[J]. 房汉平. 实验技术与管理. 2018(11)
[9]美国预测警务中基于大数据的犯罪情报分析[J]. 吕雪梅. 情报杂志. 2015(12)
[10]论大数据驱动下的预测警务创新[J]. 李国军. 中国人民公安大学学报(社会科学版). 2015(06)
本文编号:2999730
本文链接:https://www.wllwen.com/falvlunwen/fanzuizhian/2999730.html