基于Freenet的暗网空间资源探测技术研究

发布时间：2024-03-01 05:23

　　随着各国对明网加强了监督和管制,高匿名性和匿踪性的暗网受到大量的非法地下市场以及黑色论坛甚至恐怖主义分子的青睐。因此,研究暗网空间资源并对其进行实时监控,对于国家和社会的安全具有重要意义。本文的主要工作内容如下:1、首先介绍了暗网与明网的区别,并指出研究暗网及其内部资源具有重要意义,然后分别介绍了国内外对于暗网的已有研究;2、设计并实现了基于Scrapy和MongoDB的Freenet暗网资源收集和存储系统,本系统同时对明网与暗网中的Freenet资源进行侦测,拓展了数据来源,在存储暗网域名时同时记录该域名的来源,方便用户进行溯源分析;3、通过朴素贝叶斯对暗网中的重点“黑灰”页面进行识别并实现了对这些页面的自动登录功能,为进一步关注和收集暗网中重点资源提供基础支持;4、对收集到的页面内容经过NLP技术处理后,使用TF-IDF生成字词云提取页面的主旨信息并快速直接地反馈给用户,有助于进一步监控和分析Freenet中的相关内容。本系统在经过一段时间的运行后,共收集了5万条Freenet域名和210万的域名链接,已大于现有的Freenet索引网站。在未来的工作中,会对Freenet的协议进行...

【文章页数】：67 页

【学位级别】：硕士

【部分图文】：

图1-1因特网、明网、深网、暗网的关系

图1-1因特网、明网、深网、暗网的关系Fig.1-1theRelationshipofInternet,Clearnet,DeepnetandDarknet网中人们可进行的活动与明网类似，比如即时通信、电子商务、、电子邮件等。但是由于暗网拥有匿名强、难以溯源等....

图1-3百度“暗网”关键词搜索趋势图

图1-2DreamMarket的截图Fig.1-2ScreenshotofDreamMarket随着暗网的神秘面纱逐渐被揭开，公众也对暗网产生了浓厚的兴趣。由图1-3以看出，自2014年以来我国网民对暗网的关注度有了明显的上升。

图2-1Freenet节点分布示意图

图2-1Freenet节点分布示意图Fig.2-1Freenetnodedistributionmapenet中的资源空间类似于一个大型的分布式数据存储设备。其中用自己计算机中的部分硬盘来存储已被加密的文件片段，这些各节点的客户端安装路径的datastore文....

图2-2CHK产生过程

图2-2CHK产生过程Fig.2-2ProductionprocessofCHKCHK由3部分组成：1、文件的散列值；2、用于解锁文件的解密密钥；3、文件的加密方式。

本文编号：3915485