大数据视阙下大宗中药材种植可视化研究

发布时间：2024-02-22 01:17

　　我国是世界中药材资源大国,也是中药材贸易大国。中药材的开发和有效利用在我国已有几千年的历史,是作为人民防病治病的主要武器,对保障人民健康和民族繁衍起着不可忽视的作用,中药材产业成为国民经济重要支柱之一。中药材种植不仅影响其质量,同时也影响整个产业的正常发展。种植作为中药材产业的最前端,需要收集更多的相关信息,纵然随着网络技术的发展和广泛应用,网上存在着大量的中药材产业的信息,但这些信息存在源头多、数据杂、采集难的问题,缺乏合理的梳理归类;即便是统计数据,各系统之间也相互独立,形成―数据孤岛‖,不能实现数据共享。基于上述问题,本文利用Scrapy爬虫技术,对我国常用大宗中药材种植相关的数据,如:种植年份、地域、面积、产量、交易价格等方面的多源异构的数据进行收集整理,通过数据的交互,采用Django Web网络开发框架,设计并实现了基于B/S构架的大宗中药材种植可视化系统,并利用该系统进行了大量规律分析,实现了快速寻找这些大数据背后的规律,为中药材种植产业服务。主要研究结果包括:(1)系统功能需求分析。对系统进行了功能需求分析,确定了系统的5大功能需求:数据采集需求、数据处理需求、数据存储...

【文章页数】：69 页

【学位级别】：硕士

【部分图文】：

图1-1农业统计数据可视化系统

懈慕??佣?嵘?嘣?畔⒖墒踊?闹惫郾泶锬芰Γ?⒐菇??多因子风险评估的信息可视化数据挖掘流程，使信息可视化数据挖掘技术成为石油勘探开发多学科与信息科学技术相结合的新途径。王怡（2015）构建了农业文本信息检索可视化平台，该系统通过数据抽娶清洗、整理和中文分词等技术对农业Web文献....

图1-2基于电力大数据的居民用电量预测和可视化交互平台（图片来源：向翰丞.基于电力大数据的居民电量预测和可视化平台设计

西南大学硕士学位论文v6如图1-2所示。该可视化交互平台利用了Tableau数据分析展示软件，通过研究某地区电力行业海量数据，实现了居民用电量的监测和预测管理，但该平台对数据的可视化内容较少，且可视化图表展现内容较少。图1-2基于电力大数据的居民用电量预测和可视化交互平台（图片来....

图4-1爬虫框架目录结构

第4章数据采集系统设计17第4章数据采集系统设计4.1使用Scrapy创建项目为了获取中药材数据，需要搭建Scrapy爬虫框架，通过其快速便利的功能采集所需要的网络数据。要使用Scrapy框架创建项目，需要通过命令来创建。在安装完成Scrapy的工具包后，执行如下指令：scrap....

图4-2用户代理Fig.4-2User-Agent

西南大学硕士学位论文18因为robots.txt是遵循Robot协议的一个文件，它保存在网站的服务器中，它的作用是告诉搜索引擎爬虫，本网站哪些目录下的网页不允许进行爬取收录。在Scrapy启动后，爬虫会在第一时间访问网站的robots.txt文件，然后决定该网站的爬取范围。这样就....

本文编号：3906176