基于大数据的小微企业统计信息采集策略

发布时间：2018-09-13 15:24

【摘要】：小微企业由于信息严重不对称导致融资难、融资贵、贷款难等问题,基于大数据来源之一的互联网社交媒体的小微企业信息采集是获取小微企业信息数据的重要途径。文章面对爆发式增长的互联网信息资源,利用主题聚焦网络爬虫技术、数据库技术、Java技术等设计并实现由基于链接结构分析的链接地址URL筛选及采集、基于模板节点匹配的网页正文信息抽取、数据入库三个功能模块组成的小微企业统计信息自动采集系统,采集到的数据以结构化数据的形式存储到My SQL数据库中,为后续数据挖掘与分析提供良好的数据支持。结果表明,文章所提出的信息自动采集系统采集效率较高,能够适应小微企业统计信息采集的需求。
[Abstract]:Because of the serious asymmetry of information, small and micro enterprises are difficult to finance, expensive to finance, difficult to borrow, etc. It is an important way to obtain information data of small and micro enterprises based on Internet social media, one of the sources of big data. In the face of the explosive growth of Internet information resources, this paper designs and collects the link address URL based on link structure analysis by using topic focused web crawler technology, database technology and Java technology. Based on template node matching, the automatic collection system of small and micro enterprise statistical information is composed of three function modules: template node matching and data input. The collected data is stored in My SQL database in the form of structured data. It provides good data support for data mining and analysis. The results show that the automatic information acquisition system proposed in this paper has a high efficiency and can meet the needs of statistical information collection in small and micro enterprises.
【作者单位】： 山东大学管理学院;
【基金】：国家社会科学基金重大项目(15ZDB157);国家社会科学基金重点项目(12AZD098) 国家统计局全国统计科学研究重点项目(2013LZ23)
【分类号】：F276.3

【相似文献】

相关期刊论文 前10条

1 ;中国农业科学院信息所开发出便携式农产品信息采集器[J];种业导刊;2013年05期

2 张雨竹;;(二)商业信息从何而来[J];信息与电脑;1995年08期

3 王健;会计信息的系统采集和利用[J];交通财会;2001年10期

4 许亮;;信息采集与传输在水文遥测系统中应用[J];水利科技与经济;2011年02期

5 徐颖;李倩;;基于互联网社区的消费者需求信息采集策略[J];图书情报工作;2011年24期

6 林慧;;信息采集及通信系统在堤防及泵站中的应用[J];沿海企业与科技;2012年03期

7 田素端;;专利检索系统中专利信息采集模块的研究[J];科技致富向导;2012年11期

8 黄宏儿;全面提升税务信息采集和利用水平[J];税务研究;2003年09期

9 杨月凤;市场信息采集与相关技术分析[J];科技情报开发与经济;2005年16期

10 侯晓荟;;非银行信息采集面临的困难及工作思路[J];武汉金融;2006年09期

相关会议论文 前10条

1 李静;张建;李淼;胡泽林;杨巍;张浩东;;便携式农田信息采集与管理系统的设计[A];纪念中国农业工程学会成立30周年暨中国农业工程学会2009年学术年会（CSAE 2009）论文集[C];2009年

2 谭亮;王荣成;;基于船舶网络的信息采集性能分析与系统优化[A];2008年MIS/S&A学术交流会议论文集[C];2008年

3 周洪清;;客户动销信息采集工作的思考[A];湖北省烟草学会2007年学术年会论文集[C];2007年

4 刘丽丽;;一种用于加油站信息采集的中控机设计[A];2007年河北省电子学会、河北省计算机学会、河北省自动化学会、河北省人工智能学会、河北省计算机辅助设计研究会、河北省软件行业协会联合学术年会论文集[C];2007年

5 蔡义华;刘刚;;便携式农田信息采集与无线传输系统研究[A];纪念中国农业工程学会成立30周年暨中国农业工程学会2009年学术年会（CSAE 2009）论文集[C];2009年

6 王坤;郭起云;郭光;;大数据时代档案信息采集新思路[A];2013年海峡两岸档案暨缩微学术交流会论文集[C];2013年

7 罗海勇;李锦涛;赵方;朱珍民;林权;;温室无线测控网络信息采集分系统设计研究[A];2007年全国开放式分布与并行计算机学术会议论文集(下册)[C];2007年

8 陈渝光;施海;游四海;廖仕利;;基于车载网络的多模态信息采集[A];四川省电工技术学会第九届学术年会论文集[C];2008年

9 高锦超;柯赓;;基于网络的地理信息采集和管理系统[A];'2005数字江苏论坛电子政务与地理信息技术论文专辑[C];2005年

10 陈凌;张阳阳;陈宏;刘红漫;;《电光与控制》发行工作中的问题及解决办法[A];第7届中国科技期刊青年编辑学术研讨会暨中国科技期刊的经营与发展论坛文集[C];2007年

相关重要报纸文章 前10条

1 李琳 卢庆红;缙云聘请百名“蜜蜂”式信息采集员[N];丽水日报;2007年

2 沈雪;福泉把派出所基础信息采集纳入“政府工程”[N];人民公安报;2007年

3 刘明军　夏俊涛;河南潢川：种好基础信息采集“试验田”[N];人民公安报;2009年

4 王宇航邋陈建琦;云南蒙自：标准化信息采集室实现“无缝隙”覆盖[N];人民公安报;2008年

5 记者 陈磊;陕西年内将建成500个标准化刑侦信息采集室[N];人民公安报;2010年

6 记者 阮仕喜;陕西上半年将建成500个刑侦信息采集室[N];人民公安报;2011年

7 何英彩;册亨公安提前二月完成基础信息采集录入任务[N];黔西南日报;2008年

8 吴苏 杨一弘;推进信息采集 筑牢基础环节[N];黑龙江经济报;2010年

9 李晓楠、杨勇;8650部队信息采集员制度拓宽民主渠道[N];人民武警报;2011年

10 本报首席记者 彭文辉 本报记者 方晓;信息采集：“三网”建设取得实效的生命线[N];宜春日报;2013年

相关博士学位论文 前2条

1 许笑;分布式Web信息采集关键技术研究[D];哈尔滨工业大学;2011年

2 贾自艳;Web信息智能获取若干关键问题研究[D];中国科学院研究生院（计算技术研究所）;2004年

相关硕士学位论文 前10条

1 孟庆奎;复杂环境下无人机路径规划及信息采集方法的研究[D];哈尔滨工业大学;2015年

2 张启东;Unisphere Remote—CX子系统的设计与实现[D];南京大学;2014年

3 黄志斌;中山市公安局社会情报信息采集系统设计与实现[D];电子科技大学;2014年

4 宋红波;软件项目质量信息采集及上报系统设计及实现[D];北京工业大学;2015年

5 周志翔;罗师庄警务室信息采集发布平台的设计与实现[D];电子科技大学;2014年

6 朱文琦;基于ASP的入所人员信息采集管理系统的设计与实现[D];电子科技大学;2014年

7 周永军;成都市公安局视频信息采集共享系统设计与实现[D];电子科技大学;2014年

8 聂子珩;云南省宗教基础数据库系统的研究与分析[D];云南大学;2015年

9 樊明;林区巡护管理系统的研究与分析[D];云南大学;2015年

10 胡蓓蕾;基于WSN车辆信息采集方法及相关技术的研究[D];合肥工业大学;2014年

，

本文编号：2241568