基于GIS主题爬虫的在线房产估价系统与优化

发布时间：2017-11-09 14:15

  本文关键词：基于GIS主题爬虫的在线房产估价系统与优化

  更多相关文章： 地理信息系统 主题爬虫 信息获取 房产估价

【摘要】：房地产估价的常用方法是将估价对象与邻近估价时点和邻域空间的类似房地产进行比较,从而估算其客观合理的价格,这需要用到大量的可比房产价格数据。GIS主题爬虫的应用可以有效解决目前房产估价所面临的数据缺乏、效率低下等问题。该文综合运用主题爬虫、网页解析技术、数据库技术、Web技术和GIS技术进行房产数据的提取、存储、空间分析,并利用所提取的实时房产交易案例进行房产价格估算;设计并实现了一个具备房产地理位置查询、房屋基本属性查询、房屋价格估算、房产批量评估等功能的房产信息实时更新与处理系统。最后对该系统做了前端、后台及数据库的优化,在某公司的估价业务工作中得到了实际应用,并取得了良好的用户体验效果。
【作者单位】： 同济大学测绘与地理信息学院;上海海洋大学信息学院;
【分类号】：P208
【正文快照】： 0 引 言随着互联网行业的快速发展,Web信息高速增成长台,周小丽[4]实现了一种基于通用网络爬虫和Lucene为一个巨大的数据仓库。如何有效地对其进行挖掘,索引数据库的舆情监控系统。Hao Hu[11]等人利用基于并应用于各个领域,成为目前各个领域研究的焦点问Heritrix架构的爬虫收

【参考文献】

中国期刊全文数据库 前3条

1 甘国华;刘梦赤;胡婕;;面向大学领域的聚焦爬虫设计与实现[J];山西大学学报(自然科学版);2015年02期

2 欧健文,董守斌,蔡斌;模板化网页主题信息的提取方法[J];清华大学学报(自然科学版);2005年S1期

3 张志刚;陈静;李晓明;;一种HTML网页净化方法[J];情报学报;2004年04期

中国硕士学位论文全文数据库 前3条

1 李勇;房地产信息垂直搜索引擎技术研究[D];杭州电子科技大学;2014年

2 周小丽;基于网络爬虫和Lucene索引的互联网舆情监测系统设计与实现[D];吉林大学;2013年

3 芮虎;比价购物平台中网络爬虫的设计与实现[D];华东理工大学;2013年

【共引文献】

中国期刊全文数据库 前10条

1 苏秀芝;;基于网页Title标签的正文提取方法[J];福建电脑;2016年04期

2 董浩然;谢欢;陈鹏;洪中华;童小华;;基于GIS主题爬虫的在线房产估价系统与优化[J];地理信息世界;2016年02期

3 曾蒸;马燕;;基于模式匹配的网页净化方法[J];重庆师范大学学报(自然科学版);2015年06期

4 沈娜;;基于WEB新闻内容的信息抽取方法研究[J];江西科技学院学报;2015年03期

5 王淑芬;高军礼;邹普;宋海涛;;基于Hadoop的广域网分布式主题爬虫系统框架[J];计算机工程与科学;2015年04期

6 陈艳秋;李海波;;一种基于本体的关联规则挖掘方法[J];黑龙江大学自然科学学报;2014年06期

7 彭岩;焦潞林;;社会事件建模研究综述[J];济南大学学报(自然科学版);2015年05期

8 张昕;鄂海红;宋美娜;杨俊;;基于视觉特征的就业信息页面抽取方法[J];软件;2014年09期

9 张静;;基于情境感知和数据挖掘的泛在信息推送服务研究[J];现代情报;2014年09期

10 罗超然;王纯;廖建新;;新闻网页内容抽取模块的设计与实现[J];电信技术;2014年05期

中国硕士学位论文全文数据库 前6条

1 姚军;石家庄职业技术学院专业资源平台的设计与实现[D];河北科技大学;2015年

2 卢群乐;基于Nutch的医学领域垂直搜索引擎系统的研究与实现[D];东华理工大学;2015年

3 傅饶;基于中文分词的舆情监控系统分析模块的设计与实现[D];南京大学;2015年

4 赵振华;基于Hadoop的非结构化数据管理在离散制造业中的研究与实现[D];河北工业大学;2015年

5 孙骏雄;基于网络爬虫的网站信息采集技术研究[D];大连海事大学;2014年

6 肖雅夫;基于语义模型的高校舆情监测技术的研究[D];湖北工业大学;2014年

【二级参考文献】

中国期刊全文数据库 前7条

1 曹鹏;李博;栗伟;赵大哲;;结合X-means聚类的自适应随机子空间组合分类算法[J];计算机应用;2013年02期

2 彭涛;孟宇;左万利;王英;胡亮;;主题爬行中的隧道穿越技术[J];计算机研究与发展;2010年04期

3 朱婷;滕桂法;陆浩;张长利;曾大军;;基于在线增量学习的自适应聚焦爬虫研究[J];计算机应用与软件;2009年05期

4 荆涛,左万利;基于可视布局信息的网页噪音去除算法[J];华南理工大学学报(自然科学版);2004年S1期

5 常育红,姜哲,朱小燕;基于标记树表示方法的页面结构分析[J];计算机工程与应用;2004年16期

6 李效东,顾毓清;基于DOM的Web信息提取[J];计算机学报;2002年05期

7 张志刚;陈静;李晓明;;一种HTML网页净化方法[J];情报学报;2004年04期

中国硕士学位论文全文数据库 前10条

1 陶秋红;中文垂直搜索技术的研究与实现[D];河北科技大学;2012年

2 任丽芸;搜索引擎中文分词技术研究[D];重庆理工大学;2011年

3 张楠;面向汽车主题的垂直搜索引擎研究与实现[D];西南交通大学;2010年

4 岳中原;词典与统计相结合的中文分词的研究[D];武汉理工大学;2010年

5 王宝龙;面向新闻领域的文本数据获取系统的设计与实现[D];北京邮电大学;2010年

6 张书江;基于Java的垂直搜索引擎的设计与实现[D];安徽理工大学;2009年

7 周翊超;军事文献搜索引擎架构的研究与实现[D];南京理工大学;2008年

8 邓锦辉;受限域中文问答系统中答案抽取的研究[D];昆明理工大学;2008年

9 海涛;垂直搜索引擎数据采集技术的研究与实现[D];华北电力大学（北京）;2008年

10 蒋科;基于领域概念定制的主题爬虫系统的设计与实现[D];西安电子科技大学;2007年

【相似文献】

中国期刊全文数据库 前10条

1 郑贵洲;地理信息系统多媒体CAI制作[J];测绘通报;2000年09期

2 彭鹏,谢光辉,李满春;21世纪高师地理信息系统教学刍议[J];湖南师范大学自然科学学报;2000年04期

3 黄海;地理信息系统在通讯中的效益分析[J];海洋技术;2000年03期

4 ;大力推广应用 促进技术创新 加快国产地理信息系统产业化步伐[J];中国图象图形学报;2000年05期

5 张远;台湾“地理信息系统”发展与应用[J];城市勘测;2000年01期

6 贾文涛,刘素凤,杨永侠;地理信息系统及其应用综述[J];计算机与农业;2000年10期

7 朱海燕;《地理信息系统——原理、方法和应用》评介[J];地理学报;2001年04期

8 朱庆华;日本地理信息系统的建设政策及其启示[J];情报杂志;2001年07期

9 陈述彭;呼唤地理信息系统的新一代(导读)[J];中国图象图形学报;2001年09期

10 朱晓华,闾国年;地理信息系统技术在我国的应用与存在的问题[J];科技导报;2001年05期

中国重要会议论文全文数据库 前10条

1 史俊明;;地理信息系统研究的进展[A];2009`中国地理信息产业论坛暨第二届教育论坛就业洽谈会论文集[C];2009年

2 张新长;张青年;马林兵;;中山大学地理信息系统学科的崛起[A];2009`中国地理信息产业论坛暨第二届教育论坛就业洽谈会论文集[C];2009年

3 彭秀英;万剑华;范士杰;;地理信息系统专业人才培养模式研究与探索[A];2009`中国地理信息产业论坛暨第二届教育论坛就业洽谈会论文集[C];2009年

4 薛刚;;地理信息系统的基本技术与发展动态[A];加入WTO和中国科技与可持续发展——挑战与机遇、责任和对策（上册）[C];2002年

5 王平;刘慧平;潘耀忠;;中国地理信息系统教育现状分析与政策建议[A];首届地理信息系统专业教育研讨会论文集[C];2003年

6 马大喜;刘昭华;陈龙泉;施贵刚;;优化地理信息系统专业教学计划设计[A];首届地理信息系统专业教育研讨会论文集[C];2003年

7 刘耀林;杜清运;;地理信息系统专业发展与教学计划的优化设计的思考[A];首届地理信息系统专业教育研讨会论文集[C];2003年

8 汤国安;;高等院校核心专业课英语教学方法初探——以地理信息系统课程的实践为例[A];首届地理信息系统专业教育研讨会论文集[C];2003年

9 张锦水;安凯;陈炎平;丁晓强;;基本单位地理信息系统建设研究[A];中国地理信息系统协会第三次代表大会暨第七届年会论文集[C];2003年

10 王红岩;;地理信息系统及其发展趋势[A];第十四届全国遥感技术学术交流会论文摘要集[C];2003年

中国重要报纸全文数据库 前10条

1 通讯员 卞小士;高港建成林业地理信息系统[N];泰州日报;2009年

2 本报记者 孙靓;全国统计地理信息系统建设应用推广演示会召开[N];中国信息报;2010年

3 记者 郑千里;我地理信息系统软件业初步形成[N];科技日报;2000年

4 李俊鹏;山西全面启动统计地理信息系统建设[N];中国信息报;2011年

5 记者 李欣瑶;水资源地理信息系统国际会议在兰召开[N];甘肃日报;2012年

6 记者 张海虎 通讯员 陈莹;我省有了首个“减灾地理信息系统”[N];青海日报;2014年

7 本报记者 李薇;驰骋在地理信息系统天地[N];中国测绘报;2001年

8 卢毅敏 汪小钦 肖桂荣;面向电子政务的地理信息系统有何特征[N];中国测绘报;2006年

9 王大力;地理信息系统建设中的几个问题[N];中国测绘报;2006年

10 程钟康;福建省港航地理信息系统投用[N];中国水运报;2007年

中国博士学位论文全文数据库 前10条

1 杨长保;智能地理信息系统研究及其在农业宏观决策支持系统中的应用[D];吉林大学;2004年

2 夏志华;上海市城市地理信息系统综合应用研究[D];华东师范大学;2004年

3 崔巍;用本体实现地理信息系统语义集成和互操作[D];武汉大学;2004年

4 王宇翔;分布式网络地理信息系统研究[D];中国科学院研究生院（遥感应用研究所）;2002年

5 周勇;遥感和地理信息系统支持的土水资源分类、评价与预测研究[D];华中农业大学;1997年

6 钱贞国;面向互操作的分布式网络地理信息系统研究[D];中国科学院研究生院（遥感应用研究所）;2004年

7 李如仁;公众参与式地理信息系统的理论与实践[D];辽宁工程技术大学;2007年

8 徐璐;公众参与地理信息系统的理论研究及其在房地产中的应用[D];武汉大学;2010年

9 余晓红;建设管理地理信息系统数据的质量控制[D];中国科学院研究生院（测量与地球物理研究所）;2002年

10 陈强;城市地理信息系统软件与工程设计[D];华东师范大学;2004年

中国硕士学位论文全文数据库 前10条

1 李娜;地理信息系统技术在唐宋诗歌研读中的运用[D];华南理工大学;2015年

2 杨清茹;山东省学校建设规划地理信息系统的设计与实现[D];山东大学;2015年

3 王谦;火警消防管理系统的设计与实现[D];北京工业大学;2015年

4 冯维斌;基于GIS的矿井信息系统的设计与实现[D];电子科技大学;2014年

5 孙高平;基于移动GIS的高速公路巡查系统设计与实现[D];电子科技大学;2014年

6 张海;WebGIS在地理信息消防系统中的应用[D];河北工业大学;2015年

7 热伊拉·吾斯曼;应用地理信息系统技术分析新疆糖尿病的空间分布[D];新疆医科大学;2015年

8 李文瑞;基于WebGIS的采油厂生产运行信息管理系统设计与开发[D];电子科技大学;2014年

9 管清文;基于Web长输管道通信运行维护系统设计与实现[D];辽宁大学;2015年

10 崔成成;电力监管应急平台地理信息系统的设计与实现[D];电子科技大学;2014年

，

本文编号：1162216