基于最小截平方和估计的监测数据分析方法
本文选题:最小截平方和(LTS) + 离群点 ; 参考:《数理统计与管理》2017年04期
【摘要】:水工程安全监测数据中不可避免地存在离群点,而应用最为广泛的最小二乘法(least square,LS)不具备剔除离群点的能力,反而更易吸收离群点,使回归曲线严重偏离实际。针对LS在此方面的缺陷,本文在最小化残差平方和理论的基础上,提出采用最小截平方和估计(least trimmed squares,LTS)方法来构建水工程安全监控模型。根据实际工程的监测资料并对监测资料分析处理,剔除离群点得到最优数据群。通过求解最优数据群的回归系数,进而得到最接近实际数据的拟合曲线。相比于LS估计,LTS估计所得结果更具有合理性、稳健性,且能够显著提高数据的预测精度。因此,LTS估计在水工程安全监测等数据分析中具有良好的应用前景。
[Abstract]:Outliers inevitably exist in the monitoring data of water engineering safety, but the most widely used least square method (LSs) is not capable of eliminating outliers, on the contrary, it is easier to absorb outliers, which makes the regression curve deviate seriously from reality. Aiming at the defects of LS in this respect, based on the theory of minimizing the sum of squared residuals, this paper presents a method of estimating least trimmed squared LTSs to construct a safety monitoring model for water engineering. According to the monitoring data of the actual engineering and the analysis and processing of the monitoring data, the optimal data group is obtained by eliminating the outliers. By solving the regression coefficient of the optimal data group, the fitting curve closest to the actual data is obtained. Compared with LS estimation, the results of LTS estimation are more reasonable, robust and can improve the prediction accuracy of the data significantly. Therefore, LTS estimation has a good application prospect in water engineering safety monitoring and other data analysis.
【作者单位】: 西安理工大学西北旱区生态水利工程国家重点实验室培育基地;福州大学至诚学院;河海大学水文水资源与水利工程科学国家重点实验室;国电陕西水电开发有限公司;
【基金】:国家自然科学基金项目(41301597、51409205) 博士后自然科学基金项目(2015M572656XB) 陕西省重点科技创新团队(2013KCT-015) 水文水资源与水利工程科学国家重点实验室开放研究基金(2014491011) 陕西省博士后科研项目 西安理工大学水利水电学院青年科技创新团队(2016ZZKT-14)
【分类号】:O212.1;TV698.1
【参考文献】
相关期刊论文 前10条
1 晏振;戴晓文;田茂再;;基于杠杆值大数据集抽样的异常点诊断[J];数理统计与管理;2016年05期
2 王志坚;王斌会;;稳健改进的AO型异常点检测法在金融时序中的应用[J];数理统计与管理;2016年02期
3 戴晓文;金立斌;石磊;;空间误差模型的多个异常值得分检验[J];数理统计与管理;2015年06期
4 刘荡;王岳环;白昆;;基于最小截平方背景估计红外小目标检测方法[J];华中科技大学学报(自然科学版);2015年S1期
5 王奉伟;周世健;周清;陆培鹤;;选权迭代法残差初值求解方法比较[J];测绘科学;2015年08期
6 刘丹丹;陈启军;森一之;;线性回归模型的多离群点检测方法及节能应用[J];信息与控制;2013年06期
7 龚晓雯;范磊;;非线性分位点回归方法在大坝安全监测中的应用[J];河海大学学报(自然科学版);2011年01期
8 程琳;徐波;;滑动测微计监测资料的时空分析[J];地下空间与工程学报;2010年S1期
9 王立平;高永卉;万伦来;;最小截平方和(LTS)估计技术及应用[J];哈尔滨工业大学学报;2009年04期
10 杨杰;方俊;胡德秀;闫建文;;偏最小二乘法回归在水利工程安全监测中的应用[J];农业工程学报;2007年03期
相关硕士学位论文 前1条
1 王海娜;线性回归模型的若干稳健估计方法及应用实例[D];山东大学;2013年
【共引文献】
相关期刊论文 前10条
1 王志坚;;稳健AR模型的构建及其在金融时序中的应用[J];统计与信息论坛;2017年05期
2 胡德秀;郭盼;陈诗怡;程琳;赵志明;冉蠡;;基于最小截平方和估计的监测数据分析方法[J];数理统计与管理;2017年04期
3 秦源;;水利工程项目的维护、管理方式及重要性研究[J];工程技术研究;2017年03期
4 李小奇;郑东健;曹连朋;曹其光;;信息扩散方法在大坝监测效应量预测中的应用[J];河海大学学报(自然科学版);2016年06期
5 王奉伟;周昀琦;周世健;罗亦泳;;LMD方法变形监测数据粗差探测与修复[J];辽宁工程技术大学学报(自然科学版);2016年11期
6 戴晓文;晏振;田茂再;;带固定效应面板数据空间误差模型的分位回归估计[J];应用数学学报;2016年06期
7 李敏;高兆银;朱迎迎;苏增建;陈亮;郑淑英;张正科;胡美姣;;基于电子鼻的“贵妃”芒果糖度酸度无损伤检测技术应用[J];热带作物学报;2016年08期
8 刘茂华;王岩;蔡娇楠;尚健宇;陈姣;;基于Matlab的一次范数最小法粗差探测方法研究[J];中国科技论文;2016年15期
9 刘卫华;吴江飞;栗广才;赵才新;;卫星间水平距离对双差电离层残差的影响分析[J];测绘工程;2016年07期
10 张会慧;周琳;刘昆;李可心;魏殿文;张悦;;施硫、控水和施肥对蓝莓叶片叶绿素荧光特性的影响[J];土壤;2016年03期
相关硕士学位论文 前8条
1 张天棋;基于MODIS影像的中国地区气溶胶产品验证与PM2.5反演[D];西南交通大学;2017年
2 苏萧萧;基于样本效应的回归预测方法研究[D];河北科技大学;2016年
3 姚洪忠;岩浆岩温度和氧逸度的估算[D];合肥工业大学;2016年
4 马琳;乌鲁木齐市克南高架桥变形监测及其形变分析[D];新疆大学;2015年
5 陈群;双振镜激光扫描系统的FPGA接口板设计[D];电子科技大学;2015年
6 乔明阳;非线性回归与参数估计及其在北长山岛森林生态系统碳收支估算中应用[D];中国海洋大学;2015年
7 姜佃高;观测值不等权条件下稳健估计方法的稳健特性研究[D];太原理工大学;2014年
8 赵帅;基于稳健估计的激光光束廓形高斯近似算法研究[D];长春理工大学;2014年
【二级参考文献】
相关期刊论文 前10条
1 金立斌;戴晓文;石磊;;混合空间自回归模型的异常值检验[J];统计与决策;2015年01期
2 朱建平;章贵军;刘晓葳;;大数据时代下数据分析理念的辨析[J];统计研究;2014年02期
3 金立斌;戴晓文;石磊;;广义空间模型的异常值检验[J];系统科学与数学;2014年01期
4 李金昌;;大数据与统计新思维[J];统计研究;2014年01期
5 耿直;;大数据时代统计学面临的机遇与挑战[J];统计研究;2014年01期
6 邱东;;大数据时代对统计学的挑战[J];统计研究;2014年01期
7 孙慧慧;林金官;;基于M估计的纵向数据线性混合模型中方差的齐性检验[J];数理统计与管理;2013年04期
8 刘明;;最小一乘法与最小二乘法:基于例证的比较[J];统计与决策;2012年20期
9 李勇;孙瑞博;王贵银;;厚尾金融时间序列的贝叶斯单位根检验[J];数理统计与管理;2012年01期
10 李丹玲;陈平雁;周凤麒;;基于线性ν-支持向量回归机的异常数据检测[J];数理统计与管理;2011年01期
相关硕士学位论文 前2条
1 郝永红;广义线性模型的稳健估计及其医学应用[D];山西医科大学;2009年
2 丁硕;稳健统计方法在股票投资组合中的应用研究[D];北京工业大学;2009年
【相似文献】
相关期刊论文 前3条
1 张树森;伏利;董刚;;离群点删除算法的研究[J];装备制造技术;2008年07期
2 陈忠琏;稳健统计(Ⅳ)[J];数理统计与管理;1992年04期
3 魏凤荣;回归分析中离群点的作用与搜寻[J];中央民族大学学报(自然科学版);2000年02期
,本文编号:1935870
本文链接:https://www.wllwen.com/kejilunwen/yysx/1935870.html