当前位置:主页 > 科技论文 > 软件论文 >

基于弹性网逻辑回归算法的内容点击率预估系统的设计与实现

发布时间:2021-11-02 04:04
  随着信息化时代的到来,信息量呈指数式增长,用户面对如此庞大的信息时如何筛选出有效信息是急需解决的问题。推荐系统由此而生,从庞大的内容信息中筛选出对用户来说有用的信息。本文研究的内容点击率预估系统正是推荐系统的核心。内容点击率预估系统对候选内容的点击率进行预估,并进行点击率排序,将排序靠前的内容展现给用户,完成对用户的内容推荐。内容点击率预估系统包括离线模块和线上模块两个部分:离线模块主要包括特征提取、特征组合、模型训练、模型更新等功能;线上模块主要包括特征计算、模型调用、点击率计算等功能。本文主要研究内容点击率预估系统的设计与实现。首先对系统的需求进行分析,对系统实现需要用到的相关技术进行研究和分析,确定使用的算法。然后对系统进行总体设计、详细设计和实现,最后进行测试及结果分析。本文在特征提取环节采用了卡方检验的方法对特征进行选择。在模型训练中采用了逻辑回归算法进行求解。为了防止过拟合,采用了弹性网正则化对代价函数进行惩罚。当训练好的模型需要更新到线上时,使用读-复制更新机制进行模型文件的更新。使用AUC指标进行离线模型的评价,使用实际点击率作为线上服务的评价。最终通过测试得出本文研究... 

【文章来源】:北京交通大学北京市 211工程院校 教育部直属院校

【文章页数】:67 页

【学位级别】:硕士

【部分图文】:

基于弹性网逻辑回归算法的内容点击率预估系统的设计与实现


图1-1逻辑回归拟合曲线实例??Figure?1-1?an?example?of?a?logical?regression?fitting?curve??

函数图,函数,逻辑函数


s?=?wTx+a??(2-2)??Sigmoid函数,如图2-1所示。??.?;?,??/??/??o.s/??7??/??/??i?….I?I?q??i?i?i??0?2?4?6??图2-1?Sigmoid函数图??Figure?2-1?Sigmoid?function?diagram??Sigmoid函数能够把点击分iU映射到[0,1]区间内,我们把此函数设为阶)。??则逻辑函数形式为??,、?eS?1??eCs)?=?IT^?=?TT^?(2-3)??11??

架构图,分布式文件系统,架构,客户端


需要执行数据块到DataNode映射的决策。DataNode负责响应来自客户端的文件读??写需求,同时负责执行来自NameNode的关于数据块创建、删除和冗余存储的指??令。如图2-2即为分布式文件系统的架构。??NameNode?、??客户端?\^信息??^?n?广?\?、??DataNode?DataNode?备份?f?^?C?二?????f?L??—」?事?DataNode?DataNode??——_?— ̄1 ̄ ̄ ̄u?J??——v?mm??J??V?[?IILMl?]?/??<,mm?????客户端??■?-?J??、?图2-2分布式文件系统架构??Figure?2-2?HDFS?architecture??Hadoc?n的另一个核心MapReduce是一种用于大型商用硬件集群f?P时海量数据??14??

【参考文献】:
期刊论文
[1]基于套索(Lasso)的中文垃圾邮件过滤[J]. 徐征,刘遵雄,张贤龙.  华东交通大学学报. 2014(04)
[2]基于弹性网回归的居民消费价格指数分析[J]. 张哲,梁冯珍.  哈尔滨商业大学学报(自然科学版). 2013(05)
[3]广告点击率估算技术综述[J]. 纪文迪,王晓玲,周傲英.  华东师范大学学报(自然科学版). 2013(03)
[4]上市公司财务预警的正则化逻辑回归模型[J]. 张恒,秦宾,许金凤.  华东交通大学学报. 2011(06)

硕士论文
[1]基于逻辑回归的金融数据分类系统的设计与实现[D]. 刘展.山东大学 2017
[2]基于逻辑回归的在线广告CTR优化和预测[D]. 代成雷.浙江大学 2016
[3]基于Logistic回归模型的P2P网贷平台借款人信用风险评估[D]. 王梦佳.北京外国语大学 2015
[4]展示广告中点击率预估问题研究[D]. 严岭.上海交通大学 2015
[5]在线广告中高层特征表示及点击率预测方法研究[D]. 邵迪.哈尔滨工业大学 2014
[6]基于特征学习的广告点击率预估技术研究[D]. 周永.哈尔滨工程大学 2014
[7]一种基于逻辑回归模型的搜索广告点击率预估方法的研究[D]. 王兵.浙江大学 2013



本文编号:3471302

资料下载
论文发表

本文链接:https://www.wllwen.com/kejilunwen/ruanjiangongchenglunwen/3471302.html


Copyright(c)文论论文网All Rights Reserved | 网站地图 |

版权申明:资料由用户6a758***提供,本站仅收录摘要或目录,作者需要删除请E-mail邮箱bigeng88@qq.com