基于新闻媒体文本挖掘和百度指数的投资者情绪指数研究
发布时间：2021-06-10 16:22
现今,互联网迅速发展,已不仅仅只是投资者获取信息的来源,而逐渐发展成为一个交流式的信息共享,沟通平台,成为普通公众获取丰富数据必不可少的载体。同时,互联网有效缩小了不同投资者之间对信息获取成本及分析处理技术等各方面的差距。另一方面,由于中国金融市场发展不成熟,部分更看重商业价值的新闻媒体往往对现实状况做出选择性地取舍或夸大报道,亦或者无意表达出笔者的主观看法。包含着对未来市场或乐观或悲观态度的新闻信息往往会影响投资者对待未来金融市场的策略,以致投资者根据这类新闻进一步调节其投资决策与投资行为。现有研究中缺少通过将媒体信息、投资者情绪关联从而研究对金融市场的影响效果。投资者情绪为我们看待股票市场的变动提供了一个新的视野,本研究以上证50指数成分股作为筛选样本,在社会媒体大数据的基础上以新浪财经作为金融媒体信息源,依次进行相关媒体新闻报道爬取、自建词典、文本分词、特征提取和情感分析等网络文本挖掘技术,结合百度指数,构建上证50指数成分股在2016年1月1日至2016年12月31日期间的投资者情绪指数,并将该指数与上证50指数的变动关系展开实证研究。研究以与金融新闻媒体报道影响投资者情绪作为...
【文章来源】：哈尔滨工业大学黑龙江省 211工程院校 985工程院校
【文章页数】：76 页
【学位级别】：硕士
【部分图文】：
论文框架
（c）网页新闻文本抓取图 3-1 网页的抓取及存储金融媒体信息预处理 网页解析及噪声消除过网络采集的新闻文本数据中存在大量的无用符号以及许多网址链的信息称为新闻文本的噪声，存在噪声的新闻文本由于其符号的混进行断句与分词处理的，为了进行接下来的分词与情感分析，需要信息进行信息去噪处理，去除空格，空白符，乱码等无用符号，转文本以便供软件进行下一步分析。本文应用MATLAB对抓取的新闻去噪处理，使用 regexp 正则表达式函数进行处理，得到去除无用信本，经去噪处理的新闻文本结果如图 3-2 所示，可见，新闻文本中已去除，得到可以进行直接断句分词的纯文本。
哈尔滨工业大学经济学硕士学位论文具体程序运行情况如图 3-3 所示。图 3-3（a）中，新闻采集程序通过读入新闻所在的网址链接，利用正则表达式匹配，得到新闻的文本，再经过去噪处理，去除网页源码中的无效符号，得到该网页新闻的纯文本。图 3-3（b）中，将新闻文本经标点符号断句，得到新闻的断句，以 cell 字符串形式保存下来。图 3-3（c）进行了句子级的情感值计算，如图所示，首先将句子进行词性标注，图中 P_K 代表积极属性词，PW 代表积极情感词，然后根据句子级情感值计算公式进行极性累加，得到该句的情感值（sentiment）为 3。（a） 新闻采集程序运行结果
【参考文献】：
期刊论文
[1]金融危机背景下中美投资者情绪的传染性分析[J]. 文凤华,杨鑫,龚旭,黄创霞,杨晓光. 系统工程理论与实践. 2015(03)
[2]基于网络搜索数据的房地产价格预测[J]. 董倩,孙娜娜,李伟. 统计研究. 2014(10)
[3]众里寻“股”千百度——股票收益率与百度搜索量关系的实证探究[J]. 赵龙凯,陆子昱,王致远. 金融研究. 2013(04)
[4]IPO发行价溢价异象与投资者情绪研究[J]. 吕东锴,蒋先玲. 经济与管理. 2013(01)
[5]基于投资者关注的媒体报道影响投资行为的实验研究[J]. 张雅慧,万迪昉,付雷鸣. 系统工程. 2012(10)
[6]投资者有限关注与股票收益——以百度指数作为关注度的一项实证研究[J]. 俞庆进,张兵. 金融研究. 2012(08)
[7]有限注意、投资者行为与资产定价——一个研究评述[J]. 彭叠峰,饶育蕾,王建新. 中南大学学报(社会科学版). 2012(03)
[8]创业板投资者情绪及其收益率相关性研究[J]. 吴海燕,杨朝军,龚霄. 上海管理科学. 2012(03)
[9]投资者情绪与股票特征关系[J]. 宋泽芳,李元. 系统工程理论与实践. 2012(01)
[10]投资者关注与IPO异象——来自网络搜索量的经验证据[J]. 宋双杰,曹晖,杨坤. 经济研究. 2011(S1)
博士论文
[1]投资者情绪的统计测评及其应用研究[D]. 崔亮.西南财经大学 2013
[2]基于投资者情绪的行为资产定价研究[D]. 闫伟.华南理工大学 2012
硕士论文
[1]基于百度指数的投资者关注度对于股票市场表现的影响[D]. 缪杰.厦门大学 2014
[2]基于百度指数的投资者关注度与股票指数表现的相关性研究[D]. 王曙.南京大学 2013
[3]投资者情绪对中国股市收益与收益波动影响实证研究[D]. 仇冬.华中科技大学 2012
[4]基于互联网搜索的有限注意与我国股票市场的关系研究[D]. 谢世宏.南京大学 2012
本文编号：3222715
【文章来源】：哈尔滨工业大学黑龙江省 211工程院校 985工程院校
【文章页数】：76 页
【学位级别】：硕士
【部分图文】：
论文框架
（c）网页新闻文本抓取图 3-1 网页的抓取及存储金融媒体信息预处理 网页解析及噪声消除过网络采集的新闻文本数据中存在大量的无用符号以及许多网址链的信息称为新闻文本的噪声，存在噪声的新闻文本由于其符号的混进行断句与分词处理的，为了进行接下来的分词与情感分析，需要信息进行信息去噪处理，去除空格，空白符，乱码等无用符号，转文本以便供软件进行下一步分析。本文应用MATLAB对抓取的新闻去噪处理，使用 regexp 正则表达式函数进行处理，得到去除无用信本，经去噪处理的新闻文本结果如图 3-2 所示，可见，新闻文本中已去除，得到可以进行直接断句分词的纯文本。
哈尔滨工业大学经济学硕士学位论文具体程序运行情况如图 3-3 所示。图 3-3（a）中，新闻采集程序通过读入新闻所在的网址链接，利用正则表达式匹配，得到新闻的文本，再经过去噪处理，去除网页源码中的无效符号，得到该网页新闻的纯文本。图 3-3（b）中，将新闻文本经标点符号断句，得到新闻的断句，以 cell 字符串形式保存下来。图 3-3（c）进行了句子级的情感值计算，如图所示，首先将句子进行词性标注，图中 P_K 代表积极属性词，PW 代表积极情感词，然后根据句子级情感值计算公式进行极性累加，得到该句的情感值（sentiment）为 3。（a） 新闻采集程序运行结果
【参考文献】：
期刊论文
[1]金融危机背景下中美投资者情绪的传染性分析[J]. 文凤华,杨鑫,龚旭,黄创霞,杨晓光. 系统工程理论与实践. 2015(03)
[2]基于网络搜索数据的房地产价格预测[J]. 董倩,孙娜娜,李伟. 统计研究. 2014(10)
[3]众里寻“股”千百度——股票收益率与百度搜索量关系的实证探究[J]. 赵龙凯,陆子昱,王致远. 金融研究. 2013(04)
[4]IPO发行价溢价异象与投资者情绪研究[J]. 吕东锴,蒋先玲. 经济与管理. 2013(01)
[5]基于投资者关注的媒体报道影响投资行为的实验研究[J]. 张雅慧,万迪昉,付雷鸣. 系统工程. 2012(10)
[6]投资者有限关注与股票收益——以百度指数作为关注度的一项实证研究[J]. 俞庆进,张兵. 金融研究. 2012(08)
[7]有限注意、投资者行为与资产定价——一个研究评述[J]. 彭叠峰,饶育蕾,王建新. 中南大学学报(社会科学版). 2012(03)
[8]创业板投资者情绪及其收益率相关性研究[J]. 吴海燕,杨朝军,龚霄. 上海管理科学. 2012(03)
[9]投资者情绪与股票特征关系[J]. 宋泽芳,李元. 系统工程理论与实践. 2012(01)
[10]投资者关注与IPO异象——来自网络搜索量的经验证据[J]. 宋双杰,曹晖,杨坤. 经济研究. 2011(S1)
博士论文
[1]投资者情绪的统计测评及其应用研究[D]. 崔亮.西南财经大学 2013
[2]基于投资者情绪的行为资产定价研究[D]. 闫伟.华南理工大学 2012
硕士论文
[1]基于百度指数的投资者关注度对于股票市场表现的影响[D]. 缪杰.厦门大学 2014
[2]基于百度指数的投资者关注度与股票指数表现的相关性研究[D]. 王曙.南京大学 2013
[3]投资者情绪对中国股市收益与收益波动影响实证研究[D]. 仇冬.华中科技大学 2012
[4]基于互联网搜索的有限注意与我国股票市场的关系研究[D]. 谢世宏.南京大学 2012
本文编号：3222715
本文链接：https://www.wllwen.com/jingjilunwen/xxjj/3222715.html
