第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合
本文关键词:哈萨克语文本分类系统的设计与实现,由笔耕文化传播整理发布。
《少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集》2010年
基于K-最近距离方法的哈萨克语文本分类系统的设计与实现
玛依来·哈帕尔 古丽拉·阿东别克
【摘要】:本文利用K-最近距离算法对哈萨克语文本进行分类,通过统计词频信息和语言信息相结合的方法选择特征,实现了一个哈萨克语文本分类系统。在计算特征权重值时不仅考虑词频,还利用了特征的集中度、分散度,经过训练和统计对每一类哈萨克语文本形成特征的权重向量,然后根据K-最近距离算法判断测试文本的所属类别,实验结果表明此方法可行。
【作者单位】:
【分类号】:TP391.1
【正文快照】:
1引言文本的自动分类是自然语言处理中一个十分重要的问题,是对大量的自然语言文本按照一定的主题类别进行自动分类的过程,即就是在给定的分类体系下,由计算机根据待分类文本的内容自动确定文本类别的过程11].文本分类方面的研究是计算机信息处理领域的重要内容。词是哈萨
下载全文更多同类文献
PDF全文下载
CAJ全文下载
(如何获取全文? 欢迎:购买知网充值卡、在线充值、在线咨询)
CAJViewer阅读器支持CAJ、PDF文件格式,AdobeReader仅支持PDF格式
【参考文献】
中国期刊全文数据库 前3条
1 孙健,王伟,钟义信;基于K-最近距离的自动文本分类的研究[J];北京邮电大学学报;2001年01期
2 张晓辉,李莹,王华勇,赵宏;应用特征聚合进行中文文本分类的改进KNN算法[J];东北大学学报;2003年03期
3 李国臣;文本分类中基于对数似然比测试的特征词选择方法[J];中文信息学报;1999年04期
【共引文献】
中国期刊全文数据库 前10条
1 冯志伟;;信息时代的翻译工具[J];北华大学学报(社会科学版);2007年06期
2 冯志伟;;语音合成中的文本归一化问题[J];北华大学学报(社会科学版);2010年02期
3 李燕琴;一种生态旅游者的识别与细分方法——以北京市百花山自然保护区为例[J];北京大学学报(自然科学版);2005年06期
4 孙健,王伟,钟义信;基于K-最近距离的自动文本分类的研究[J];北京邮电大学学报;2001年01期
5 朱姝;张政;;基于多层次句子相似度与向量空间模型的词义消歧[J];北京工商大学学报(自然科学版);2009年02期
6 张晨;祁坤钰;;基于Penn Treebank英语标注集对《圣经》标注集的扩充研究[J];才智;2009年20期
7 代劲;胡峰;王国胤;;基于不完备信息系统的文本分类研究与应用[J];重庆邮电学院学报(自然科学版);2006年03期
8 殷宏威;赵伟;杨志伟;;蚁群算法在KNN文本分类中的应用[J];长春理工大学学报(自然科学版);2010年01期
9 赵俊杰;盛剑锋;陶新民;;一种基于特征加权的KNN文本分类算法[J];电脑学习;2010年02期
10 张莉,康耀红,王曙光,张春元;中文网页自动分类现状的研究[J];福建电脑;2004年05期
中国重要会议论文全文数据库 前5条
1 张霄军;;“长安”的同名地名自动识别与指代消解[A];陕西省社会科学界第二届(2008)学术年会——青年博士论坛“陕西新起点:创新·发展·民生”专题获奖论文选编[C];2008年
2 董学春;胡学钢;谢飞;吴共庆;;基于词向量空间模型的文本分类方法[A];计算机技术与应用进展——全国第17届计算机科学与技术应用(CACIS)学术会议论文集(上册)[C];2006年
3 钟茂生;;自然语言中的对象及其处理[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年
4 王海东;谭魏旋;周国栋;;语义角色在指代消解中的研究[A];第四届全国学生计算语言学研讨会会议论文集[C];2008年
5 玛依来·哈帕尔;古丽拉·阿东别克;;基于K-最近距离方法的哈萨克语报纸分类初探[A];第四届全国学生计算语言学研讨会会议论文集[C];2008年
中国博士学位论文全文数据库 前10条
1 李南希;非特定人的自然书写脱机中文文本行识别[D];华南理工大学;2010年
2 刘少辉;知识发现中粗糙集理论的研究[D];中国科学院研究生院(计算技术研究所);2003年
3 王煜;基于决策树和K最近邻算法的文本分类研究[D];天津大学;2006年
4 方淼;语义单元自动获取研究[D];大连理工大学;2008年
5 宣照国;文本挖掘算法及其在知识管理中的应用研究[D];大连理工大学;2008年
6 关晓薇;基于语义语言的机器翻译系统中若干关键问题研究[D];大连理工大学;2009年
7 张建梅;基于语料库的现代蒙古语简单陈述句句型分析研究[D];内蒙古大学;2010年
8 林建方;词搭配抽取及在信息检索中的应用研究[D];哈尔滨工业大学;2010年
9 曾湘祥;脉冲神经膜系统的计算性能研究[D];华中科技大学;2011年
10 代劲;云模型在文本挖掘应用中的关键问题研究[D];重庆大学;2011年
中国硕士学位论文全文数据库 前10条
1 何向真;多语言电子词典构建[D];西北民族大学;2010年
2 周登;基于N-Gram模型的藏文文本分类技术研究[D];西北民族大学;2010年
3 张春炉;LSA与SOM相结合的文本聚类算法应用研究[D];解放军信息工程大学;2010年
4 张炼;基于图模型的Web文档分类方法研究[D];内蒙古科技大学;2010年
5 代学武;基于神经网络的用户建模和Web信息过滤研究[D];西南师范大学;2003年
6 王汉萍;粗糙集理论在文本挖掘的分类算法中的应用研究[D];中国海洋大学;2003年
7 刘军;基于论点倾向的网络信息内容实时分析研究[D];四川大学;2003年
8 湛燕;K-近邻、K-均值及其在文本分类中的应用[D];河北大学;2003年
9 吴娟;军用信息自动分类的研究与实现[D];南京理工大学;2004年
10 张红霞;渐进式中文文本分类技术研究[D];河北大学;2004年
【二级参考文献】
中国期刊全文数据库 前5条
1 李晓黎,刘继敏,史忠植;概念推理网及其在文本分类中的应用[J];计算机研究与发展;2000年09期
2 吴军,王作英,禹锋,,王侠;汉语语料的自动分类[J];中文信息学报;1995年04期
3 李国臣;文本分类中基于对数似然比测试的特征词选择方法[J];中文信息学报;1999年04期
4 刁倩,张惠惠,王永成,何骥;中文文献自动分类中的知识库构造及其仿人算法[J];情报学报;2000年03期
5 孙丽华,张积东,李静梅;一种改进的kNN方法及其在文本分类中的应用[J];应用科技;2002年02期
【相似文献】
中国期刊全文数据库 前10条
1 郑海,林鸿飞;基于段落匹配的文本分类机制[J];计算机工程与应用;2004年28期
2 王丁,运海红,张辉;文本自动分类系统的研究与实现[J];信息技术;2005年03期
3 杜志文;曾文华;;网格计算在文本分类中的应用[J];微电子学与计算机;2006年S1期
4 崔彩霞;王素格;;基于粗集的支持向量机文本分类方法研究[J];科技广场;2006年08期
5 祝晓鲁;白振兴;贾海燕;;自动文本分类技术研究[J];现代电子技术;2007年03期
6 张桂芸;刘洋;王元元;;基于模糊认知图的文本分类推理算法[J];计算机工程与应用;2007年12期
7 陈莲娜;姚伏天;;用于文本分类的多核SVM算法研究[J];计算机工程;2007年09期
8 王倩倩;段震;张燕平;;基于交叉覆盖算法的文本分类[J];计算机技术与发展;2007年06期
9 董梅;胡学钢;;基于多特征选择的中文文本分类[J];计算机技术与发展;2007年07期
10 巩知乐;张德贤;;文本挖掘理论概述[J];福建电脑;2008年09期
中国重要会议论文全文数据库 前10条
1 陈克利;宗成庆;王霞;;基于大规模真实文本的平衡语料分析与文本分类方法[A];语言计算与基于内容的文本处理——全国第七届计算语言学联合学术会议论文集[C];2003年
2 杜长海;吉根林;;模糊聚类的最大树法在文本分类中的应用研究[A];第二十二届中国数据库学术会议论文集(研究报告篇)[C];2005年
3 海丽且木·艾沙;维尼拉·木沙江;;Web文本分类及其维、哈、柯多文种信息检索中的应用研究[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
4 胡俊;黄厚宽;;一种基于SVM的可视化文本分类的方法[A];第二十一届中国数据库学术会议论文集(技术报告篇)[C];2004年
5 朱慕华;陈文亮;朱靖波;;词聚类在文本分类中的应用[A];第二届全国学生计算语言学研讨会论文集[C];2004年
6 贾会强;刘晓丽;于洪志;;基于词性特征提取的藏文文本分类方法研究[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
7 房一飞;张冬茉;;基于boosting的文本分类在股市领域信息抽取系统中的应用[A];辉煌二十年——中国中文信息学会二十周年学术会议论文集[C];2001年
8 玛依来·哈帕尔;古丽拉·阿东别克;;基于K-最近距离方法的哈萨克语文本分类系统的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
9 肖婷;唐雁;;文本分类中特征选择方法及应用[A];2008年计算机应用技术交流会论文集[C];2008年
10 赵修湘;石勇;刘莹;张玲玲;;文本分类在软件缺陷管理中的应用[A];第四届(2009)中国管理学年会——管理科学与工程分会场论文集[C];2009年
中国重要报纸全文数据库 前10条
1 希安;[N];经济日报;2004年
2 王培森;[N];中国计算机报;2003年
3 新自疆;[N];农民日报;2007年
4 通讯员高国伟;[N];新疆日报(汉);2010年
5 新疆电化教育馆;[N];中国电脑教育报;2007年
6 ;[N];中国电脑教育报;2007年
7 瀛寰;[N];中国计算机报;2006年
8 蒋夫尔;[N];中国教育报;2008年
9 陈昌奇;[N];西部时报;2008年
10 王慧敏;[N];人民日报;2007年
中国博士学位论文全文数据库 前10条
1 章舜仲;文本分类中词共现关系的研究及其应用[D];南京理工大学;2010年
2 孟佳娜;迁移学习在文本分类中的应用研究[D];大连理工大学;2011年
3 李智星;用于文本分类的简明语义分析技术研究[D];重庆大学;2011年
4 刘伍颖;面向垃圾信息过滤的主动多域学习文本分类方法研究[D];国防科学技术大学;2011年
5 王博;文本分类中特征选择技术的研究[D];国防科学技术大学;2009年
6 冯国忠;文本分类中的贝叶斯特征选择[D];东北师范大学;2011年
7 祝翠玲;基于类别结构的文本层次分类方法研究[D];山东大学;2011年
8 宋枫溪;自动文本分类若干基本问题研究[D];南京理工大学;2004年
9 郝立柱;汉语文本自动分类[D];吉林大学;2008年
10 郝立丽;汉语文本数据挖掘[D];吉林大学;2009年
中国硕士学位论文全文数据库 前10条
1 张彪;文本分类中特征选择算法的分析与研究[D];中国科学技术大学;2010年
2 张保富;基于粗糙集的中文文本分类算法研究及应用[D];江苏大学;2010年
3 蒋健;文本分类中特征提取和特征加权方法研究[D];重庆大学;2010年
4 闫晨;KNN文本分类研究[D];燕山大学;2010年
5 苏小康;基于维基百科构建语义知识库及其在文本分类领域的应用研究[D];华中师范大学;2010年
6 李璇;基于坐标下降法的半监督学习算法及其在文本分类中的应用[D];华南理工大学;2010年
7 宋志理;基于LDA模型的文本分类研究[D];西安理工大学;2010年
8 郭志毅;基于EM算法的半监督文本分类方法研究[D];重庆邮电大学;2010年
9 郭明;基于文本分类技术的文本情感倾向性研究[D];郑州大学;2010年
10 段江丽;基于SVM的文本分类系统中特征选择与权重计算算法的研究[D];太原理工大学;2011年
本文关键词:哈萨克语文本分类系统的设计与实现,由笔耕文化传播整理发布。
本文编号:103719
本文链接:https://www.wllwen.com/kejilunwen/xinxigongchenglunwen/103719.html