自然语言检索中的中文分词技术研究进展及应用

发布时间：2019-06-03 03:17

【摘要】：中文分词技术是实现自然语言检索的重要基础,是信息检索领域研究的关键课题,无论是专业信息检索系统还是搜索引擎都依赖于分词技术的研究成果。本文通过在国内外著名数据库中进行相关检索,分析了研究中文分词技术及其在著名搜索引擎中的应用。
[Abstract]:Chinese word segmentation technology is an important basis for the realization of natural language retrieval and a key topic in the field of information retrieval. Both professional information retrieval system and search engine rely on the research results of word segmentation technology. This paper analyzes the Chinese word segmentation technology and its application in famous search engines by searching famous databases at home and abroad.
【作者单位】： 西安石油大学机械工程学院 浙江大学信息科学与工程学院
【分类号】：TP391.3

【参考文献】

相关硕士学位论文 前1条

1 周钦强;基于人工智能技术Naive Bayes文本自动分类系统研究[D];广东工业大学;2005年

【共引文献】

相关期刊论文 前10条

1 张锋,樊孝忠;基于最大熵模型的交集型切分歧义消解[J];北京理工大学学报;2005年07期

2 孙茂松,邹嘉彦;汉语自动分词研究评述[J];当代语言学;2001年01期

3 蔡勇智;基于最大匹配分词算法的中文词语粗分模型[J];福建电脑;2005年09期

4 王锡江;王启祥;陈家骏;;基于邻接知识的汉语自动分词系统[J];计算机研究与发展;1992年11期

5 刘群,张华平,俞鸿魁,程学旗;基于层叠隐马模型的汉语词法分析[J];计算机研究与发展;2004年08期

6 殷峰,何克抗;语句级拼音┐汉字转换系统的设计与实现[J];计算机研究与发展;1997年05期

7 陈其晖,应志伟,柴佩琪;基于歧义二叉树的汉语分词方法[J];计算机辅助工程;1999年04期

8 刘壁松,李春平;一个可扩展的文本分类系统的设计与实现[J];计算机工程与应用;2004年30期

9 刘迁;贾惠波;;中文信息处理中自动分词技术的研究与展望[J];计算机工程与应用;2006年03期

10 翟伟斌;周振柳;蒋卓明;许榕生;;汉语分词词典设计[J];计算机工程与应用;2007年01期

相关会议论文 前7条

1 孙茂松;;汉语自动分词研究的若干最新进展——清华大学相关工作简介[A];辉煌二十年——中国中文信息学会二十周年学术会议论文集[C];2001年

2 董强;郝长伶;董振东;;基于《知网》的中文语块抽取器[A];语言计算与基于内容的文本处理——全国第七届计算语言学联合学术会议论文集[C];2003年

3 Chunyu Kit;;An Example-based Study on Chinese Word Segmentation Using Critical Fragments[A];Proceedings of the Conference First International Joint Conference on Natural Language Processing[C];2004年

4 李斌;陈小荷;方芳;徐艳华;;高频最大交集型歧义字段问题研究[A];全国第八届计算语言学联合学术会议（JSCL-2005）论文集[C];2005年

5 孙承杰;黄昌宁;关毅;;基于标注语料库的组合歧义检测与消解[A];第三届学生计算语言学研讨会论文集[C];2006年

6 Luning Ji, Qin Lu, Wenjie Li, YiRong Chen The Department of Computing, The Hong Kong Polytechnic University, Hong Kong, China;A Comparative Study of the Effect of Word Segmentation On Chinese Terminology Extraction[A];第20届亚太地区语言、信息和计算国际会议论文集[C];2006年

7 张霄军;董宇;陈小荷;;基于语料考察的“组合型歧义”与“切分变异”辨析[A];内容计算的研究与应用前沿——第九届全国计算语言学学术会议论文集[C];2007年

相关博士学位论文 前7条

1 贺前华;汉语自动分词及机器翻译研究[D];华南理工大学;1993年

2 冯敏萱;论汉英平行语料的平行处理[D];南京师范大学;2006年

3 张亮;面向开放域的中文问答系统问句处理相关技术研究[D];南京理工大学;2006年

4 张华平;语言浅层分析与句子级新信息检测研究[D];中国科学院研究生院（计算技术研究所）;2005年

5 郭永辉;英汉机器翻译系统关键技术研究[D];解放军信息工程大学;2006年

6 黄魏;植物营养诊断自动应答网络专家系统研究[D];华中农业大学;2007年

7 常娥;古籍智能处理技术研究[D];南京农业大学;2007年

相关硕士学位论文 前10条

1 何燕;任意类型的未登录词的识别研究[D];北京语言文化大学;2000年

2 娄（王廷）;现代汉语分词系统通用性设计及切分歧义处理[D];北京工业大学;2000年

3 黄艳;面向数字化产品的自然语言查询技术的研究与开发[D];浙江大学;2002年

4 缪晓阳;WebCM：一种基于搜索引擎的网络内容监控系统的研究[D];浙江大学;2002年

5 廉竹钧;汉语组合型切分歧义字段消歧方法研究[D];北京语言文化大学;2002年

6 马东坡;Internet中文智能搜索引擎汉语自动分词系统设计[D];广西师范大学;2002年

7 胡蓉;中文Web文档倾向性自动分类研究[D];四川大学;2003年

8 刘建舟;术语自动抽取系统的设计及关键技术研究[D];华中师范大学;2004年

9 于爱军;NERMS中基于Internet的搜索引擎研究与实现[D];吉林大学;2004年

10 梅胜;基于SVM的多层次大类别数文本分类系统（HJ-TCM）的设计与实现[D];南京理工大学;2004年

【相似文献】

相关期刊论文 前10条

1 梁南元;书面汉语的自动分词与一个自动分词系统—CDWS[J];北京航空航天大学学报;1984年04期

2 王永成;论中文的电脑分词[J];应用科学学报;1985年02期

3 关英春;秦蓓;;汉字自动统计系统CWSS[J];计算机研究与发展;1985年12期

4 刘源,梁南元;汉语处理的基础工程——现代汉语词频统计[J];中文信息学报;1986年01期

5 关英春 ,秦蓓;汉语文字自动统计系统CWSS[J];中文信息学报;1986年01期

6 袁琦;我国语言工程研究取得丰硕成果——“现代汉语词频统计”工程通过国家级鉴定[J];中文信息学报;1986年01期

7 梁南元;书面汉语自动分词系统—CDWS[J];中文信息学报;1987年02期

8 梁南元;汉语自动分词知识[J];北京航空航天大学学报;1988年04期

9 李国臣,刘开瑛,张永奎;汉语自动分词及歧义组合结构的处理[J];中文信息学报;1988年03期

10 王启祥,王锡江,陈未竞;日汉机器翻译中词的自动切分技术[J];中文信息学报;1988年03期

相关会议论文 前10条

1 倪宏;李昌立;莫福源;;基于词汇的汉语文语转换系统[A];第三届全国人机语音通讯学术会议论文集[C];1994年

2 李小明;王亚莉;易立夫;杨静;孙金城;;自动分词中的单字虚词处理[A];新世纪的现代语音学——第五届全国现代语音学学术会议论文集[C];2001年

3 季Y，

本文编号：2491623