一种适用于专业搜索引擎的中文分词系统研究

发布时间：2019-06-11 11:59

【摘要】：在对现有中文分词技术研究的基础上,提出了一种应用于化工专业领域的中文分词系统,先后介绍了首字哈希结合二分查找的词典机制,以及结合路径选择机制而改进了的层进式最短路径切词算法,并经过实验分析,在保证切分效率的同时,在一定程度上达到了消除歧义的效果。
[Abstract]:On the basis of the research on the existing Chinese word segmentation technology, a Chinese word segmentation system applied in the field of chemical engineering is proposed, and the dictionary mechanism of first word hash combined with dichotomous search is introduced one after another. And the improved hierarchical shortest path word segmentation algorithm combined with the path selection mechanism, and through experimental analysis, while ensuring the segmentation efficiency, to a certain extent, to achieve the effect of eliminating ambiguity.
【作者单位】： 北京化工大学信息科学与技术学院 北京化工大学信息科学与技术学院 北京化工大学信息科学与技术学院 北京化工大学信息科学与技术学院
【分类号】：TP391.3

【参考文献】

相关期刊论文 前6条

1 罗智勇;宋柔;;现代汉语通用分词系统中歧义切分的实用技术[J];计算机研究与发展;2006年06期

2 欧振猛,余顺争;中文分词算法在搜索引擎应用中的研究[J];计算机工程与应用;2000年08期

3 湛燕,陈昊,袁方,王熙照;基于中文文本分类的分词方法研究[J];计算机工程与应用;2003年23期

4 费洪晓;胡海苗;巩燕玲;;基于Hash结构的机械统计分词系统研究[J];计算机工程与应用;2006年05期

5 邓宏涛;中文自动分词系统的设计模型[J];计算机与数字工程;2005年04期

6 肖红;许少华;李欣;;具有三级索引词库结构的中文分词方法研究[J];计算机应用研究;2006年08期

【共引文献】

相关期刊论文 前10条

1 文庭孝;汉语自动分词研究进展[J];图书与情报;2005年05期

2 李艳红;庞小平;李海亭;;地名分词搜索的词典设计与匹配方法研究[J];测绘信息与工程;2011年02期

3 肖红;刘淑华;;一种文本多级分类方法研究[J];长江大学学报(自然科学版)理工卷;2008年02期

4 田占霄;韩宪忠;王克俭;;一种改进的长词优先逆向最大匹配分词消歧策略[J];河北农业大学学报;2009年04期

5 李跃民;王浩;赵生慧;;有词典中文分词算法研究[J];滁州学院学报;2008年03期

6 于洪波;;中文分词技术研究[J];东莞理工学院学报;2010年05期

7 李武装;;基于语义的企业搜索引擎的研究与实现[J];电脑知识与技术(学术交流);2007年08期

8 袁保社;袁晓琴;;维吾尔文OpenType字库设计与实现[J];电脑知识与技术;2008年04期

9 丁杰;;基于文法规则匹配的自然语言处理系统研究与实现[J];电脑知识与技术;2009年04期

10 王成平;;彝文信息处理自动分词技术的研究现状与难点分析[J];电脑知识与技术;2012年04期

相关会议论文 前6条

1 梁莹;肖健;李s，

本文编号：2497176