期刊文献+

快速双向中文分词算法

FAST AND TWO- WAY ALGORITHM FOR CHINESE WORD SEGMENTATION
在线阅读 下载PDF
导出
摘要 中文分词是中文信息处理的基础、前提和关键.通过分析已有的中文分词算法,提出了一种新的分词词典机制,并根据新的分词词典机制提出了一种快速双向中文分词算法.使用该算法可以实现快速查找和双向匹配,从而极大地提高中文分词的速度和准确率. Chinese word segmentation is the precondition for Chinese information processing. By analyzing the existing algorithms for Chinese word segmentation, a new dictionary mechanism and a fast and two - way algorithm for Chinese word segmentation are put forward. The new algorithm can achieve a rapid search and two - way matching. At the same time, it can also improve the speed and accuracy of Chinese word segmentation.
出处 《山东师范大学学报(自然科学版)》 CAS 2009年第1期75-77,共3页 Journal of Shandong Normal University(Natural Science)
基金 山东省自然科学基金资助项目(Y2005021)
关键词 中文分词 字符串匹配 分词词典机制 自定义类型 chinese word segmentation chinese word matching dictionary mechanism tor chinese word segmentation user- defined type
  • 相关文献

参考文献4

二级参考文献21

  • 1黄昌宁.中文信息处理中的分词问题[J].语言文字应用,1997(1):74-80. 被引量:85
  • 2孙茂松,邹嘉彦.汉语自动分词研究中的苦干理论问题[J].语言文字应用,1995(4):40-46. 被引量:45
  • 3文庭孝,邱均平,侯经川.汉语自动分词研究展望[J].现代图书情报技术,2004(7):6-10. 被引量:20
  • 4孙茂松,黄昌宁,邹嘉彦,陆方,沈达阳.利用汉字二元语法关系解决汉语自动分词中的交集型歧义[J].计算机研究与发展,1997,34(5):332-339. 被引量:66
  • 5马晏.基于评价的汉语自动分词系统的研究与实现[A]..语言信息处理专论[C].北京:清华大学出版社,1996..
  • 6Choi A, Cheng C H, Ko Y L. Word extraction from Chinese documents by occurrence counts [ A].1988 International Conference on Computer Processing of Chinese and Oriental Languages, Toronto,Canada: 488 - 491.
  • 7Fan C K, Tsai W H. Automatic word identification in Chinese sentences by the relaxation technique[J]. Computer Processing of Chinese and Oriental Languages, 1988, 4(1):33-56.
  • 8GB12200.1-90.汉语信息处理词汇01部分:基本术语[S].[S].,..
  • 9梁南元.书面汉语自动分词系统—CDWS[J].中文信息学报,1987,(2):44-52.
  • 10汉语信息处理词汇01部分;基本术语(GB12200.1-90)[M].北京:中国标准出版社,1991.

共引文献199

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部