作者投稿和查稿 主编审稿 专家审稿 编委审稿 远程编辑

›› 2004, Vol. 30 ›› Issue (S1): 383-384.

• 论文 • 上一篇    下一篇

Katz平滑算法在中文分词系统中的应用

黄建中,王肖雷   

  1. 上海交通大学软件学院,上海大众汽车有限公司 上海 200240
  • 发布日期:2004-12-29

Application of Katz Smoothing in Chinese Word Segmentation System

HUANG Jianzhong,WANG Xiaolei   

  1. (School of Software,Shanghai Jiaotong University,Shanghai 200040;Shanghai Volkswagen Automotive Co.Ltd.,Shanghai 201805)
  • Published:2004-12-29

摘要: 针对基于统计模型的中文分词系统,从系统实现的角度探讨了主流的相关技术,涉及:n-gram语言模型,语料库,统计模型的参数 估计及参数平滑等概念,重点对Katz平滑算法作了改进,并在分词系统原型中实现了该算法。

关键词: 中文分词, 语料库, n-gram模型, Katz平滑

Abstract: This paper gives some insight into related theory and technology of Chinese word segmentation, and presents a n-gram model based on Katz smoothing.

中图分类号: