基于小字符集的藏文自动分词技术研究

分享到

【作者】才华
【作者单位】西藏大学图书馆和现代教育技术中心
【年份】2013
【卷号】第5期
【ISSN】1005-5738
【关键词】藏文自动分词分块预处理多级Hash词典机制藏文紧缩格逐字匹配算法
【摘要】文章针对传统藏文分词的切词难点及切分歧义现象,提出一种基于小字符集的藏文自动分词技术方案.其中包括分词预处理、多级Hash词典机制、藏文格助词紧缩格的判别及还原规则、逐字匹配算法和未登录词的处理等内容.
【文献类型】期刊