基于字典的藏文分词系统实现研究

分享到

【作者】格桑多吉，乔少杰，何泽东
【作者单位】西藏大学藏文信息技术研究中心；西南交通大学信息科学与技术学院
【年份】2015
【卷号】第8期
【页码】80-82
【关键词】藏文信息处理技术藏文自动分词分词系统
【摘要】随着对语言文字信息处理研究工作的不断加深,藏文信息处理技术也逐渐从字信息处理走向了语言信息处理。跟日语、汉语、韩语等语种的信息处理相同,藏文自动分词(Tibetan Automatic Word Segmentation)是藏文信息处理中的一项必不可少的基础性工作,在此基础上才能划分短语、抽取概念以及分析主题,以至自然语言理解,最终实现智能化。对于不同应用环境,藏文自动分词需要采用最合适的算法,本文通过对藏语语料的统计分析和藏语词的分布特点、语法功能的研究,提出了设计开发基于词典库的藏文自动分词...
【基金】国家自然科学基金
【文献类型】期刊