MLWS2021藏文分词评测报告

分享到

【获取途径】超星期刊网
【作者】高定国，杨晓龙，杨宇帆，取次，高红梅
【作者单位】西藏大学信息科学技术学院
【年份】2022
【卷号】第6卷
【期号】第1期
【页码】82-89
【ISSN】2096-4617
【关键词】MLWS2021 藏文分词评测
【摘要】藏文分词是藏文信息处理中关键的基础性工作，是机器翻译、智能检索、自然语言理解等智能信息处理的前提。藏文作为“少数民族语言分词技术评测MLWS2021”的一种评测语种，在MLWS2017的基础上，语料从新闻类单一语料扩展为新闻、法律、经济、小说和语言文字等多领域综合语料，训练语料和测试语料的质和量都有了较大的提升。文章介绍MLWS2021中藏文分词评测语料的构成、收集、整理情况；再分析藏文分词评测分析软件设计思想的基础上，针对测试语料的多样性，设计了“文本对比”和“藏文评测分析”软件，按需建设评测...
【基金】国家自然科学基金
【文献类型】期刊