基于条件随机场的敏感话题检测模型研究

分享到

【获取途径】超星期刊网
【作者】翟东海，崔静静，聂洪玉，于磊，杜佳
【作者单位】西南交通大学信息科学与技术学院；西藏大学工学院
【年份】2014
【卷号】第8期
【页码】158-162，167
【ISSN】1000-3428
【关键词】敏感话题检测条件随机场特征函数特征词项 Viterbi算法敏感性标注
【摘要】敏感话题通常包含态度倾向性,且具有一定的先验知识,如何有效利用这些先验知识来判断网络文本的敏感性是敏感话题检测的研究难点和热点。在充分利用条件随机场强大知识拟合能力的基础上,提出一种基于条件随机场的敏感话题检测模型。抽取特征词项,并结合敏感词汇库,将待检测文档和敏感话题类别分别表示为条件随机场中的观察序列和状态序列,再利用敏感话题类别中的先验知识来构造特征函数,从而使观察序列和状态序列建立联系。将待测文档中的特征项根据概率标注为敏感话题类别中的词项,在此过程中采用Viterbi算法对观察序列的可...
【基金】中央高校基本科研业务费专项资金
【文献类型】期刊