互联网 qkzz.net
全刊杂志网:首页 > 女性 > 文章正文
刊社推荐

基于子词链的中文新闻广播故事自动分割


□ 杨玉莲 谢 磊

   (西北工业大学 计算机学院, 西安 710072)
  摘 要:提出了一种基于子词链的中文新闻广播故事自动分割方法。利用中文同音异形字众多、词典开放、分词多样和组词灵活等特点,在新闻广播的语音识别抄本上采用中文子词单元(汉字和音节)创建子词链,进行中文新闻广播故事的自动分割,有效地解决了在传统词链方法中由于语音识别错误(特别是词典未收录词汇)导致的相关联词之间无法匹配的问题。同时,利用各级词汇表示单元之间的互补性,如词的表义确定性和子词对语音识别错误的鲁棒性,对各级词汇进行融合,利用不同级别词汇表示单元的优势进一步提高中文新闻广播故事分割的性能。在TDT2中文标准新闻广播语料库上进行的实验表明,基于一元汉字子词链分割方法的Fmea-sure比传统词链方法提高了6.06%。基于一元和二元汉字子词链边界强度的融合可以使Fmea-sure进一步提高2.55%。基于投票法的融合可以使Fmeasure比传统词链方法提高9.04%。
  关键词:子词;词链;主题分割;故事分割;信息检索;语音文件检索中图分类号:TP391.1 文献标志码:A
   文章编号:10013695(2009)02058304
  
  Subwordbased lexical chaining for automatic story segmentation in
  Chinese broadcast news
  
  YANG Yulian,XIE Lei
  (School of Computer Science, Northwestern Polytechnical University, Xi’an 710072, China)
  Abstract:This paper applied Chinese subword representations(character and syllable ngrams) into chainingbased automa-tic story segmentation of Chinese broadcast news. It showed the robustness of Chinese subwords against speech recognition errors, especially OOV(out of vocabulary)words, in lexical term matching in erroneous speech recognition transcripts.Proposed a subword chaining approach that links repetitions of Chinese character/syllable ngram units.Also proposed to integrate diffe-rent lexical scales in chainingbased story segmentation since different lexical representations were complimentary. For example, words are more semantically specific and subwords are more robust to speech recognition errors. Experiments on speech recognition transcripts of TDT2 Mandarin corpus show that character unigram performs the best among all scales, which exhi-bits an Fmeasure improvement of 6.06% over words. Fusion of different lexical scales can bring further improvement. For example, voting from different scales achieves an Fmeasure gain of 9.04% over words. ......
很抱歉,暂无全文,若需要阅读全文或喜欢本刊物请联系《计算机应用研究》杂志社购买。
欢迎作者提供全文,请点击编辑
分享:
 

了解更多资讯,请关注“木兰百花园”
分享:
 
精彩图文


关键字
支持中国杂志产业发展,请购买、订阅纸质杂志,欢迎杂志社提供过刊、样刊及电子版。
关于我们 | 网站声明 | 刊社管理 | 网站地图 | 联系方式 | 中图分类法 | RSS 2.0订阅 | IP查询
全刊杂志赏析网 2017