唇读中的HLM模型及其文字流解析

计算机科学 ›› 2008, Vol. 35 ›› Issue (12): 171-174.

唇读中的HLM模型及其文字流解析

王丹姚鸿勋万玉奇洪晓鹏

哈尔滨工业大学计算机科学与技术学院,哈尔滨150001

出版日期:2018-11-16 发布日期:2018-11-16
基金资助:
黑龙江省自然科学基金项目（E2005-29）,哈尔滨工业大学“新世纪人才支持计划”（NCET-05-0334）.

WANG Dan YAO Hong-xun WAN Yu-qi HONG Xiao-peng （School of Computer Science and Technology, Harbin Institute of Technology, Harbin 150001, China）

Online:2018-11-16 Published:2018-11-16

摘要/Abstract

摘要： 由于唇动序列和语言序列是一对多的映射，计算机自动唇读识别仅使用HMM是远远不够的。以HMM为基础，结合语言先验知识，建立了新的唇动识别模型——HLM（HMM and Bigram Language Model）。HLM突破了单纯采用HMM计算声学后验概率进行识别的传统框架，将HMM和语言背景知识紧密联系起来，依据语言模型对语言背景知识进行统计，在识别阶段融合声学后验概率和语言学先验概率进行判决。实验结果表明，HLM可使单音识别率提高7．3％，句子识别率提高19．5％。另外，采用语言模型对文字流进行解析，而

关键词: 唇读识别模型 HLM HMM

Abstract: Since lip movement sequence and language sequence are one-to-many mapping, it is far from sufficiency to use only HMM for lip-reading recognition. Proposed a novel recognition model HLM（ HMM and Bigram Language Model）, which is based on HMM, and combined

Key words: Lipreading, Recognition model, HLM, HMM

王丹姚鸿勋万玉奇洪晓鹏. 唇读中的HLM模型及其文字流解析[J]. 计算机科学, 2008, 35(12): 171-174. https://doi.org/

WANG Dan YAO Hong-xun WAN Yu-qi HONG Xiao-peng （School of Computer Science and Technology, Harbin Institute of Technology, Harbin 150001, China）. [J]. Computer Science, 2008, 35(12): 171-174. https://doi.org/

参考文献

Metrics

Viewed

Full text

Abstract

Cited

Shared

Discussed