ASR)原理语音识别技术是让机器通过识别把语音信号转变为文本,进而通过理解转变为指令的技术。目的就是给机器赋予人的听觉特性,听懂人说什么,并作出相应的行为。语音识别系统通常由声学识别模型和语言理解模型两部分组成,分别对应语音到音节和音节到字的计算。一个连续语音识别系统大致包含了四个主要部分:特征提取、声学模型、语言模型和解码器等。(1)语音输入的预处理模块对输入的原始语音信号进行处理,滤除掉其中的不重要信息以及背景噪声,并进行语音信号的端点检测(也就是找出语音信号的始末)、语音分帧(可以近似理解为,一段语音就像是一段视频,由许多帧的有序画面构成,可以将语音信号切割为单个的“画面”进行分析)等处理。(2)特征提取在去除语音信号中对于语音识别无用的冗余信息后,保留能够反映语音本质特征的信息进行处理,并用一定的形式表示出来。也就是提取出反映语音信号特征的关键特征参数形成特征矢量序列,以便用于后续处理。(3)声学模型训练声学模型可以理解为是对声音的建模,能够把语音输入转换成声学表示的输出,准确的说,是给出语音属于某个声学符号的概率。根据训练语音库的特征参数训练出声学模型参数。意味着具备了与人类相仿的语言识别能力。山西语音识别翻译
即在解码端通过搜索技术寻找优词串的方法。连续语音识别中的搜索,就是寻找一个词模型序列以描述输入语音信号,从而得到词解码序列。搜索所依据的是对公式中的声学模型打分和语言模型打分。在实际使用中,往往要依据经验给语言模型加上一个高权重,并设置一个长词惩罚分数。语音识别本质上是一种模式识别的过程,未知语音的模式与已知语音的参考模式逐一进行比较,佳匹配的参考模式被作为识别结果。当今语音识别技术的主流算法,主要有基于动态时间规整(DTW)算法、基于非参数模型的矢量量化(VQ)方法、基于参数模型的隐马尔可夫模型(HMM)的方法、以及近年来基于深度学习和支持向量机等语音识别方法。站在巨人的肩膀上:开源框架目前开源世界里提供了多种不同的语音识别工具包,为开发者构建应用提供了很大帮助。但这些工具各有优劣,需要根据具体情况选择使用。下表为目前相对流行的工具包间的对比,大多基于传统的HMM和N-Gram语言模型的开源工具包。对于普通用户而言,大多数人都会知道Siri或Cortana这样的产品。而对于研发工程师来说,更灵活、更具专注性的解决方案更符合需求,很多公司都会研发自己的语音识别工具。(1)CMUSphinix是卡内基梅隆大学的研究成果。山西语音识别翻译语音识别的基本原理是现有的识别技术按照识别对象可以分为特定人识别和非特定人识别。
美国**部下属的一个名为美国**高级研究计划局(DefenseAdvancedResearchProjectsAgency,DARPA)的行政机构,在20世纪70年代介入语音领域,开始资助一项旨在支持语言理解系统的研究开发工作的10年战略计划。在该计划推动下,诞生了一系列不错的研究成果,如卡耐基梅隆大学推出了Harpy系统,其能识别1000多个单词且有不错的识别率。第二阶段:统计模型(GMM-HMM)到了20世纪80年代,更多的研究人员开始从对孤立词识别系统的研究转向对大词汇量连续语音识别系统的研究,并且大量的连续语音识别算法应运而生,例如分层构造(LevelBuilding)算法等。同时,20世纪80年代的语音识别研究相较于20世纪70年代,另一个变化是基于统计模型的技术逐渐替代了基于模板匹配的技术。统计模型两项很重要的成果是声学模型和语言模型,语言模型以n元语言模型(n-gram),声学模型以HMM。HMM的理论基础在1970年前后由Baum等人建立,随后由卡耐基梅隆大学(CMU)的Baker和IBM的Jelinek等人应用到语音识别中。在20世纪80年代中期,Bell实验室的.Rabiner等人对HMM进行了深入浅出的介绍。并出版了语音识别专著FundamentalsofSpeechRecognition,有力地推动了HMM在语音识别中的应用。
另一方面,与业界对语音识别的期望过高有关,实际上语音识别与键盘、鼠标或触摸屏等应是融合关系,而非替代关系。深度学习技术自2009年兴起之后,已经取得了长足进步。语音识别的精度和速度取决于实际应用环境,但在安静环境、标准口音、常见词汇场景下的语音识别率已经超过95%,意味着具备了与人类相仿的语言识别能力,而这也是语音识别技术当前发展比较火热的原因。随着技术的发展,现在口音、方言、噪声等场景下的语音识别也达到了可用状态,特别是远场语音识别已经随着智能音箱的兴起成为全球消费电子领域应用为成功的技术之一。由于语音交互提供了更自然、更便利、更高效的沟通形式,语音必定将成为未来主要的人机互动接口之一。当然,当前技术还存在很多不足,如对于强噪声、超远场、强干扰、多语种、大词汇等场景下的语音识别还需要很大的提升;另外,多人语音识别和离线语音识别也是当前需要重点解决的问题。虽然语音识别还无法做到无限制领域、无限制人群的应用,但是至少从应用实践中我们看到了一些希望。本篇文章将从技术和产业两个角度来回顾一下语音识别发展的历程和现状,并分析一些未来趋势,希望能帮助更多年轻技术人员了解语音行业。
哪些领域又运用到语音识别技术呢?
语音文件“/timit/test/dr5/fnlp0/”的波形图、语谱图和标注SwitchBoard——对话式电话语音库,采样率为8kHz,包含来自美国各个地区543人的2400条通话录音。研究人员用这个数据库做语音识别测试已有20多年的历史。LibriSpeech——英文语音识别数据库,总共1000小时,采样率为16kHz。包含朗读式语音和对应的文本。Thchs-30——清华大学提供的一个中文示例,并配套完整的发音词典,其数据集有30小时,采样率为16kHz。AISHELL-1——希尔贝壳开源的178小时中文普通话数据,采样率为16kHz。包含400位来自中国不同口音地区的发音人的语音,语料内容涵盖财经、科技、体育、娱乐、时事新闻等。语音识别数据库还有很多,包括16kHz和8kHz的数据。海天瑞声、数据堂等数据库公司提供大量的商用数据库,可用于工业产品的开发。08语音识别评价指标假设"我们明天去动物园"的语音识别结果如下:识别结果包含了删除、插入和替换错误。度量语音识别性能的指标有许多个,通常使用测试集上的词错误率(WordErrorRate,WER)来判断整个系统的性能,其公式定义如下:其中,NRef表示测试集所有的词数量,NDel表示识别结果相对于实际标注发生删除错误的词数量,NSub发生替换错误的词数量。怎么构建语音识别系统?语音识别系统构建总体包括两个部分:训练和识别。山西语音识别翻译
更重要的是体现在世界范围内的各行各业在设计和部署语音识别系统时均采用了各种深度学习方法。山西语音识别翻译
并能产生兴趣投身于这个行业。语音识别的技术历程现代语音识别可以追溯到1952年,Davis等人研制了世界上个能识别10个英文数字发音的实验系统,从此正式开启了语音识别的进程。语音识别发展到已经有70多年,但从技术方向上可以大体分为三个阶段。下图是从1993年到2017年在Switchboard上语音识别率的进展情况,从图中也可以看出1993年到2009年,语音识别一直处于GMM-HMM时代,语音识别率提升缓慢,尤其是2000年到2009年语音识别率基本处于停滞状态;2009年随着深度学习技术,特别是DNN的兴起,语音识别框架变为DNN-HMM,语音识别进入了DNN时代,语音识别精细率得到了提升;2015年以后,由于“端到端”技术兴起,语音识别进入了百花齐放时代,语音界都在训练更深、更复杂的网络,同时利用端到端技术进一步大幅提升了语音识别的性能,直到2017年微软在Swichboard上达到词错误率,从而让语音识别的准确性超越了人类,当然这是在一定限定条件下的实验结果,还不具有普遍代表性。GMM-HMM时代70年代,语音识别主要集中在小词汇量、孤立词识别方面,使用的方法也主要是简单的模板匹配方法,即首先提取语音信号的特征构建参数模板,然后将测试语音与参考模板参数进行一一比较和匹配。
山西语音识别翻译