Hinton提出深度置信网络（DBN），促使了深度神经网络（DNN）研究的复苏。2009年，Hinton将DNN应用于语音的声学建模，在TIMIT上获得了当时好的结果。2011年底，微软研究院的俞栋、邓力又把DNN技术应用在了大词汇量连续语音识别任务上，降低了语音识别错误率。从此语音识别进入DNN-HMM时代。DNN-HMM主要是用DNN模型代替原来的GMM模型，对每一个状态进行建模，DNN带来的好处是不再需要对语音数据分布进行假设，将相邻的语音帧拼接又包含了语音的时序结构信息，使得对于状态的分类概率有了明显提升，同时DNN还具有强大环境学习能力，可以提升对噪声和口音的鲁棒性。简单来说...

训练通常来讲都是离线完成的，将海量的未知语音通过话筒变成信号之后加在识别系统的输入端，经过处理后再根据语音特点建立模型，对输入的信号进行分析，并提取信号中的特征，在此基础上建立语音识别所需的模板。识别则通常是在线完成的，对用户实时语音进行自动识别。这个过程又基本可以分为“前端”和“后端”两个模块。前端主要的作用就是进行端点检测、降噪、特征提取等。后端的主要作用是利用训练好的“声音模型”和“语音模型”对用户的语音特征向量进行统计模式识别，得到其中包含的文字信息。语音识别技术的应用语音识别技术有着应用领域和市场前景。在语音输入控制系统中，它使得人们可以甩掉键盘，通过识别语音中的要求、请求、...

ASR）原理语音识别技术是让机器通过识别把语音信号转变为文本，进而通过理解转变为指令的技术。目的就是给机器赋予人的听觉特性，听懂人说什么，并作出相应的行为。语音识别系统通常由声学识别模型和语言理解模型两部分组成，分别对应语音到音节和音节到字的计算。一个连续语音识别系统大致包含了四个主要部分：特征提取、声学模型、语言模型和解码器等。（1）语音输入的预处理模块对输入的原始语音信号进行处理，滤除掉其中的不重要信息以及背景噪声，并进行语音信号的端点检测（也就是找出语音信号的始末）、语音分帧（可以近似理解为，一段语音就像是一段视频，由许多帧的有序画面构成，可以将语音信号切割为单个的“画面”进行分...

机器必然要超越人类的五官，能够看到人类看不到的世界，听到人类听不到的世界。语音识别的产业历程语音识别这半个多世纪的产业历程中，其中的共有三个关键节点，两个和技术有关，一个和应用有关。关键节点是1988年的一篇博士论文，开发了基于隐马尔科夫模型（HMM）的语音识别系统——Sphinx，当时实现这一系统的正是现在的投资人李开复。从1986年到2010年，虽然混合高斯模型效果得到持续改善，而被应用到语音识别中，并且确实提升了语音识别的效果，但实际上语音识别已经遭遇了技术天花板，识别的准确率很难超过90%。很多人可能还记得，在1998年前后IBM、微软都曾经推出和语音识别相关的软件，但终并未取...

ASR）原理语音识别技术是让机器通过识别把语音信号转变为文本，进而通过理解转变为指令的技术。目的就是给机器赋予人的听觉特性，听懂人说什么，并作出相应的行为。语音识别系统通常由声学识别模型和语言理解模型两部分组成，分别对应语音到音节和音节到字的计算。一个连续语音识别系统大致包含了四个主要部分：特征提取、声学模型、语言模型和解码器等。（1）语音输入的预处理模块对输入的原始语音信号进行处理，滤除掉其中的不重要信息以及背景噪声，并进行语音信号的端点检测（也就是找出语音信号的始末）、语音分帧（可以近似理解为，一段语音就像是一段视频，由许多帧的有序画面构成，可以将语音信号切割为单个的“画面”进行分...

CNN本质上也可以看作是从语音信号中不断抽取特征的一个过程。CNN相比于传统的DNN模型，在相同性能情况下，前者的参数量更少。综上所述，对于建模能力来说，DNN适合特征映射到空间，LSTM具有长短时记忆能力，CNN擅长减少语音信号的多样性，因此一个好的语音识别系统是这些网络的组合。端到端时代语音识别的端到端方法主要是代价函数发生了变化，但神经网络的模型结构并没有太大变化。总体来说，端到端技术解决了输入序列的长度远大于输出序列长度的问题。端到端技术主要分成两类：一类是CTC方法，另一类是Sequence-to-Sequence方法。传统语音识别DNN-HMM架构里的声学模型，每一帧输入都...

发音和单词选择可能会因地理位置和口音等因素而不同。哦，别忘了语言也因年龄和性别而有所不同！考虑到这一点，为ASR系统提供的语音样本越多，它在识别和分类新语音输入方面越好。从各种各样的声音和环境中获取的样本越多，系统越能在这些环境中识别声音。通过专门的微调和维护，自动语音识别系统将在使用过程中得到改进。因此，从基本的角度来看，数据越多越好。的确，目前进行的研究和优化较小数据集相关，但目前大多数模型仍需要大量数据才能发挥良好的性能。幸运的是，得益于数据集存储库的数据收集服务，音频数据的收集变得越发简单。这反过来又增加了技术发展的速度，那么，接下来简单了解一下，未来自动语音识别能在哪些方面大...

数据化的“文字”更容易触发个人对信息的重视程度，有效避免信息的遗漏。会议纪要更准确。系统能够提供对与会人员发言内容的高保真记录，且可以通过文字定位并回听语音，达到声文对应，辅助记录人员更好的理解会议思想、提升纪要结论或纪要决议的准确度。数据安全性强。系统应用后能够降低对记录人员的要求，一名普通的人员在会后简单编辑即可出稿，不需要外聘速录人员，内部参与的员工也可控制到少，故只需做好设备的安全管控，就能有效保障会议信息安全。实现价值提高工作效率。系统的实时语音转写、历史语音转写等功能，能够辅助秘书及文员快速完成会议记录的整理、编制、校对、归档等工作，减少会议纪要的误差率，提升工作人员的工作...

导致我国的语音识别研究在整个20世纪80年代都没有取得学术成果，也没有开发出具有优良性能的识别系统。20世纪90年代，我国的语音识别研究持续发展，开始逐渐地紧追国际水平。在"863"计划、国家科技攻关计划、国家自然科学基金的支持下，我国在中文语音识别技术方面取得了一系列研究成果。21世纪初期，包括科大讯飞、中科信利、捷通华声等一批致力于语音应用的公司陆续在我国成立。语音识别企业科大讯飞早在2010年，就推出了业界中文语音输入法，移动互联网的语音应用。2010年以后，百度、腾讯、阿里巴巴等国内各大互联网公司相继组建语音研发团队，推出了各自的语音识别服务和产品。在此之后，国内语音识别的研究...

我们可以用语音跟它们做些简单交流，完成一些简单的任务等等。语音识别技术的应用领域：汽车语音控制当我们驾驶汽车在行驶过程中，必须时刻握好方向盘，但是难免有时候遇到急事需要拨打电话这些，这时候运用汽车上的语音拨号功能的免提电话通信方式便可简单实现。此外，对汽车的卫星导航定位系统（GPS）的操作，汽车空调、照明以及音响等设备的操作，同样也可以用语音的方式进行操作。语音识别技术的应用领域：工业控制及医疗领域在工业及医疗领域上，运用智能语音交互，能够让我们解放双手，只需要对机器发出命令，就可以让其操作完成需要的任务。提升了工作的效率。语音识别技术在个人助理、智能家居等很多领域都有运用到，随着语音...

CNN本质上也可以看作是从语音信号中不断抽取特征的一个过程。CNN相比于传统的DNN模型，在相同性能情况下，前者的参数量更少。综上所述，对于建模能力来说，DNN适合特征映射到空间，LSTM具有长短时记忆能力，CNN擅长减少语音信号的多样性，因此一个好的语音识别系统是这些网络的组合。端到端时代语音识别的端到端方法主要是代价函数发生了变化，但神经网络的模型结构并没有太大变化。总体来说，端到端技术解决了输入序列的长度远大于输出序列长度的问题。端到端技术主要分成两类：一类是CTC方法，另一类是Sequence-to-Sequence方法。传统语音识别DNN-HMM架构里的声学模型，每一帧输入都...

先行者叮咚音箱的出师不利，更是加重了其它人的观望心态。真正让众多玩家从观望转为积极参与的转折点是逐步曝光的Echo销量，近千万的美国销量让整个世界震惊。这是智能设备从未达到过的高点，在Echo以前除了AppleWatch与手环，像恒温器、摄像头这样的产品突破百万销量已是惊人表现。这种销量以及智能音箱的AI属性促使下半年，国内各大巨头几乎是同时转度，积极打造自己的智能音箱。未来，回看整个发展历程，是一个明确的分界点。在此之前，全行业是突飞猛进，之后则开始进入对细节领域渗透和打磨的阶段，人们关注的焦点也不再是单纯的技术指标，而是回归到体验，回归到一种“新的交互方式到底能给我们带来什么价...

3）上述两个问题的共性是目前的深度学习用到了语音信号各个频带的能量信息，而忽略了语音信号的相位信息，尤其是对于多通道而言，如何让深度学习更好的利用相位信息可能是未来的一个方向。（4）另外，在较少数据量的情况下，如何通过迁移学习得到一个好的声学模型也是研究的热点方向。例如方言识别，若有一个比较好的普通话声学模型，如何利用少量的方言数据得到一个好的方言声学模型，如果做到这点将极大扩展语音识别的应用范畴。这方面已经取得了一些进展，但更多的是一些训练技巧，距离目标还有一定差距。（5）语音识别的目的是让机器可以理解人类，因此转换成文字并不是终的目的。如何将语音识别和语义理解结合起来可能是未来...

语音识别自半个世纪前诞生以来，一直处于不温不火的状态，直到2009年深度学习技术的长足发展才使得语音识别的精度提高，虽然还无法进行无限制领域、无限制人群的应用，但也在大多数场景中提供了一种便利高效的沟通方式。本篇文章将从技术和产业两个角度来回顾一下语音识别发展的历程和现状，并分析一些未来趋势，希望能帮助更多年轻技术人员了解语音行业，并能产生兴趣投身于这个行业。语音识别，通常称为自动语音识别，英文是AutomaticSpeechRecognition，缩写为ASR，主要是将人类语音中的词汇内容转换为计算机可读的输入，一般都是可以理解的文本内容，也有可能是二进制编码或者字符序列。但是，...

DTW）技术基本成熟，特别提出了矢量量化（Vec⁃torQuantization，VQ）和隐马尔可夫模型（HiddenMar⁃kovModel，HMM）理论。20世纪80年代，语音识别任务开始从孤立词、连接词的识别转向大词汇量、非特定人、连续语音的识别，识别算法也从传统的基于标准模板匹配的方法转向基于统计模型的方法。在声学模型方面，由于HMM能够很好的描述语音时变性和平稳性，开始被应用于大词汇量连续语音识别（LargeVocabularyContinousSpeechRecognition，LVCSR）的声学建模；在语言模型方面，以N元文法的统计语言模型开始应用于语音识别系统。在这一阶...

将匹配度高的识别结果提供给用户。ASR技术已经被应用到各种智能终端，为人们提供了一种崭新的人机交互体验，但多数都是基于在线引擎实现。本文针对离线网络环境，结合特定领域内的应用场景，提出了一套实用性强，成本较低的语音识别解决方案，实现非特定人连续语音识别功能。第二章本文从方案的主要功能模块入手，对涉及到的关键要素进行详细的分析描述，同时对实现过程中的关键事项进行具体分析，并提出应对措施。第三章根据方案设计语音拨号软件，并对语音拨号软件的功能进行科学的测试验证。1低成本的语音识别解决方案（1）主要功能划分在特定领域内的语音识别，主要以命令发布为主，以快捷实现人机交互为目的。比如在电话通信领...

LSTM)的循环神经网络RNN，能够通过遗忘门和输出门忘记部分信息来解决梯度消失的问题。由LSTM也衍生出了许多变体，较为常用的是门控循环单元(GatedRecurrentUnit，GRU)，在训练数据很大的情况下GRU相比LSTM参数更少，因此更容易收敛，从而能节省很多时间。LSTM及其变体使得识别效果再次得到提升，尤其是在近场的语音识别任务上达到了可以满足人们日常生活的标准。另外，时延神经网络(TimeDelayNeuralNetwork，TDNN)也获得了不错的识别效果，它可以适应语音的动态时域变化，能够学习到特征之间的时序依赖。深度学习技术在近十几年中，一直保持着飞速发展的状态...

另一方面，与业界对语音识别的期望过高有关，实际上语音识别与键盘、鼠标或触摸屏等应是融合关系，而非替代关系。深度学习技术自2009年兴起之后，已经取得了长足进步。语音识别的精度和速度取决于实际应用环境，但在安静环境、标准口音、常见词汇场景下的语音识别率已经超过95%，意味着具备了与人类相仿的语言识别能力，而这也是语音识别技术当前发展比较火热的原因。随着技术的发展，现在口音、方言、噪声等场景下的语音识别也达到了可用状态，特别是远场语音识别已经随着智能音箱的兴起成为全球消费电子领域应用为成功的技术之一。由于语音交互提供了更自然、更便利、更高效的沟通形式，语音必定将成为未来主要的人机互动接...

没有任何一个公司可以全线打造所有的产品。语音识别的产业趋势当语音产业需求四处开花的同时，行业的发展速度反过来会受限于平台服务商的供给能力。跳出具体案例来看，行业下一步发展的本质逻辑是：在具体每个点的投入产出是否达到一个普遍接受的界限。离这个界限越近，行业就越会接近滚雪球式发展的临界点，否则整体增速就会相对平缓。不管是家居、金融、教育或者其他场景，如果解决问题都是非常高投入并且长周期的事情，那对此承担成本的一方就会犹豫，这相当于试错成本过高。如果投入后，没有可感知的新体验或者销量促进，那对此承担成本的一方也会犹豫，显然这会影响值不值得上的判断。而这两个事情，归根结底都必须由平台方解决，产...

还可能存在语种混杂现象，如中英混杂(尤其是城市白领)、普通话与方言混杂，但商业机构在这方面的投入还不多，对于中英混杂语音一般*能识别简单的英文词汇(如"你家Wi-Fi密码是多少")，因此如何有效提升多语种识别的准确率，也是当前语音识别技术面临的挑战之一。语音识别建模方法语音识别建模方法主要分为模板匹配、统计模型和深度模型几种类型，以下分别介绍DTW、GMM-HMM、DNN-HMM和端到端模型。往往会因为语速、语调等差异导致这个词的发音特征和时间长短各不相同。这样就造成通过采样得到的语音数据在时间轴上无法对齐的情况。如果时间序列无法对齐，那么传统的欧氏距离是无法有效地衡量出这两个序列间真...

3）上述两个问题的共性是目前的深度学习用到了语音信号各个频带的能量信息，而忽略了语音信号的相位信息，尤其是对于多通道而言，如何让深度学习更好的利用相位信息可能是未来的一个方向。（4）另外，在较少数据量的情况下，如何通过迁移学习得到一个好的声学模型也是研究的热点方向。例如方言识别，若有一个比较好的普通话声学模型，如何利用少量的方言数据得到一个好的方言声学模型，如果做到这点将极大扩展语音识别的应用范畴。这方面已经取得了一些进展，但更多的是一些训练技巧，距离目标还有一定差距。（5）语音识别的目的是让机器可以理解人类，因此转换成文字并不是终的目的。如何将语音识别和语义理解结合起来可能是未来...

MarkGales和SteveYoung在2007年对HMM在语音识别中的应用做了详细阐述。随着统计模型的成功应用，HMM开始了对语音识别数十年的统治，直到现今仍被看作是领域内的主流技术。在DARPA的语音研究计划的资助下，又诞生了一批的语音识别系统，其中包括李开复()在卡耐基梅隆大学攻读博士学位时开发的SPHINX系统。该系统也是基于统计模型的非特定说话人连续语音识别系统，其采用了如下技术：①用HMM对语音状态的转移概率建模；②用高斯混合模型(GaussianMixtureModel，GMM)对语音状态的观察值概率建模。这种把上述二者相结合的方法，称为高斯混合模型-隐马尔可夫模型(G...

在过去功能型操作系统的打造过程中，国内的程序员们更多的是使用者的角色，但智能型操作系统虽然也可以参照其他，但这次必须自己来从头打造完整的系统。（国外巨头不管在中文相关的技术上还是内容整合上事实上都非常薄弱，不存在国内市场的可能性）随着平台服务商两边的问题解决的越来越好，基础的计算模式则会逐渐发生改变，人们的数据消费模式会与不同。个人的计算设备（当前主要是手机、笔记本、Pad）会根据不同场景进一步分化。比如在车上、家里、酒店、工作场景、路上、业务办理等会根据地点和业务进行分化。但分化的同时背后的服务则是统一的，每个人可以自由的根据场景做设备的迁移，背后的服务虽然会针对不同的场景进行优...

CNN本质上也可以看作是从语音信号中不断抽取特征的一个过程。CNN相比于传统的DNN模型，在相同性能情况下，前者的参数量更少。综上所述，对于建模能力来说，DNN适合特征映射到空间，LSTM具有长短时记忆能力，CNN擅长减少语音信号的多样性，因此一个好的语音识别系统是这些网络的组合。端到端时代语音识别的端到端方法主要是代价函数发生了变化，但神经网络的模型结构并没有太大变化。总体来说，端到端技术解决了输入序列的长度远大于输出序列长度的问题。端到端技术主要分成两类：一类是CTC方法，另一类是Sequence-to-Sequence方法。传统语音识别DNN-HMM架构里的声学模型，每一帧输...

在过去功能型操作系统的打造过程中，国内的程序员们更多的是使用者的角色，但智能型操作系统虽然也可以参照其他，但这次必须自己来从头打造完整的系统。（国外巨头不管在中文相关的技术上还是内容整合上事实上都非常薄弱，不存在国内市场的可能性）随着平台服务商两边的问题解决的越来越好，基础的计算模式则会逐渐发生改变，人们的数据消费模式会与不同。个人的计算设备（当前主要是手机、笔记本、Pad）会根据不同场景进一步分化。比如在车上、家里、酒店、工作场景、路上、业务办理等会根据地点和业务进行分化。但分化的同时背后的服务则是统一的，每个人可以自由的根据场景做设备的迁移，背后的服务虽然会针对不同的场景进行优...

传统语音识别系统的发音词典、声学模型和语言模型三大组件被融合为一个E2E模型，直接实现输入语音到输出文本的转换，得到终的识别结果。E2E模型06语音识别开源工具HTK(HMMToolkit)是一个专门用于建立和处理HMM的实验工具包，由剑桥大学的SteveYoung等人开发，非常适合GMM-HMM系统的搭建。Kaldi是一个开源的语音识别工具箱，它是基于C++编写的，可以在Windows和UNIX平台上编译，主要由DanielPovey博士在维护。Kaldi适合DNN-HMM系统(包括Chain模型)的搭建，支持TDNN/TDNN-F等模型。其基于有限状态转换器(FST)进行训练和解码...

该芯片集成了语音识别处理器和一些外部电路，包括A／D、D／A转换器、麦克风接口、声音输出接口等，而且可以播放MP3。不需要外接任何的辅助芯片如FLASH，RAM等，直接集成到产品中即可以实现语音识别、声控、人机对话功能。MCU通信采用SPI总线方式，时钟不能超过1．5MHz。麦克风工作电路，音频输出只需将扬声器连接到SPOP和SPON即可。使用SPI总线方式时，LD3320的MD要设为高电平，SPIS设为低电平。SPI总线的引脚有SDI，SDO，SDCK以及SCS。INTB为中断端口，当有识别结果或MP3数据不足时，会触发中断，通知MCU处理。RSTB引脚是LD3320复位端，低电平有...

Sequence-to-Sequence方法原来主要应用于机器翻译领域。2017年，Google将其应用于语音识别领域，取得了非常好的效果，将词错误率降低至。Google提出新系统的框架由三个部分组成：Encoder编码器组件，它和标准的声学模型相似，输入的是语音信号的时频特征；经过一系列神经网络，映射成高级特征henc，然后传递给Attention组件，其使用henc特征学习输入x和预测子单元之间的对齐方式，子单元可以是一个音素或一个字。**后，attention模块的输出传递给Decoder，生成一系列假设词的概率分布，类似于传统的语言模型。端到端技术的突破，不再需要HMM来描述音...

先行者叮咚音箱的出师不利，更是加重了其它人的观望心态。真正让众多玩家从观望转为积极参与的转折点是逐步曝光的Echo销量，近千万的美国销量让整个世界震惊。这是智能设备从未达到过的高点，在Echo以前除了AppleWatch与手环，像恒温器、摄像头这样的产品突破百万销量已是惊人表现。这种销量以及智能音箱的AI属性促使下半年，国内各大巨头几乎是同时转度，积极打造自己的智能音箱。未来，回看整个发展历程，是一个明确的分界点。在此之前，全行业是突飞猛进，之后则开始进入对细节领域渗透和打磨的阶段，人们关注的焦点也不再是单纯的技术指标，而是回归到体验，回归到一种“新的交互方式到底能给我们带来什么价...

亚马逊的Echo音箱刚开始推出的两三年，国内的智能音箱市场还不温不火，不为消费者所接受，因此销量非常有限。但自2017年以来，智能家居逐渐普及，音箱市场开始火热，为抢占语音入口，阿里巴巴、百度、小米、华为等大公司纷纷推出了各自的智能音箱。据Canalys报告，2019年第1季度中国市场智能音箱出货量全球占比51%，超过美国，成为全球*大的智能音箱市场。据奥维云网(AVC)数据显示，2019年上半年中国智能音箱市场销量为1556万台，同比增长233%。随着语音市场的扩大，国内涌现出一批具有强大竞争力的语音公司和研究团队，包括云知声、思必驰、出门问问、声智科技、北科瑞声、天聪智能等。他...