传统的人机交互依靠复杂的键盘或按钮来实现,随着科技的发展,一些新型的人机交互方式也随之诞生,带给人们全新的体验。基于语音识别的人机交互方式是目前热门的技术之一。但是语音识别功能算法复杂、计算量大,一般在计算机上实现,即使是嵌入式方面,多数方案也需要运算能力强的ARM或DSP,并且外扩RAM、FLASH等资源,增加了硬件成本,这些特点无疑限制了语音识别技术的应用,尤其是嵌入式领域。本系统采用的主控MCU为Atmel公司的ATMEGA128,语音识别功能则采用ICRoute公司的单芯片LD3320。LD3320内部集成优化过的语音识别算法,无需外部FLASH,RAM资源,可以很好地完成非特定人的语音识别任务。1整体方案设计1.1语音识别原理在计算机系统中,语音信号本身的不确定性、动态性和连续性是语音识别的难点。主流的语音识别技术是基于统计模式识别的基本理论。2.1控制器电路控制器选用Atmel公司生产的ATMEGA128芯片,采用先进的RISC结构,内置128KBFLASH,4KBSRAM,4KBE2PROM等丰富资源。该芯片是业界高性能、低功耗的8位微处理器,并在8位单片机市场有着广泛应用。2.2LD3320语音识别电路LD3320芯片是一款“语音识别”芯片。 语料的标注需要长期的积累和沉淀,大规模语料资源的积累需要被提高到战略高度。上海语音识别平台
汉语的音节由声母、韵母和音调构成,其中音调信息包含在韵母中。所以,汉语音节结构可以简化为:声母+韵母。汉语中有409个无调音节,约1300个有调音节。汉字与汉语音节并不是一一对应的。一个汉字可以对应多个音节,一个音节可对应多个汉字,例如:和——héhèhuóhuòhútián——填甜语音识别过程是个复杂的过程,但其终任务归结为,找到对应观察值序列O的可能的词序列W^。按贝叶斯准则转化为:其中,P(O)与P(W)没有关系,可认为是常量,因此P(W|O)的*大值可转换为P(O|W)和P(W)两项乘积的*大值,di一项P(O|W)由声学模型决定,第二项P(W)由语言模型决定。为了让机器识别语音,首先提取声学特征,然后通过解码器得到状态序列,并转换为对应的识别单元。一般是通过词典将音素序列(如普通话的声母和韵母),转换为词序列,然后用语言模型规整约束,后得到句子识别结果。例如,对"天气很好"进行词序列、音素序列、状态序列的分解,并和观察值序列对应。其中每个音素对应一个HMM,并且其发射状态(深色)对应多帧观察值。人的发音包含双重随机过程,即说什么不确定。怎么说也不确定,很难用简单的模板匹配技术来识别。更合适的方法是用HMM这种统计模型来刻画双重随机过程。上海汽车语音识别语音识别是项融合多学科知识的前沿技术,覆盖了数学与统计学、声学与语言学、计算机与人工智能等基础学科。
自2015年以来,谷歌、亚马逊、百度等公司陆续开始了对CTC模型的研发和使用,并且都获得了不错的性能提升。2014年,基于Attention(注意力机制)的端到端技术在机器翻译领域中得到了广的应用并取得了较好的实验结果,之后很快被大规模商用。于是,JanChorowski在2015年将Attention的应用扩展到了语音识别领域,结果大放异彩。在近的两年里,有一种称为Seq2Seq(SequencetoSequence)的基于Attention的语音识别模型在学术界引起了极大的关注,相关的研究取得了较大的进展。在加拿大召开的国际智能语音领域的会议ICASSP2018上,谷歌公司发表的研究成果显示,在英语语音识别任务上,基于Attention的Seq2Seq模型表现强劲,它的识别结果已经超越了其他语音识别模型。但Attention模型的对齐关系没有先后顺序的限制,完全靠数据驱动得到,对齐的盲目性会导致训练和解码时间过长。而CTC的前向后向算法可以引导输出序列与输入序列按时间顺序对齐。因此CTC和Attention模型各有优势,可把两者结合起来。构建HybridCTC/Attention模型,并采用多任务学习,以取得更好的效果。2017年,Google和多伦多大学提出一种称为Transformer的全新架构,这种架构在Decoder和Encoder中均采用Attention机制。
包括语法词典的构建、语音识别引擎的初始化配置、音频数据的采集控制和基本语义的解析等;应用数据库是用户的数据中心,作为语音识别数据的源头,语音控制模块从中提取用户关键数据,并以此为基础构建本地语法词典;语音识别离线引擎是语音转换为文字的关键模块,支持在离线的情况下,根据本地构建的语法网络,完成非特定人连续语音识别功能,同时具备语音数据前、后端点检测、声音除噪处理、识别门限设置等基本功能;音频采集在本方案中属于辅助模块,具备灵活、便捷的语音控制接口,支持在不同采样要求和采样环境中,对实时音频数据的采集。(2)关键要素分析本方案工作于离线的网络环境中,语音数据的采集、识别和语义的解析等功能都在终端完成,因此设备性能的优化和语音识别的准度尤为重要。在具体的实现过程中,存在以下要素需要重点关注。(1)用户构建的语法文档在引擎系统初始化时,编译成语法网络送往语音识别器,语音识别器根据语音数据的特征信息,在识别网络上进行路径匹配,识别并提取用户语音数据的真实信息,因此语法文档的语法结构是否合理,直接关系到识别准确率的高低;(2)应用数据库是作为语音识别数据的源头,其中的关键数据如果有变化。多人语音识别及离线语音识别也是当前需要重点解决的问题。
Google将其应用于语音识别领域,取得了非常好的效果,将词错误率降低至。如下图所示,Google提出新系统的框架由三个部分组成:Encoder编码器组件,它和标准的声学模型相似,输入的是语音信号的时频特征;经过一系列神经网络,映射成高级特征henc,然后传递给Attention组件,其使用henc特征学习输入x和预测子单元之间的对齐方式,子单元可以是一个音素或一个字。,attention模块的输出传递给Decoder,生成一系列假设词的概率分布,类似于传统的语言模型。端到端技术的突破,不再需要HMM来描述音素内部状态的变化,而是将语音识别的所有模块统一成神经网络模型,使语音识别朝着更简单、更高效、更准确的方向发展。语音识别的技术现状目前,主流语音识别框架还是由3个部分组成:声学模型、语言模型和解码器,有些框架也包括前端处理和后处理。随着各种深度神经网络以及端到端技术的兴起,声学模型是近几年非常热门的方向,业界都纷纷发布自己新的声学模型结构,刷新各个数据库的识别记录。由于中文语音识别的复杂性,国内在声学模型的研究进展相对更快一些,主流方向是更深更复杂的神经网络技术融合端到端技术。2018年,科大讯飞提出深度全序列卷积神经网络(DFCNN)。
语音必定将成为未来主要的人机互动接口之一。甘肃语音识别机
这是一种允许计算机在具有特定限制的两个给定序列(例如时间序列)之间找到比较好匹配的方法。上海语音识别平台
取距离近的样本所对应的词标注为该语音信号的发音。该方法对解决孤立词识别是有效的,但对于大词汇量、非特定人连续语音识别就无能为力。因此,进入80年代后,研究思路发生了重大变化,从传统的基于模板匹配的技术思路开始转向基于统计模型(HMM)的技术思路。HMM的理论基础在1970年前后就已经由Baum等人建立起来,随后由CMU的Baker和IBM的Jelinek等人将其应用到语音识别当中。HMM模型假定一个音素含有3到5个状态,同一状态的发音相对稳定,不同状态间是可以按照一定概率进行跳转;某一状态的特征分布可以用概率模型来描述,使用的模型是GMM。因此GMM-HMM框架中,HMM描述的是语音的短时平稳的动态性,GMM用来描述HMM每一状态内部的发音特征。基于GMM-HMM框架,研究者提出各种改进方法,如结合上下文信息的动态贝叶斯方法、区分性训练方法、自适应训练方法、HMM/NN混合模型方法等。这些方法都对语音识别研究产生了深远影响,并为下一代语音识别技术的产生做好了准备。自上世纪90年代语音识别声学模型的区分性训练准则和模型自适应方法被提出以后,在很长一段内语音识别的发展比较缓慢,语音识别错误率那条线一直没有明显下降。DNN-HMM时代2006年,Hinton提出深度置信网络。
上海语音识别平台