LD3320的嵌入式语音识别系统的应用

摘要&＃xff1a;语音交互系统是比较人性化的人机操作界面&＃xff0c;它需要语音识别系统的支持。LD3320就是这样一款语音识别芯片。介绍了该芯片的工作原理及应用&＃xff0c;给出了LD3320与微处理器的硬件接口电路及软件程序。随着MCU的不断出现&＃xff0c;以MCU为的嵌入式语音交互系统会有非常好的应用前景。

1 概述

在现代社会&＃xff0c;"懒人科技"大行其道。当面临众多繁琐的按键操作和菜单选择的时候&＃xff0c;简单地说出指令&＃xff0c;是有人情味的人机操作界面。让身边的各种电子设备可"听从"人类的语音&＃xff0c;是从电影"星球大战"就开始的科技发展目标。虽然目前的科技还不能做到让计算机完全理解人类的所有自然语音&＃xff0c;但是可以在一定程度上实现这个梦想。

2 特定人语音识别技术及原理

特定人语音识别&＃xff08;ASR,Auto Speech Recognition&＃xff09;技术是基于"关键词语列表"的识别技术&＃xff0c;它是对大量的语音数据&＃xff08;相当于对数千人采集的数万小时的有效声音数据&＃xff09;经语言学家语音模型分析&＃xff0c;建立数学模型&＃xff0c;并经过反复训练提取基元语音的细节特征&＃xff0c;以及提取各基元间的特征差异&＃xff0c;得到在统计概率化意义上的各个基元语音特征&＃xff0c;才由资深工程师将算法以及语音模型转换成硬件芯片并应用在嵌入式系统中。

ASR技术每次识别的过程就是把用户说出的语音内容&＃xff0c;通过频谱转换为语音特征&＃xff0c;再将这个转换后的语音特征和"关键词语列表"中的条目一一进行匹配&＃xff0c;匹配的一条即作为识别结果。比如ASR技术在语音控制的手机应用中&＃xff0c;这个"关键词语列表"的内容就是电话本中的人名、手机的菜单命令或手机存储卡中的歌曲名字。不论这个列表的条目内容是什么&＃xff0c;只需要用户设置相关的寄存器&＃xff0c;就可以把相应的待识别条目内容以字符形式传递给识别引擎。

由此可见&＃xff0c;语音识别芯片完成的工作就是&＃xff1a;把MIC&＃xff08;麦克风&＃xff09;输入的声音进行频谱分析后提取语音特征&＃xff0c;再和关键词语列表中的关键词语进行对比匹配&＃xff0c;找出得分的关键词语作为识别结果输出。

通常基于ASR技术的语音识别芯片能在两种情况下给出识别结果&＃xff1a;

①外部送入预定时间的语音数据&＃xff08;比如5 s的语音数据&＃xff09;&＃xff0c;芯片对这些语音数据运算分析后&＃xff0c;给出识别结果。

②外部送入语音数据流&＃xff0c;语音识别芯片通过端点检测&＃xff08;VAD,Voice Activity Detection&＃xff09;技术检测出用户停止说话&＃xff0c;把用户开始说话到停止说话之间的语音数据进行运算分析后&＃xff0c;给出识别结果。

对于种情况&＃xff0c;可以理解为设定了一个定时录音&＃xff08;如5 s的语音数据&＃xff09;&＃xff0c;芯片在5 s后会停止把声音送入识别引擎&＃xff0c;并且根据已送入引擎的语音数据计算出识别结果。

对于第二种情况&＃xff0c;需要了解VAD的工作原理&＃xff1a;VAD技术是在一段语音数据流中&＃xff0c;判断出哪个时间点是人声音的开始&＃xff0c;哪个时间点是人声音的结束。判断的依据是&＃xff0c;在背景声音的基础上有了语音发音&＃xff0c;则视为声音的开始。而后&＃xff0c;检测到一段持续时间的背景音&＃xff08;比如600 ms&＃xff09;&＃xff0c;则视为人声说话结束。通过VAD判断出人声说话的区域后&＃xff0c;语音识别芯片会把这期间的声音数据进行识别处理&＃xff0c;计算出识别结果。

除了以上两种情况外&＃xff0c;语音识别算法无法"主动"地判断出是否识别出了一个结果。这是因为&＃xff0c;在计算过程中的任何时刻&＃xff0c;语音识别器都会对已送人识别芯片的声音数据进行分析&＃xff0c;并根据匹配程度为识别列表中的关键词语进行打分&＃xff0c;匹配的打分。但是&＃xff0c;由于识别算法不知道用户后面是否还继续说话&＃xff0c;所以无法主动地判断已经识别出的结果。

3 语音识别芯片LD3320的工作原理

3.1 语音识别系统原理结构

LD3320语音识别芯片采用的就是ASR技术&＃xff0c;图1就是由LD3320和单片机&＃xff08;或嵌入式系统&＃xff09;组成的语音识别系统原理框图。图中给出了LD3320的内部原理结构&＃xff0c;本文中选用的MCU是STC10L08XE单片机。

图1 语音识别系统原理框图

语音识别芯片LD3320是ICRoute公司的产品&＃xff0c;它采用ASR技术&＃xff0c;提供了一种脱离按键、键盘、鼠标、触摸屏等GUI操作方式且基于语音的用户界面VUI&＃xff08;Voice User Interface&＃xff09;&＃xff0c;使得用户对该系统的操作更简单、快速和自然。

用户只需要把识别的关键词语以字符串的形式传送进芯片&＃xff0c;即可以在下次识别中立即生效。比如&＃xff0c;用户在51等主控MCU的编程中&＃xff0c;简单地通过设置芯片的寄存器&＃xff0c;把诸如"你好"这样的识别关键词语的内容动态地传入芯片中&＃xff0c;芯片就可以识别所设定的关键词语了。每个关键词语可以是单字、词组、短句或者任何的中文发音的组合。基于LD3320的语音识别系统可以随着使用流程&＃xff0c;在运行时动态地更改关键词语列表的内容&＃xff0c;这样可以用一个系统支持多种不同的场景&＃xff0c;同时也不需要用户作任何的录音训练。

3.2 LD3320的用户使用模式

LD3320有两种用户使用模式&＃xff0c;即"触发识别模式"和"循环识别模式".用户可以通过编程&＃xff0c;设置两种不同的用户使用模式。

触发识别模式&＃xff1a;系统的主控MCU在接收到外界一个触发后&＃xff08;比如用户按动某个按键&＃xff09;&＃xff0c;启动LD3320芯片的一个定时识别过程&＃xff08;比如5 s&＃xff09;&＃xff0c;要求用户在这个定时过程中说出要识别的语音关键词语。这个过程结束后&＃xff0c;需要用户再次触发才能再次启动一个识别过程。

循环识别模式&＃xff1a;系统的主控MCU反复启动识别过程。如果没有人说话就没有识别结果&＃xff0c;则每次识别过程的定时到时后再启动一个识别过程&＃xff1b;如果有识别结果&＃xff0c;则根据识别作相应处理后&＃xff08;比如播放某个声音作为回答&＃xff09;再启动一个识别过程。

4 语音识别系统软硬件设计

4.1 硬件系统设计

由图l可知&＃xff0c;由LD3320组成的语音识别系统硬件有单片机&＃xff08;或嵌入式系统&＃xff09;及LD33202.图2和图3分别是由单片机STC10L08XE构成的主控芯片和由LD3320A构成的语音识别主系统。

图2 STC10L08XE构成的主控芯片

图3 LD3320A构成的语音识别主系统

4.2 软件系统设计

语音识别的操作顺序是&＃xff1a;先进行语音识别的初始化&＃xff0c;然后写入识别列表&＃xff0c;系统即开始进行语音识别&＃xff0c;并准备好中断响应函数&＃xff0c;打开中断允许位。这里如果不用中断方式&＃xff0c;也可以通过查询方式工作。在"开始识别"后&＃xff0c;读取寄存器B2H的值&＃xff0c;如果为21H就表示有识别结果产生。

下面是语音识别的初始化程序段&＃xff0c;按照以下序列来设置寄存器&＃xff1a;

初始化后是写入识别列表。识别列表的规则是&＃xff1a;每个识别条目对应一个特定的编号&＃xff08;1个字节&＃xff09;&＃xff0c;不同识别条目的编号可以相同&＃xff0c;而且不用连续。LD3320芯片多支持50个识别条目&＃xff0c;每个识别条目是标准普通话的汉语拼音&＃xff08;小写&＃xff09;&＃xff0c;每2个字&＃xff08;汉语拼音&＃xff09;之间用1个空格间隔。表1是一个简单的例子。

图4是由LD3320组成的语音识别系统主程序流程&＃xff0c;图5是语音识别系统中断服务程序流程。

图4 语音识别系统主程序流程图

图5 语音识别系统中断程序流程

5 声控电视遥控器

声控电视遥控器有用的地方是&＃xff0c;在更换频道时可以直接说出频道名称&＃xff0c;而不是去记忆频道名称和频道数字的联系。同时&＃xff0c;在使用电视遥控器时&＃xff0c;遥控器是用电池工作&＃xff0c;不能让识别芯片一直处于工作状态。因此在设计时&＃xff0c;可以在遥控器上设置一个大一点的按键&＃xff0c;用户在使用时&＃xff0c;按一下这个按键&＃xff0c;启动LD3320语音识别芯片&＃xff0c;此时可以播放一声"嘀"的提示音&＃xff0c;然后在限定的时间内&＃xff08;如5s&＃xff09;&＃xff0c;接收用户的语音命令&＃xff0c;并给出识别结果。比如用户说"体育台",识别芯片把识别结果提供给遥控器的主控MCU.随后遥控器的主控MCU就根据事先设定好的对应关系&＃xff0c;发出对应频道的红外编码&＃xff0c;实现换台。可以不加确认过程直接换台。图6为声控电视遥控器工作流程。

图6 声控电视遥控器工作流程

结语

这种语音识别系统也容易引起误识别&＃xff0c;如当用户说的内容不在识别列表内时&＃xff0c;必然会引起误识别。为了克服这些缺点&＃xff0c;降低误识别率&＃xff0c;可在设定好要识别的关键词语后&＃xff0c;再添加一些与识别列表内的单词有联系的任意其他词汇&＃xff0c;用来吸收错误识别&＃xff0c;从而达到降低误识别率的目的。

由LD3320组成的语音识别系统有很广泛的应用&＃xff0c;如语音控制的点歌系统、语音控制的手机、音控智能导航仪、音控智能家电产品等。