【应用】瑞萨电子通用MCU RA系列结合成本优化VUI方案，兼顾语音命令系统的高性能及低功耗需求
随着物联网和人工智能的快速发展，语音通信被日益普及。被先进的语音分析技术加持的智能端点设备，能提高产品的用户体验，由此在新的生态系统中也催生出一批新公司。这些方案支持在线或者离线，能减少对网络连接始终在线的依赖，也能解决消费和工业应用中实时语音分析所面临的挑战。随着心理语言学数据分析的不断进步，语音数据建模可以对说话者的情绪、态度和意图做出推断。语音是人类交流中最自然的方式，那么基于语音识别和语音分析的技术也能进一步帮助产品识别使用者的意图。
VUIs应用中的挑战
语音用户界面(VUI)允许用户通过语音命令与系统进行交互。尽管VUI在广泛的应用中很受欢迎，但它也有其局限性。
● 声音质量差
持续的背景噪音导致声音质量不稳定，这给语音识别带来了挑战。物联网中应用中的语音控制器只有在声音清晰的情况下才能完美工作，这在嘈杂的环境下是不可能的。要能支持多种语言和不同的口音，并且能从背景噪音中抓取出有效的语音，这样的语音助手产品才能落地。
● 功耗
语音命令系统需要保持至少一个麦克风以及识别唤醒词的处理器一直处于工作状态。
● 实时处理
拥塞的网络会导致命令响应的延迟，从而影响用户体验。这可以通过分布式端点智能来解决，它具有实时处理语音命令而不依赖于云端系统的能力。
● 精确度和抗扰度
在设计VUI系统时，语音识别的准确性和对背景噪声的抗扰度始终是需要主要考虑的因素。因为可能有多个声源，包括室内外噪声和来自房间的回声等等。提取命令声源、消除回声和降低背景噪声需要复杂的技术，这些技术依赖于多个麦克风、波束成形、回声消除以及噪声抑制。
瑞萨电子（RENESAS）通过使用最先进的微控制器，和来自合作伙伴的智能语音处理算法来应对这些挑战。用户可以由此更容易地在产品中集成高效的语音命令支持。瑞萨电子的通用MCU结合成本优化的VUI方案，能兼顾用户对系统的高性能和低功耗需求。
对语音识别算法强壮性的需求
为了更吸引用户，设备应该具有稳健的语音识别能力。
● 命令识别
支持语音交互的设备，最重要的就是能够从输入的音频信号中识别出语音命令。语音命令识别系统通常由唤醒词激活，然后对后续音频输入进行接收、解释、并转录为文本。该文本才是最终代表用户命令或意图的，设备据此再执行相应任务。
● 语音活动监测
语音活动监测(VAD)将人类语音从非语音和背景噪声中区分出来。由此可以改善系统整体功耗，这样系统无需一直保持在线，从而节省不必要的功耗。VAD算法可以分为四个阶段:
基于瑞萨RA系列 MCU和来自合作伙伴的语音识别中间件的语音命令解决方案提供了强大的降噪技术，有助于确保VAD的准确性。此外，瑞萨还可以实现下述一些关键语音命令功能:
● 关键词识别
关键词识别系统(KWS)是具备语音功能设备的关键特性之一，它识别关键词和关键短语。这些关键词触发并启动端点设备上的识别功能后，设备就可以使用语音来响应接下来的查询。
图:关键词定位神经网络管道
为了提供更好的用户体验，KWS需要具备高度准确的实时响应。瑞萨推出了能够在先进的32位RA微控制器上运行的来自合作伙伴的高性能优化ML模型，包含预先训练好的DNN模型，有益于提高关键字识别时的准确度。
● 声纹识别
顾名思义，就是通过声音识别说话人的身份。声纹识别可以分为文本相关、文本无关和文本提示。为了训练用于声纹识别的DNN，需要获得个人诸如口音、发音、韵律(讲话的节奏)等特征参数。
图: 声纹识别系统图
● 语音/声音 反欺诈
入侵者试图通过伪装成目标对象的声纹来获得对系统的非授权访问。可通过反欺诈软件来保证系统的安全。欺诈攻击通常针对自动声纹确认系统。他们使用语音合成、声音转换等技术或者仅仅通过重新播放记录的语音来生成欺骗性语音样本。这些攻击可以根据它们与ASV系统的交互方式分为直接攻击和间接攻击。
直接攻击——通过麦克风传感器或传输环节进行攻击，也称为物理入侵。
间接攻击——对ASV系统软件的特征提取、模型和决策过程等环节攻击，也称为逻辑攻击。
图:自动声纹验证
● 多语言/口音识别和理解
英语国家的口音识别，由于有大量的训练数据，智能设备的识别过程还是很顺畅的。在非英语母语的国家使用这些智能设备时，由于可用于训练的数据有限，造成语音识别的准确度较低。因为训练数据不足，使得算法很难构建出高准确度的对话模型。
瑞萨电子的VUI合作伙伴方案支持超过44种语言，具有高度可适配性。基于它的智能语音识别设备能用于世界各地。
瑞萨电子向你展示了一个基于先进微控制器，简化语音集成的方案平台。瑞萨电子基于RA MCU和合作伙伴提供的语音命令方案不仅能节省BOM成本、降低延迟、提高安全能力，还提供本地语音触发、命令识别、超强降噪、语音活动检测等多项增值服务模块，并支持多语言功能。除此之外，还有功能齐全的语音解决方案开发套件和基于DNN预训练模型的可运行在端点设备上的中间件。用户可以通过简单的文本输入快速创建语音命令。简而言之，它可以直接使用，也可以根据个人需求进行特性化定制。
- |
- +1 赞 0
- 收藏
- 评论 2
本文由董慧转载自Renesas，原文标题为:让智能产品可以说话，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。
相关推荐
Functional Safety with Added Intelligence
Renesas Electronics has been an active member of several functional safety working groups and has strongly contributed to relevant functional safety standards. Renesas offers a one-stop functional safety solution with its composite wide range of MCUs and related software framework.
【应用】瑞萨推出自我监测血糖仪方案，集成MCU、运放器、数控电位器、传感器及LDO助力健康状况监测
血糖仪用于测量血糖水平，帮助监测健康状况。对于该解决方案，瑞萨电子推出了一系列产品，包括MCU,微控制器,四路通用微功耗RRIO运算放大器,相对温湿度传感器,LDO,单路易失性128抽头数控电位器。
【应用】瑞萨推出具有电力线通信功能的电能表方案，支持硬件包设计，符合G3-PLC联盟标准
瑞萨电子（Renesas）推出具有电力线通信功能的电能表方案。该解决方案结合使用了瑞萨RX651 MCU和CPX3 SoC PLC调制解调器，外加ISL15102线路驱动器，同时与高效的ISL85410/5功率降压转换器相结合，完全符合G3-PLC联盟标准。
世强目前有代理riscv的mcu吗？
世强代理的RISC-V内核MCU厂家越来越多，还在不断增长。 国外厂家有瑞萨 【产品】瑞萨推出全新RISC-V MCU R9A02G020，优化先进电机控制系统设计和降低用户开发成本 国内厂家介绍如下： 广芯微内置32位RISC-V内核的PD SoC芯片UM3506，最高主频33MHz 全球首家全栈自研RISC-V内核的通讯接口芯片/全栈MCU供应商沁恒（WCH） RISC-V内核低功耗32位MCU，中移芯昇授权世强先进全线代理 芯昇科技携多款芯片产品亮相ICDIA，助力RISC-V生态发展 先楫半导体提供多系列通用MCU，以开源的RISC-V架构为核心，综合性能达世界领先水平 航顺芯片首次进入胡润全球独角兽榜，已量产中国第一颗M3+RISC-V多核MCU 中微半导体积极推动RISC-V架构安全化、智能化，共筑国产安全芯片生态 博流业界第一款基于RISC-V CPU的WI-FI+BLE双模SoC芯片，打造智慧家居AIoT芯片平台 璇玑CLE系列是核芯互联基于32位RISC-V内核推出的通用嵌入式MCU处理器 方寸微电子加入RISC-V产业联盟，推动安全芯片国产化，打破国外芯片技术垄断
【经验】如何在e2 studio编译环境下生成.bin或者.Hex档
Renesas RA系列MCU需要在e2 studio的编译环境下完成调试，该开发环境是可以支持在线Debug的，但是在调试完成后，需要量产的时候，还是需要生成.bin或者.hex档烧录到MCU里面去，下面来介绍如何在e2 studio的编译环境下生成.bin或者.hex档。
【经验】瑞萨RA系列MCU使用e2 studio的断点调试方法和注意事项
瑞萨RA系列MCU可以使用e2 studio等开发环境进行调试和下载程序，在使用e2 studio时我们经常会遇到一些异常现象，如没有办法下断点进行调试，无法debug观察寄存器状态等，本文将介绍一下e2 studio常见的断点调试方法和注意事项。
32位MCU系列Renesas RA2E3集团
型号- RA FAMILY,RA2,RA4,R7FA2E3053CNE,R7FA2E3053CNH,RA6,R7FA2E3052DNE,RA8,R7FA2E3073CNE,RA2E3 GROUP,RA2E3,R7FA2E3053CFJ,R7FA2E3053CFL,R7FA2E3052DFJ,R7FA2E3073CNH,R7FA2E3052DFL,R7FA2E3072DNE,R7FA2E3072DNH,R7FA2E3073CFL,R7FA2E3072DFJ,R7FA2E3052DNH,R7FA2E3072DFL,R7FA2E3073CFJ
【经验】瑞萨RA系列MCU在Keil开发环境下的开发介绍
本文主要介绍在Keil环境下如何新建瑞萨RA项目工程以及在已存在的RA醒目工程中如何通过图形化工具进行代码的底层配置。
【经验】瑞萨RA系列MCU低功耗唤醒功能测试
瑞萨RA系列MCU低功耗一共有三种模式，本次测试选择时钟为32.76kHZ,使用电容触摸按键唤醒，datasheet上描述芯片常温下功耗为0.55uA，用开发板实测功耗为60uA，经过检测，功耗主要来源于电容电阻，开发板中有一颗电阻功耗在30uA，并具体分析。
【IC】瑞萨推出第一代32位RISC-V CPU内核，CoreMark/MHz性能达到了惊人的3.27
瑞萨电子宣布成功设计、测试并推出基于开放标准RISC-V指令集架构（ISA）的32位CPU内核。新的RISC-V CPU内核将扩充瑞萨现有32位微控制器（MCU）IP产品阵容，包括专有RX产品家族和基于Arm® Cortex®-M架构的RA产品家族。
【经验】瑞萨RA系列USB外设通信功能配置使用说明
USB设备是项目中经常用到的外设，通常作为从机使用，瑞萨RA系列支持USB主从机设备，此文章主要介绍USB外围通信设备类驱动程序（PCDC）相关配置及使用方法。
【技术】瑞萨RA系列如何通过定时器+ELC实现串口通信空闲中断
介绍串口空闲中断主要是在数据接收过程中出现接收不到连续数据的现象时，用来触发给主函数流程的。一般会用在不定长的数据包接收或者需要实时数据接收反应的场合。RA虽然没有集成硬件的串口空闲中断功能，但是可以通过定时器+ELC，在不做任何硬件修改的情况下实现串口通信空闲中断功能。
瑞萨RA2E1系列32位MCU系列
型号- R7FA2E1A9XXLM,FPB-RA2E1,R7FA2E1A5XXFL,R7FA2E1A9XXNH,RA FAMILY,R7FA2E1A5XXFJ,R7FA2E1A9XXFM,R7FA2E1A9XXFL,R7FA2E1A9XXFK,R7FA2E1A5XXLM,R7FA2E1A9XXFJ,RA2E1,R7FA2E1A5XXNH,R7FA2E1A7XXBV,R7FA2E1A5XXNE,EK-RA2E1,R7FA2E1A9XXNE,R7FA2E1A7XXBU,RA2E1 GROUP,RTK7FPA2E1S00001BE,R7FA2E1A7XXFM,R7FA2E1A7XXFL,RA2,R7FA2E1A7XXFK,R7FA2E1A7XXFJ,RTK7EKA2E1S00001BE,R7FA2E1A7XXLM,R7FA2E1A7XXNE,R7FA2E1A7XXNH,R7FA2E1A5XXBV,RA2 SERIES,R7FA2E1A9XXBV,R7FA2E1A9XXBU
【选型】Renesas（瑞萨电子） RL78系列16位MCU选型指南
目录- RL78家族特点 通用型MCU LCD MCU ASSP 智能模拟 汽车 开发环境&开发工具 解决方案 产品一览表 封装
型号- R5F104PFAFA,R5F101PHAFB,R5F104PFAFB,R5F10BAFLSP,R5F101PHAFA,R5F113TJLFB,R5F110MEAFB,R5F10JGCAFB,R5F10AACLSP,R5F10AGCLNA,R5F111MHAFB,R5F10WMGAFA,R5F10WMGAFB,R5F101ACASP,R5F104JHAFA,R5F101JJAFA,R5F104BDANA,R5F101BFANA,R5F10PADLSP,R5F1006EASP,R5F101FDAFP,R5F100LJAFA,R5F100LJAFB,R5F100JGAFA,R5F101LCABG,R5F104CFALA,R5F1018CALA,R5F100BCANA,R5F10Y14ASP,R5F100FLAFP,RL78-S2,R5F100EHANA,R5F11MMDAFB,R5F10PGFLFB,R5F100MKAFB,R5F100MKAFA,R5F100CEALA,R5F10BLELFB,R5F100FAAFP,R5F104AAASP,R5F100SJAFB,RL78/F1X,R5F113GLLFB,R5F10BGFLNA,R5F10WLEAFB,R5F104GCAFB,R5F10KGCANA,R5F10WLEAFA,R5F101GCANA,R5F110PJAFB,R5F11BGEAFB,R5F10369ASP,R5F10BMFLFB,R5F100EGANA,R5F113MKLFB,R5F104LJAFP,R5F100GJANA,R5F10278ANA,R5F100MLAFB,R5F1176AGSP,R5F11FLLANA,R5F100FKAFP,R5F100CFALA,R5F10AGELFB,R5F111NGALA,R5F104LJAFA,R5F104LJAFB,R5F10JBCANA,R5F104LHALA,R5F100MLAFA,R5F101SLAFB,R5F101GFAFB,R5F10ALCLFB,R5F10WLFAFB,R5F104BFAFP,R5F104GDAFB,R5F10WLFAFA,R5F11EF8AFP,R5F10PPHLFB,R5F104GLANA,R5F10BGGLNA,R5F1017AANA,R5F10AADLSP,R5F10RFCAFP,R5F110MFAFB,R5F101LLAFA,R5F104JGAFA,R5F104BCANA,R5F1006DASP,R5F10NLE/G,R5F1008AALA,R5F101FEAFP,R5F110NEALA,R5F100AAASP,R5F104GAANA,R5F10RF8AFP,R5F11EAAASP,R5F100JHAFA,R5F10MPEDFB,R5F100BDANA,R5F104CEALA,R5F104MKAFA,R5F10MPGDFB,R5F104MKAFB,R5F10PGELFB,R5F113GKLNA,R5F11MMEAFB,R5F100GLANA,R5F10367ASP,R5F100MJAFA,R5F100MJAFB,R5F10AGGLFB,R5F117BAGFP,R5F10NPJDFB,R5F100LJABG,R5F100GDAFB,R5F104LLAFB,R5F104LLAFA,R5F104LJALA,R5F100SKAFB,R5F101GDANA,R5F10PPJLFB,R5F101PGAFA,R5F10277ANA,R5F10BAELSP,R5F113TKLFB,R5F101PGAFB,R5F101LEABG,R5F10AGDLNA,R5F100GAANA,R5F10NMJ/G,R5F107AEMSP,RL78/G10,R5F101BEANA,RL78/G11,R5F10PMFLFB,RL78/G12,RL78/G13,RL78/G14,R5F101GGAFB,R5F104BEAFP,R5F104FCAFP,R5F101CGALA,R5F100JFAFA,R5F113TLLFB,R5F101LDABG,R5F10BADLSP,R5F11BLCAFB,RL78/G1A,RL78/G1C,RL78/G1D,RL78/G1E,RL78/G1F,RL78/G1G,RL78/G1H,R5F117GAGFB,R5F10BLFLFB,R5F101AAASP,R5F10PMELFB,R5F101BDANA,R5F10RLAAFB,R5F101FFAFP,R5F10AAELSP,R5F10EGAAFB,R5F100BEANA,R5F101CFALA,R5F104FDAFP,R5F10RLAAFA,R5F10Y16ASP,R5F104CDALA,R5F10368ASP,R5F10PGDLFB,R5F104MLAFB,R5F10BMGLFB,R5F11MMFAFB,R5F100GKANA,R5F104MLAFA,R5F101JKAFA,R5F101LCAFA,R5F11768GSP,R5F101LCAFB,R5F100CGALA,R5F10AGFLFB,R5F111NHALA,R5F101GEANA,R5F110PHAFB,R5F100GCAFB,R5F104LKAFB,RL78/F12,RL78/F13,R5F101SKAFB,R5F11B7CANA,R5F11CBCGNA,RL78/F14,R5F104LKAFA,RL78/F15,R5F100SLAFB,R5F1018DALA,R5F104GEAFB,RL78/G1X,R5F10WLGAFA,R5F10WLGAFB,R5F11BGCAFB,R5F101EHANA,R5F101LFABG,R5F104LHAFP,R5F10FMCAFB,R5F10Y46ASP,R5F11BLEAFB,R5F100LCABG,R5F104BGANA,R5F10AGCLFB,R5F10JGCANA,R5F104JEAFA,R5F110PGAFB,R5F104LHAFB,R5F104LHAFA,R5F100PHAFA,R5F100PHAFB,R5F101GHAFB,R5F104LFALA,R5F10PPFLFB,R5F10268ASP,R5F113TGLFB,R5F10BGCLNA,R5F104FJAFP,R5F100JJAFA,R5F113GLLNA,R5F104MJAFA,R5F100ACASP,R5F104MJAFB,R5F10ABDLNA,R5F102A8ASP,R5F1016EASP,R5F101LEAFB,R5F101LEAFA,R5F101PKAFA,R5F101PKAFB,R5F100FDAFP,R5F111NEALA,R5F10PGFLNA,R5F101FGAFP,R5F100GEAFB,R5F10BGFLFB,R5F101MFAFA,R5F104EFANA,R5F101MFAFB,R5F11MPFAFB,R5F100BFANA,R5F104GKAFB,R5F10E8DALA,R5F10AAALSP,RL78/I1A,RL78/I1B,RL78/I1C,RL78/I1D,R5F101LDAFA,RL78/I1E,R5F104ACASP,R5F101LDAFB,R5F101JLAFA,R5F101GFANA,R5F101EGANA,R5F11MPEAFB,R5F104GLAFB,R5F104GAAFB,R5F104LGAFP,R5F10RBAAFP,R5F10WLCAFA,R5F10WLCAFB,R5F111MEAFB,R5F10PGHLFB,R5F113LLLFB,R5F101BCANA,R5F104LGAFB,R5F107ACMSP,R5F104BFANA,R5F10WMDAFB,R5F11CBCMNA,R5F100FCAFP,R5F104LGAFA,R5F10WMDAFA,R5F100PGAFA,R5F100SHAFB,R5F104LEALA,R5F100PGAFB,R5F10PPELFB,R5F101CEALA,R5F10BGDLNA,R5F113THLFB,RL78/I1X,R5F100ADASP,R5F10ABELNA,R5F10WLDAFB,RL78/L1A,R5F100GDANA,R5F11FLJANA,R5F101LFAFB,RL78/L1C,R5F100FEAFP,R5F100EAANA,R5F101LFAFA,R5F10PGELNA,R5F101FHAFP,R5F10BGGLFB,R5F117BAGNA,R5F101CDALA,R5F11MPGAFB,R5F10RLCAFA,R5F104EGANA,R5F10RLCAFB,R5F10WLDAFA,R5F100BGANA,R5F11EFAAFP,R5F100LKAFA,R5F11EA8ASP,R5F111MGAFB,R5F104GJANA,R5F10AGDLFB,R5F10EGCAFB,R5F10WMFAFA,R5F10WMFAFB,RL78/L1E,R5F10MMEDFB,R5F10BLDLFB,R5F111NFALA,R5F101GGANA,R5F11BCEALA,R5F104LGALA,R5F1007EANA,R5F10267ASP,R5F100LKAFB,R5F110PFAFB,R5F104CGALA,R5F10BMELFB,R5F10PPGLFB,RL78/L1X,R5F101EFANA,R5F10PAELSP,R5F100LLAFB,R5F10AGALNA,R5F10PGGLFB,R5F111MFAFB,R5F100LLAFA,R5F104EHANA,R5F104GKANA,R5F102A9ASP,R5F113LKLFB,RY7011A0000DZ00,R5F10EGDAFB,R5F101PJAFA,R5F101PJAFB,R5F10A6ALSP,R5F10KBCAFP,R5F10WMEAFA,R5F104JFAFA,R5F10BLCLFB,R5F117BCGFP,R5F104BEANA,R5F1006CASP,R5F100GFAFB,R5F101GJAFB,R5F10WMEAFB,R5F100PFAFB,R5F101MGAFB,R5F10BGELNA,R5F100PFAFA,R5F10266ASP,R5F10RLAANB,R5F110PEAFB,R5F1018AALA,R5F101MGAFA,R5F100AEASP,R5F10EGAANA,R5F101LGABG,R5F10E8EALA,R5F10FMDAFB,R5F10Y47ASP,R5F104BGAFP,R5F10279ANA,R5F10BAGLSP,R5F113MLLFB,R5F10PGDLNA,R5F100GCANA,R5F111PJAFB,R5F11FLKANA,R5F11BBEAFP,R5F101JCAFA,R5F1026AASP,R5F10RJAAFA,R5F104FAAFP,R5F10NMJDFB,R5F107DEMSP,R5F110NJALA,R5F100MFAFB,R5F100MFAFA,R5F1037AANA,R5F1007CANA,R5F111PGAFB,R5F10A6CLSP,R5F10PMJLFB,R5F100GHAFB,R5F10BBDLNA,R5F10BGCLFB,R5F104GFANA,R5F100LFABG,R5F104MGAFB,R5F104MGAFA,R5F101GHANA,R5F104ECANA,R5F104LEAFP,R5F101EEANA,R5F10RBCAFP,R5F104AFASP,R5F104PKAFB,R5F101BAANA,R5F100GEANA,R5F104LEAFA,RL78/G1,R5F104LEAFB,R5F104FGAFP,R5F101GKAFB,R5F101JEAFA,R5F11BBCAFP,R5
【经验】瑞萨RA调试中使用RTT Viewer，无需单独开启串口调试
在项目调试中我们经常用到串口调试的功能，但串口调试会占用我们的硬件资源，还要外接串口小工具，量产MCU时还要关闭串口功能，使用起来不是那么方便，而在调试瑞萨RA系列MCU的时候，因芯片本身支持JLink调试，在JLink调试工具中就有RTTViewer这个上位机软件，不必在MCU上面单独再开启一个串口调试，如下介绍RTTViewer的连接使用方法：1、首先在RA项目例程中，多数已经加入了这个工具的
电子商城
现货市场
服务
可定制显示屏的尺寸0.96”~15.6”，分辨率80*160~3840*2160，TN/IPS视角，支持RGB、MCU、SPI、MIPI、LVDS、HDMI接口，配套定制玻璃、背光、FPCA/PCBA。
最小起订量： 1000 提交需求>
可烧录IC封装SOP/MSOP/SSOP/TSOP/TSSOP/PLCC/QFP/QFN/MLP/MLF/BGA/CSP/SOT/DFN；IC包装Tray/Tube/Tape；IC厂商不限，交期1-3天。支持IC测试（FT/SLT），管装、托盘装、卷带装包装转换，IC打印标记加工。
最小起订量： 1pcs 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论