【应用】瑞萨推出了AI摄像头和语音识别整体解决方案,实时在线,多模态架构打造非接触式用户体验

2022-03-14 Renesas
NDP,视觉AI微处理器单元,神经决策处理器,降压稳压器 NDP,视觉AI微处理器单元,神经决策处理器,降压稳压器 NDP,视觉AI微处理器单元,神经决策处理器,降压稳压器 NDP,视觉AI微处理器单元,神经决策处理器,降压稳压器

近年来,智能医疗在全球的发展热度不断提升。随着社会进步,大众对亚健康问题逐渐重视,以及人口老龄化问题不断加剧,人们对于提升医疗技术和健康水平的需求也更加急切。但在实践中却存在医疗资源分配、药物研制周期以及医务人员培养成本等挑战,对于医疗进步的现实需求极大地刺激了AI技术,从而推动了医疗产业变革升级的浪潮。


一旦更加智能的系统问世,人们或许能以更低成本拥有自己的智能健康顾问。之前已有公司开发出情绪识别技术,通过网络摄像头来捕捉、记录人们的表情和声音,并分析判断出人的情绪。情绪识别可以通过高级图像处理或音频数据处理来“读取”人类脸上的表情。


这里的关键设备就是摄像头和语音识别,从而创建结构化数据,再基于云计算和大数据分析,建立更全面的病患数据储备系统。但医学是一个前沿学科,会随时遇到新的问题和疑难杂症,而相关数据的积累需要时间,结构化数据较少,使得算法模型难以快速优化。


结构化数据需要大量的信息搜集,但信息量大,就意味着芯片解码和分析所消耗的算力更大。之前大部分企业都是将视频传上云端进行解耦分析,完成之后再传输回前端,这就导致以后传输带宽和视频解码能力会成为云服务端计算的性能瓶颈,这也是在实际应用场景中往前端和局域端布局的原因。


基于对前端视频技术分析能力要求越来越高,以及集成方面的考虑,RENESAS瑞萨推出了AI摄像头和语音识别解决方案。该方案可以始终保持在线,可通过语音触发,快速将机器从待机模式中激活,以执行目标物识别、面部识别和其他基于视觉的任务,这些均是安防摄像头和其他系统中的关键功能。例如,当用户定义的语音提示驱动激活和系统操作时,基于视觉的AI 识别会跟踪操作人员的行为,并在检测到可疑行为时控制操作或发出警告。该解决方案结合了瑞萨电子RZ/V2M视觉AI微处理器单元MPU)和Syntiant Co. NDP120低功耗、多模态、多功能的神经决策处理器™(NDP),以便提供高级的语音和图像处理功能。


系统框图


系统优势

1、这种多模态架构更易于为基于视觉AI的系统打造非接触式用户体验;

2、将专用的节能芯片用于语音识别,可在加速语音识别的同时降低待机功耗;

3、推动系统开发,后续利于开发独立于视觉AI功能的软件。


通过AI技术能够改善就诊服务,简化就诊流程,可以帮助医院工作人员更高效地处理相关业务,也可以将临床医生的工作时间解放出来进行科研。这些都离不开对人群活动规律的监控、检测和分析,因此系统保持时刻在线、保持强大的AI算力和低功耗很重要。


瑞萨的AI专用硬件IP DRP-AI配置了DRP和AI-MAC,结合了高速AI推理和低功耗,实现了1TOPS/W级的功耗性能。此外,图像信号处理器(ISP)非常强大,可独立于环境生成稳定的图像,从而实现高AI识别精度。凭借这些特性,RZ/V2M实现了低功耗,这对嵌入式设备来说是一个挑战,使散热测量变得更加容易。由于不再需要散热器和冷却风扇,因此可以小型化设备并降低BOM成本。因此,它是各种嵌入式市场中视觉AI应用的理想选择。此外,RZ/V2M还具有丰富的高速通信接口,如USB 3.1、PCI-Express和千兆以太网等,以及许多CPU外设功能,因此它还可以用于各种应用。


另外,瑞萨提供解决方案配套的降压稳压器集成FET)型号包括ISL80015ISL8002ISL8026线性稳压器LDO)型号包括ISL9021AISL80505以及ISL80102


本解决方案同时也适用于:

• 监控安防

• 办公室自动化

• 工业自动化

• 机器人

• 医疗保健


未来,谁能够快速开发出真正解决问题并能经受住市场考验的产品,才能在行业竞争中占据有利地位。瑞萨电子将加大研发力度与服务水平,提供更符合市场需求的产品和方案,推动社会的进步与发展。


技术资料,数据手册,3D模型库,原理图,PCB封装文件,选型指南来源平台:世强硬创平台www.sekorm.com
现货商城,价格查询,交期查询,订货,现货采购,在线购买,样品申请渠道:世强硬创平台电子商城www.sekorm.com/supply/
概念,方案,设计,选型,BOM优化,FAE技术支持,样品,加工定制,测试,量产供应服务提供:世强硬创平台www.sekorm.com
集成电路,电子元件,电子材料,电气自动化,电机,仪器全品类供应:世强硬创平台www.sekorm.com
  • +1 赞 0
  • 收藏
  • 评论 0

本文由天星转载自Renesas,原文标题为:干货 | AI摄像头和语音识别解决方案,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

评论

   |   

提交评论

全部评论(0

暂无评论

相关推荐

【应用】国产低噪声线性稳压器SGM2050XTRL20G/TR用于安防监控雷达,输出电流高达3A

客户在安防监控雷达产品的电源部分原使用国际主流的电源芯片,为了保证产品供货良好,希望找兼容方案,要求宽压输入,输出电流可以到3A的降压芯片。结合客户实际使用情况,笔者给其推荐了国产品牌SGMICRO(圣邦微)的SGM2050XTRL20G/TR,该器件是一款高精度、低噪声、极低压降的线性稳压器。它能够提供3A输出电流,典型压降仅为99mV。

应用方案    发布时间 : 2023-06-22

【应用】400mA输出电流的线性稳压器TPL720F33-5TR助力机器人设计,有效保证整体的可靠性和使用寿命

线性稳压器TPL720F33-5TR是一款具有高精度、低成本、小尺寸等特点的稳压器芯片,广泛应用于机器人、智能家居等领域中。本文将介绍线性稳压器TPL720F33-5TR在机器人项目中的应用。

应用方案    发布时间 : 2023-03-31

【应用】工作电压范围为1.4V~6.5V的线性稳压器RP132H331D-FE助力水下捕鱼机器人,连续输出电流高达1A

RP132x是一个内置低导通电阻晶体管的电压调节器,工作电压范围从1.4V到6.5V,高输出电压精度±1.0%可稳定输出用户所需电压,高达1A的连续输出电流完全满足水下捕鱼机器人的需求电流,低静态功耗仅为150nA,更延长产品的使用时间。

应用方案    发布时间 : 2022-12-24

研讨会2024模拟电源信号链新技术研讨会

描述- 11月7日直播,带来电源管理革新、汽车电子智能化、可再生能源与储能、光通讯与光模块、医疗健康与个人护理等领域电源信号链新产品新技术,点击了解报名。

议题- 信号链:射频开关,ADC,DAC,运放,比较器,数模混合IC,温度传感器  |  电源管理:锂电管理,氮化镓驱动,马达驱动,高低边驱动,DC-DC,AC-DC,电压基准源  |  汽车:车身电子,HUD,激光雷达,智能座舱,OBC,充电桩,T-BOX,氛围灯,车载摄像头,倒车雷达,热管理,BMS  |  光通讯,光模块,交换机(POE),AFE,个人护理,医疗健康  |  可再生能源:光伏储能(模拟ADC产品)  |  工业:机器人,变频伺服  |  电力:数字电源,电动工具,安防监控  |  SG Micro Corp(圣邦微电子)——十大中国IC设计公司之一,模拟集成电路领导者  |  模拟与嵌入式产品和解决方案供应商——思瑞浦(3PEAK)  |  以模拟技术为优势的电子器件和微波产品,为客户提供最佳的模拟解决方案——Nisshinbo (日清纺)  |  国产首款40V、5A 、AEC 、Q100车规级低能耗高可靠电源降压芯片生产商——芯洲科技(SCT)  |  高性能模拟和数模混合半导体供应商——JW JOULWATT(杰华特)  |  全球首家Force Touch SoC芯片供应商——芯海科技(CHIPSEA)  |  全球电子成就奖●年度微控制器/接口产品奖获得者——国民技术(Nations)  |  专业的高性能模拟器件及数模混合芯片解决方案供应商——拓尔微电子(TOLL)  |  专注于高性能、高品质模拟/混合信号的芯片设计公司:润石科技(Runic)  |  专注于高性能模拟及混合信号芯片设计——领慧立芯(legendsemi)  |  致力打造世界一流高端模拟芯片方案供应商——治精微(ZJW)  |  高端模拟及数模混合芯片和解决方案供应商——类比半导体(AnalogySemi)  |  高性能全范围模拟信号链(放大器/ADC/DAC/基准/电源)芯片供应商——士模(CIMO)  |  致力于向客户提供多品类、全系列电源管理芯片产品及解决方案供应商——ETA SEMICONDUCTOR(钰泰半导体)  |  专注BMS,电源及可编程模拟芯片的知名半导体厂商——芯祥科技(EnergyMath)  |  专注研发小型化、高可靠电源,为客户提供完整可靠的电源解决方案——ZOEYGO(中逸光)  |  专业从事电源产品的研发、生产、销售及综合解决方案的模块电源生产厂家——TOPPOWER(顶源科技)  |  模拟芯片领先设计商——微源半导体(LPSemi)  |  领先的高密度神经刺激芯片和生物传感芯片供应商——Nanochap(暖芯迦)  |  专注于高性能信号链集成电路产品研发——芯聚威(Silicoway)  | 

活动    发布时间 : 2024-06-28

【技术】MCU芯片的分类及与MPU、SoC的区别

MCU是基于CPU发展起来的主控芯片,与之类似的MPU和SoC是CPU应用于高性能计算领域的产品。MCU芯片应用场景非常广泛,比如可应用在校园卡、身份证、家用电器以及红绿灯等,重要性丝毫不输CPU。

技术探讨    发布时间 : 2023-01-04

【选型】静态电流典型值仅0.3μA的低压差线性稳压器RS3007-5.0YD3应用于医疗服务机器人项目中

医疗服务机器人的无线收发模块需要电源稳定,本文推荐润石科技的低压差线性稳压器RS3007-5.0YD3来进行稳压。其输入电压范围2.5V-45V,输出电压5V,输出电流可达300mA,典型静态电流3uA, SOT223封装,PSRR更是高达77dB。

器件选型    发布时间 : 2021-07-14

【经验】解析瑞萨MPU RZ/T1 SPI总线通信功能配置方法

当我们使用瑞萨(Renesas)MPU RZ/T1做项目开发时,基本都会用到SPI总线通信的功能,SPI总线通信速率较快很适合在单片机板级之间进行数据交互,本文将介绍使用瑞萨开发环境配置生成RZ/T1 SPI总线驱动程序的方法。

设计经验    发布时间 : 2022-05-02

【应用】带DAB音频系统的瑞萨智能房间控制器,具有语音识别、触键功能,适用于智能家居和医疗保健

在瑞萨(Renesas)智能房间控制器解决方案中,HS3003传感器负责监测房间的温度和湿度,同时ZMOD4410室内气体传感器负责探测整体挥发性有机化合物和估测的二氧化碳水平。语音识别和触键功能提供智能控制。

应用方案    发布时间 : 2021-10-08

瑞萨嵌入式工业应用技术研讨会:围绕电机控制、工业自动化、新能源三大方向开展演示,共推绿色可持续发展

全球半导体解决方案供应商瑞萨电子将于12月12日在深圳举办“智慧控制,绿色可持续”主题的瑞萨电子嵌入式工业应用技术研讨会,将围绕电机控制、工业自动化、新能源三大方向开展技术演讲和方案演示,探讨如何通过智能控制提高能效,降低能源消耗,实现绿色可持续发展。

厂牌及品类    发布时间 : 2023-11-13

【经验】瑞萨MPU RZ/T1使用SSC生成EtherCAT CiA402协议栈方法

瑞萨MPU RZ/T1支持EtherCAT网络设计,如何使用协议栈工具生成相对应的EtherCAT从机栈代码呢,本文主要就Beckhoff工具生成EtherCAT CiA402协议栈方法做相关介绍。

设计经验    发布时间 : 2021-12-26

【经验】瑞萨MPU RZ/T1使用code generator生成SCI的初始代码方法

工程师初次使用瑞萨(Renesas)RZ/T1系列MPU时,可能不知道SCI该如何配置波特率,中断入口,中断标志位等。本文将介绍RZ/T1系列MPU利用code generator生产SCI的配置方法。

设计经验    发布时间 : 2022-04-22

“EMBEDDED AI MPU” RZ/V INTRODUCTION

型号- RZ/V2L,RZ/V2M,RZ/V2XX,RZ/V2MA,RZ/V SERIES,RZ/V2XXX,RZ/V3X

商品及供应商介绍  -  RENESAS  - 2023/9/18 PDF 英文 下载 查看更多版本

【经验】瑞萨MPU RZ/T1使用双寄存器切换开启DMA传输的方法介绍

在项目中使用瑞萨(Renesas)MPU RZ/T1做从机接收大量数据时,为了传输和接收数据效率,我们会启用DMA传输的功能,有时候项目中需要传输的是两块数据,这时候我们可以使用双寄存器切换的方式来完成,本文主要介绍启用双寄存器切换启用DMA传输的方法。

设计经验    发布时间 : 2022-06-25

Renesas(瑞萨电子)RZ系列64位/32位基于Arm的微处理器(MPU)选型指南

目录- RZ Series MPU    RZ/A Series MPU    RZ/G Series MPU    RZ/T Series MPU    RZ/N Series MPU    RZ Family MPU Package overview   

型号- RZ/A1M,RZ/A1L,RZ/N1D,RZ/G1M,RZ/G1N,RZ/A1H,R8A774BX,RZ/A1LU,RZ/G1C,RZ/G1E,RZ/G1H,RZ/A1,RZ/A,RZ/G2,RZ/N,RZ/A2M,RZ/G2M,RZ/G2N,RZ/G2M 96,R8A774EX,RZ/G,RZ/N1,RZ/G2E 96,RZ/A1LC,RZ/T1,RZ/G2E,RZ/T,RZ/G2H,R8A774C0,RZ/N1S,RZ FAMILY,R8A774AX,RZ/G2M-96CE,RZ/N1L

选型指南  -  RENESAS  - 2020.02 PDF 英文 下载

RZ/G MPU G2L,LC,UL GROUP

型号- RZ/G3YYY,RZ/G2L,RZ/G2M,RZ/G2LC,RZ/G2UL,RZ/G1M,RZ/G2N,RZ/G1N,RZ/G,RZ/G1C,RZ/G2E,RZ/G1E,RZ/G2H,RZ/G1H,RZ/G3YY,RZ/G3XX,RZ/G3ZZ,RZ/G4X,RZ/G3X,RZ/G3Y,RZ/G4XX,RZ/G3Z

商品及供应商介绍  -  RENESAS  - SEPTEMBER 2023 PDF 英文 下载

展开更多

电子商城

查看更多

只看有货

品牌:RENESAS

品类:线性稳压器

价格:¥3.0104

现货: 4,900

品牌:RENESAS

品类:线性稳压器

价格:¥3.5121

现货: 3,000

品牌:RENESAS

品类:开关稳压器

价格:¥8.1948

现货: 1,000

品牌:RENESAS

品类:降压稳压器

价格:¥5.6862

现货: 185

品牌:RENESAS

品类:线性稳压器

价格:¥8.5293

现货: 23

品牌:RENESAS

品类:MPU

价格:¥164.7808

现货: 15,233

品牌:RENESAS

品类:线性稳压器

价格:¥10.7639

现货: 14,630

品牌:RENESAS

品类:MPU

价格:¥64.9285

现货: 9,375

品牌:RENESAS

品类:MPU

价格:¥57.0582

现货: 6,061

品牌:RENESAS

品类:MPU

价格:¥38.8591

现货: 5,534

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

现货市场

查看更多

品牌:RENESAS

品类:低压差线性稳压器

价格:¥1.7800

现货:99

品牌:SGMICRO

品类:Linear Regulators

价格:¥0.5400

现货:140,000

品牌:MICROCHIP

品类:LDO

价格:¥0.9800

现货:99,000

品牌:TI

品类:降压转换器

价格:¥9.0000

现货:51,000

品牌:思瑞浦

品类:线性稳压器

价格:¥0.2700

现货:48,000

品牌:上海贝岭

品类:Linear Regulator

价格:¥0.3500

现货:46,231

品牌:SGMICRO

品类:Linear Regulators

价格:¥0.3410

现货:37,275

品牌:思瑞浦

品类:线性稳压器

价格:¥0.7560

现货:36,000

品牌:SGMICRO

品类:Linear Regulators

价格:¥0.1200

现货:21,000

品牌:SGMICRO

品类:Linear Regulators

价格:¥0.3620

现货:20,000

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

品牌:

品类:

价格:

现货:

服务

查看更多

车规级变压器定制

可定制变压器电压最高4.5KV,高频30MHz;支持平面变压器、平板变压器、OBC变压器、DCDC变压器、PLC信号变压器、3D电源、电流变压器、反激变压器、直流直流变压器、车载充电器变压器、门极驱动变压器等产品定制。

最小起订量: 100000 提交需求>

高频变压器定制

可定制平板变压器、主变压器的开关频率2MHz以内、输入电压1400V以内、输出电压1400V以内,50%以上的产品采用自动化生产,最快3天提供样品、7天交货。

最小起订量: 3000 提交需求>

世强和原厂的技术专家将在一个工作日内解答,帮助您快速完成研发及采购。
我要提问

954668/400-830-1766(工作日 9:00-18:00)

service@sekorm.com

研发客服
商务客服
服务热线

联系我们

954668/400-830-1766(工作日 9:00-18:00)

service@sekorm.com

投诉与建议

E-mail:claim@sekorm.com

商务合作

E-mail:contact@sekorm.com

收藏
收藏当前页面