端点人工智能给嵌入式视觉应用带来革命性创新
端点人工智能是人工智能的新前沿，它将人工智能的能力下沉到边缘设备。 它带来一种革新的数据管理方式：在本地搜集相关数据并在本地做出决策。它将以往仅仅用于计算数据的物联网设备升级为集成人工智能的智能设备，从而增加设备实时决策的能力。 总而言之就是使基于机器学习的智能决策在物理上更接近数据源本身。因此，嵌入式视觉下沉到端点设备，就不再仅仅是将图像或视频分解成像素，而是理解像素，理解它们的含义，并在发生特定事件时做出明智决策。
什么是嵌入式视觉？
嵌入式计算机视觉给机器赋予视觉使它们能够在机器学习和深度学习算法的支持下更好的了解环境。很多行业中都有依赖于计算机视觉的应用，它已经是黑科技中不可或缺的一员。准确地说，计算机视觉是人工智能 (AI) 领域的一部分，它使机器能够从数字多媒体信息源中提取有意义的信息，并据此采取行动或提出决策建议。计算机视觉类似于人类视觉，但两者之间仍存在一些差异。人类视觉的背后，是对所看到的各种不同东西都有理解的能力。而计算机视觉只能识别它已经被训练过的内容，同时还有一定的错误率。另外一方面，嵌入式视觉通过训练能让设备在最短的时间内做出对特定对象的识别，从而能更加高效地对海量图像进行分析。在这一方面，机器视觉优于人类视觉。
嵌入式视觉广泛应用于消费和工业领域的智能终端，为设备提升附加值。简单举几个例子：分析生产线上的产品质量、统计人群中的人数、识别物体、分析特定区域的内容等。
在端点设备实现嵌入式视觉应用时，设备的算力会是面临的一个挑战。但集中处理的话，从传感设备传输到云端去分析的数据量可能非常大，并且超过网络带宽。 例如，以 30 FPS（每秒帧数）运行的 1920 x 1080 摄像机可能会产生大约 190 MB/S 的数据。 除了隐私问题之外，数据从边缘到云，再从云到端点的往返势必会带来延迟。 这些限制都不利于实时应用。
物联网安全也是市场要采用和发展嵌入式视觉需要考虑的一个问题。使用智能视觉设备的一个关键隐忧是敏感图像和视频是否有被不当使用的可能性。 未经授权访问摄像头不仅侵犯隐私，而且可能导致更严重的后果。
· 端点设备上的人工智能视觉
· Endpoint AI可以理解捕获的图像
· Endpoint AI使用机器学习和深度学习来按照被训练的模式去匹配和识别
为了获得最佳性能， AI算法在终端设备上运行，而无需将数据传输到云端。数据由图像识别设备捕获，然后在同一设备中进行处理和分析。
端点设备的功耗限制仍然存在，微控制器或微处理器需要更高的效率来处理AI算法所需的大量乘累加(MAC)运算。
人工智能视觉的部署
现实世界中有无数AI视觉应用的使用场景。下面是一些例子，RENESAS可以提供全面的MCU和MPU解决方案，包括必要的软件和工具，以实现快速开发。
智能门禁:
语音和人脸识别给安全门禁系统带来更多使用价值。然而实时识别，要求嵌入式系统具有非常高的算力和片上硬件加速。为了应对这一挑战，Renesas提供的MCU或MPU具有高算力，还集成了许多支持人脸和语音识别至关重要的功能，如内置H.265硬件解码、2D/3D图形加速以及内部和外部存储器上的ECC，以消除软错误并实现高速视频处理。
工业控制:
嵌入式视觉可以应用到包括安全操作、自动化、产品分类等多个场景。人工智能可以在生产过程中帮助执行多项操作，如包装和分发，确保生产过程中所有阶段的质量和安全。
交通运输:
计算机视觉也能改善交通运输服务。以自动驾驶为例，使用计算机视觉对道路上的物体进行检测和分类。它还可用于创建3D地图和估算运动轨迹。自动驾驶汽车使用摄像头和传感器收集环境信息，然后通过模式识别、特征提取和对象跟踪等视觉技术来解析数据，并做出最合适的响应。
嵌入式视觉可以用于多种用途，但都需要根据特定领域做定制和优化，使用该领域的数据集做特别的训练。比如监控一个物理区域、识别入侵、检测人群密度、统计人或指定物体或动物的数量，找人，根据车牌号找车、运动检测以及人类行为分析。
案例研究:农作物病虫害检测
视觉人工智能和深度学习可以用来检测各种异常——植物病虫害检测就是一个例子。研究结果表示，与以前费钱费力收效还慢的方法相比，计算机视觉能提供更好、更准确、更快速和更经济的方案。
在该案例中使用的方法和步骤可应用于任何其他检测，主要有三个步骤:
第一步在实验室的计算机上执行，第二步部署在端点设备上，比如农场里的节点设备。步骤3中的结果显示在用户端的屏幕上。下图显示了通用流程。
结论:
我们正在经历一场跨越多个细分市场的高性能智能视觉应用革命。端点设备中的微控制器和微处理器算力越来越强，这为新视觉应用带来了巨大的机遇。Renesas视觉人工智能解决方案通过在端点提供具有智能数据处理的嵌入式AI技术，帮助您增强整体系统功能。我们在边缘设备的图像处理解决方案具有低功耗特性、并支持多模型、多种特征推断。现在就开始使用Renesas电子的产品和工具开发您的视觉AI应用吧。
- |
- +1 赞 0
- 收藏
- 评论 0
本文由翊翊所思转载自Renesas，原文标题为:端点人工智能给嵌入式视觉应用带来革命性创新，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。
相关研发服务和供应服务
相关推荐
瑞萨电子分析工业自动化和工业4.0的动态发展
Renesas为广泛的工业自动化应用提供最先进的解决方案，支持工业4.0标准的实施。产品组合包括高端工业级IC，包括MCU/MPU、功率器件、传感器、通信接口和多种连接解决方案。无论在开发电机驱动、系统控制、传感器解决方案、工业网络还是通信接口。
行业资讯 发布时间 : 2022-07-30
2021年半导体行业将会强势增长，瑞萨立足于车辆控制领域极具影响力的MCU，将集成高端ADAS/自动驾驶和网关SoC业务
瑞萨电子株式会社高级副总裁、瑞萨中国董事长真冈朋光分享了他对明年半导体技术发展趋势和市场发展趋势的看法。虽然疫情带来许多挑战，但是另一方面也正由于疫情的爆发扩散，促进了工业、基础设施和物联网领域各类应用的发展。其中，比较典型有对网络带宽、笔记本电脑、PC和平板电脑以及用于医疗保健、空气质量监测应用的设备的需求不断增长。同时，5G也是瑞萨看好的增长领域之一。
行业资讯 发布时间 : 2021-01-09
沁恒基于青稞RISC-V内核的MCU和自研PHY的USB/蓝牙/以太网接口芯片，适用于计算机手机周边、工业控制、物联网
型号- CH32X035F8U6,CH32X035G8R6,CH32V303RCT6,CH32V103R8T6,CH32V103C6T6,CH32F203K8T6,CH32V203F8U6,CH32F205RBT6,CH32F203C8T6,CH32V203G8R6,CH532,CH531,CH545,CH547,CH546,CH549,CH548,CH32V208WBU6,CH32V208RBT6,CH32F103R8T6,CH32V003J4M6,CH32F103C6T6,CH32F203RCT6,CH32V305RBT6,CH32L103,CH541,CH543,CH32V003F4P6,CH32F103C8U6,CH32X035C8T6,CH32V303RBT6,CH32V208GBU6,CH32V307RCT6,CH32V203K8T6,CH32L103F8P6,CH592,CH32V203C8T6,CH591,CH32V307WCU6,CH32X035F7P6,CH522,CH525,CH527,CH32C035,CH32V203G6U6,CH32V307,CH32F203C8U6,CH32V203C8U6,CH32V203F6P6,CH521,CH32V203RBT6,CH578,CH32V303VCT6,CH577,CH579,CH32F203CBT6,CH32V103C8T6,CH32V003A4M6,CH32X033F8P6,CH32L103F7P6,CH32F203C6T6,CH571,CH573,CH32F103C8T6,CH32V103C8U6,CH32X035G8U6,CH32V003F4U6,CH32L103K8U6,CH32L103C8T6,CH32F208RBT6,CH32V208,CH581,CH583,CH32F203VCT6,CH32F208WBU6,CH582,CH32X035R8T6,CH32V208CBU6,CH555,CH558,CH557,CH559,CH32V303CBT6,CH32L103F8U6,CH32V305FBP6,CH32V203K6T6,CH32V203C6T6,CH552,CH32V307VCT6,CH551,CH554,CH567,CH569,CH568,CH32L103G8R6,CH32F207VCT6,CH561,CH563,CH32V203F8P6
匠芯创D21x系列工业级MPU芯片选型表
型号- M6805SNDA,M6805SPDA,D133EBS,D211BBX,D211DBV,D21X,D133BBS,D211BBV,D133CBS,M6802SNCA,D12X系列,D13X,D211DBX,M680X系列,M6805SNDS,G73X,D122BBV,D132ENS,D121BAV,M6806SPES,G730BDU,M6802SNCS,D21X系列,D211BCV,D133ECS,M6806SPEQ,M6806SNES,G73X系列,D211DCX,D13X系列,D211BCX,D211DCV,D133CCS,D133BAS,D12X,D213ECV,M6805SPDS,D213ECX,M6801SPCS,M6806SPEA,D122BCV,M6806SNEA,D121BBV,D122BAV,M6801SPCA,G730EES,G730CES
匠芯创高端“显控一体”工业级MCU D13x，具备强大的显示和工业控制功能，成功对标国际大厂同类产品
匠芯创ArtInChip D13系列工业级MCU的诞生，“显控一体”的组合实力使其具备强大的显示功能支持，以及高集成度高性能的工业控制功能，广泛适用于包括物联网、智能家居、工业控制和汽车电子在内的泛工业应用领域，成功对标国际大厂的同类产品。
产品 发布时间 : 2023-10-19
【视频】沁恒基于青稞RISC-V内核的MCU和自研PHY的USB/蓝牙/以太网接口芯片，适用于计算机、手机周边、工业控制、物联网
型号- CH32X035F8U6,CH32X035G8R6,CH32V303RCT6,CH32V103R8T6,CH32V103C6T6,CH32F203K8T6,CH32V203F8U6,CH32F205RBT6,CH32F203C8T6,CH32V203G8R6,CH532,CH531,CH545,CH32X035,CH547,CH546,CH549,CH548,CH32V208WBU6,CH32V208RBT6,CH32F103R8T6,CH32V003J4M6,CH32F103C6T6,CH32F203RCT6,CH32V305RBT6,CH541,CH543,CH32V003F4P6,CH32F103C8U6,CH32X035C8T6,CH32V303RBT6,CH32V208GBU6,CH32V307RCT6,CH32V203K8T6,CH32L103F8P6,CH592,CH32V203C8T6,CH591,CH32V307WCU6,CH32X035F7P6,CH522,CH525,CH527,CH32V203G6U6,CH32V307,CH32F203C8U6,CH32V203C8U6,CH32V203F6P6,CH521,CH32V203RBT6,CH578,CH32V303VCT6,CH577,CH579,CH32F203CBT6,CH32V103C8T6,CH32V003A4M6,CH32X033F8P6,CH32L103F7P6,CH32F203C6T6,CH571,CH573,CH32F103C8T6,CH32V103C8U6,CH32X035G8U6,CH32V003F4U6,CH32L103K8U6,CH32L103C8T6,CH32F208RBT6,CH32V208,CH581,CH583,CH32F203VCT6,CH32F208WBU6,CH582,CH32X035R8T6,CH32V208CBU6,CH555,CH558,CH557,CH559,CH32V303CBT6,CH32L103F8U6,CH32V305FBP6,CH32V203K6T6,CH32V203C6T6,CH552,CH32V307VCT6,CH551,CH554,CH567,CH569,CH568,CH32L103G8R6,CH32F207VCT6,CH561,CH563,CH32V203F8P6
匠芯创受邀参加2024RISC-V中国峰会，展示了一系列工业级MCU、MPU等产品
8月19-25日，2024 RISC-V中国峰会在杭州盛大开展！RISC-V 中国峰会至今已成功举办四届，现已成为中国大陆规格最高、规模最大、影响力最强的专业会议之一。匠芯创受邀参与并呈现多种产品技术。
原厂动态 发布时间 : 2024-08-27
【IC】东软载波推出ES32F3626系列MCU新品，最高主频支持72MHz，有效提升消防、工业控制等终端用户的体验感
上海东软载波微电子有限公司一直深耕白色家电和工业控制等行业，致力于提供高可靠性、高性价比的产品。面向消防、工业控制等领域新推出高安全性的系列MCU产品。ES32F3626系列产品采用Cortex-M3内核，最高主频支持72MHz，配合FLASH CACHE系统最高效能评分可达81 DMIPS和145 CoreMark。
产品 发布时间 : 2024-08-22
【IC】东软载波ES32VF2264系列MCU采用RISC-V内核和先进的系统架构，用于高端白色家电、工业控制、储能逆变等领域
ES32VF2264系列产品采用RISC-V内核和先进的系统架构，主频运行在72MHz时系统效能评分可达81 DMIPS和149 CoreMark，指令吞吐量和运算能力接近Cortex-M3。此外，产品增加了内部关键电路的冗余备份设计如Flash安全保护，硬件CRC校验等，利于客户应用系统可靠性设计，大幅降低终端应用的失效率，有效提升终端用户的体验感。
产品 发布时间 : 2024-01-04
【IC】东软载波新品ES8H0384/94系列MCU芯片，ESD可超±16kV，满足白色家电及工业控制行业要求
从白色家电产品发展趋势来看，需要可靠性更高、性价比更优的国产成熟方案，来解决行业应用痛点如ESD、EMC和极低失效率等问题。为此Eastsoft ES8H0384/ES8H0394系列MCU芯片应运而生。芯片级性能指标达到行业领先水平，包括ESD（HBM）±8kV，ESD（CDM）±2kV，LATCHUP±350mA，在客户端系统级测试中，性能指标包括ESD超过±16kV，EFT超过±4.8kV。
产品 发布时间 : 2023-12-29
【产品】采用高性能双核CPU的32位工业控制MCU JSN0100，可配置为单处理器、双处理器或DSP进行使用
芯云科技32位工业控制MCU（JSN0100）具有可扩展功能多、应用场景广、性能均衡、 性价比高等特点。使用灵活，可配置为单处理器、双处理器或DSP进行使用。
新产品 发布时间 : 2022-10-20
【应用】国产32位MCU AT32F403AVGT7用于智能门禁控制系统，工作频率最高可达240MHz，拥有丰富通信接口
随着生活水平的提高，在小区及办公区域对安全性要求越来越高，对智能门禁控制系统需求也大大的增加，MCU在门禁控制器中作为控制的核心，需实施处各模块传递的信息，来做出相应的动作，本文推荐雅特力AT32F403AVGT7 32位MCU应用于智能门禁控制系统。
应用方案 发布时间 : 2022-09-25
雅特力即将亮相elexcon 2023，带来多款AT32 MCU新品展示，打造工业控制、智能家电等多领域应用场景
elexcon深圳国际电子展将在深圳会展中心（福田）盛大举行，雅特力作为elexcon深圳国际电子展的老朋友，将继续亮相展会现场。带来多款AT32 MCU新品展示，并通过打造工业控制、电机控制、消费＆商务、电力＆电源、智能家电及汽车电子等多领域应用场景集中展示AT32 MCU创新应用方案。
原厂动态 发布时间 : 2023-08-17
【视频】芯海高精度信号链MCU在工业控制上的应用，实现精准感知控制
型号- CS32F036,CS32F03X -RA,CS32F035,CSM92F25,CS1237,CS32G051,CSP6410
电子商城
现货市场
服务
可定制显示屏的尺寸0.96”~15.6”，分辨率80*160~3840*2160，TN/IPS视角，支持RGB、MCU、SPI、MIPI、LVDS、HDMI接口，配套定制玻璃、背光、FPCA/PCBA。
最小起订量： 1000 提交需求>
可烧录IC封装SOP/MSOP/SSOP/TSOP/TSSOP/PLCC/QFP/QFN/MLP/MLF/BGA/CSP/SOT/DFN；IC包装Tray/Tube/Tape；IC厂商不限，交期1-3天。支持IC测试（FT/SLT），管装、托盘装、卷带装包装转换，IC打印标记加工。
最小起订量： 1pcs 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论