【应用】使用YOLOv3-tiny深度学习算法的瑞萨缺陷检测解决方案，具有较高的实时性和良好的精度

时间： 2023-10-12 来源：Renesas官网

技术问答

缺陷检测在电子制造业中是非常重要的应用。然而，由于存在的缺陷多种多样，传统的机器视觉算法很难对缺陷特征进行完全建模和迁移缺陷特征，致使传统机器视觉算法可重复使用性不是很大，并且需要区分工作条件，这将浪费大量的人力成本。因此，越来越多的工程师开始将深度学习算法引入缺陷检测领域，因为深度学习在特征提取和定位方面取得了非常好的效果。

下面将介绍瑞萨电子深度学习算法在缺陷检测领域的应用，以PCB电路板缺陷检测为例。

在这里，我们提出了一种缺陷检测解决方案，使用YOLOv3-tiny深度学习算法。 YOLOv3-tiny 是一种轻量级的目标检测算法。 YOLOv3-tiny 的网络结构如下。

与原来的YOLOv3模型相比，YOLOv3-tiny减少了一些层数和参数，提高了嵌入式设备上的推理速度和效率。该算法具有较高的实时性和良好的精度，非常适合工业缺陷检测应用。

缺陷检测解决方案可以部署在RZ/V2L和RZ/V2M MPU芯片上。部署过程如下图所示。

ONNX 是一种用于表示机器学习模型的开放格式。
ONNX 定义了一组通用运算符，机器学习和深度学习模型的构建基块以及通用文件格式，使 AI 开发人员能够使用具有各种框架、工具、运行时和编译器的模型。

此应用程序在 RZ/V2M MPU 中的硬件设置如下。

此应用程序在 RZ/V2L MPU 中的硬件设置如下。

YOLOv3-tiny 缺陷检测解决方案部署在RZ/V2M 和 RZ/V2L ，具有低功耗（小于5W）、高性能推理效果的特点，RZ/V2M为52fps，RZ/V2L为35fps（均不包括前处理和后处理）。

嵌入式缺陷检测不仅用于电子制造中的PCB缺陷检测，还具有广泛的应用场景，以下是一些常见示例：

工业自动化：在制造过程中，可以实时检测产品中的缺陷，例如不正确的产品组装、零件缺失或损坏。
农业领域：在农业生产中，它可用于检测作物或蔬菜中的缺陷，例如疾病，害虫或水果畸形。
安防监控：可用于安防监控系统中的缺陷检测，如检测建筑物或公共场所的异常物体、入侵行为或安全隐患。
医学成像：在医学领域，可应用于医学图像分析，检测疾病标志物、肿瘤或异常组织等。
车辆检测：在智能交通系统中，可用于车辆检测，如交通流量监控、非法车辆检测或停车场管理。

随着人工智能技术的不断进步，瑞萨期待在工业制造、安防、智能零售、服务机器人等多个领域推出更多应用和解决方案。

发送到邮箱 |
+1 赞 0
收藏
评论 0
| 转发至：

本文由翊翊所思转载自Renesas官网，原文标题为:工业领域的 RZ/V 缺陷检测，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。

全部评论（0）

暂无评论

【应用】瑞萨的RZ/G1M嵌入式多核处理器（MPU）帮助相机系统实现了实时图像处理，最大总线频率高达800MHz

瑞萨支持网络摄像机的主要设备，从高分辨率和高清CMOS图像传感器，到具有图像处理功能和显示功能的MPU，到用于摄像机电机控制的MCU。瑞萨还通过提供更智能的图像识别和身份验证应用软件，帮助用户提高产品价值。瑞萨的RZ/G系列MPU扩展了RZ/A MPU的功能，通过摄像头输入、3D图形加速器、全高清视频编解码器和GbE等功能，为图形，多流视频和嵌入式视觉提供高端性能。

应用方案发布时间 : 2019-04-30

RENESAS Provides Gigabit Industrial Ethernet Solution with Latest RZ/N2L MPU, Running at 10Mbps or 100Mbps

Industrial Ethernet and time-sensitive networks (TSNs) are on the rise. They are very common in the industrial communication domain utilizing protocols like EtherCAT or PROFINET. In the past, these systems were running at 10Mbps or 100Mbps； however, the hunger for more speed was inevitable. New systems need to be capable of 1Gbps to further decrease latency and increase the amount of data transferred per second by a factor of 10 simultaneously.

应用方案发布时间 : 2023-08-25

Introducing Three examples of AI MPU RZ/V2M real-life applications

Renesas introduces the following three examples of RZ/V2M real-life applications, including security camera (using Object Recognition), fitness application (using Pose Estimation) and AI edge gateway (using Object Recognition, Pose Estimation and so on).

应用方案发布时间 : 2022-07-30

【经验】RZ/T2M使用瑞萨工具生成IAR开发环境软件项目驱动的方法

瑞萨RZ家族发布了最新的MPU型号RZ/T2系列，那么对于该系列MPU如何使用瑞萨软件工具生成IAR开发环境代码呢，如下步骤主要介绍使用瑞萨RZT Smart Configurator工具生成RZ/T2M IAR开发环境软件项目驱动方法。

设计经验发布时间 : 2023-03-25

【经验】解析瑞萨MPU RZ/T1 SPI总线通信功能配置方法

当我们使用瑞萨（Renesas）MPU RZ/T1做项目开发时，基本都会用到SPI总线通信的功能，SPI总线通信速率较快很适合在单片机板级之间进行数据交互，本文将介绍使用瑞萨开发环境配置生成RZ/T1 SPI总线驱动程序的方法。

设计经验发布时间 : 2022-05-02

Realtime Vision AI runs at the size of a Raspberry Pi ! Introducing the RZBoard V2L Single Board Computer

This blog introduced the RZBOARD V2L, a raspy-like evaluation board that can run AI with extremely high power efficiency compared to conventional processors and GPUs.

原厂动态发布时间 : 2023-10-24

【经验】瑞萨MPU RZ/T1使用SSC生成EtherCAT CiA402协议栈方法

瑞萨MPU RZ/T1支持EtherCAT网络设计，如何使用协议栈工具生成相对应的EtherCAT从机栈代码呢，本文主要就Beckhoff工具生成EtherCAT CiA402协议栈方法做相关介绍。

设计经验发布时间 : 2021-12-26

【经验】瑞萨RZ/T2M系列MPU使用IAR开发环境时的调试方法和注意事项

瑞萨RZ/T2M系列MPU可以使用IAR开发环境进行开发，当我们使用IAR开发环境加载一些瑞萨RZ/T2M相关例程项目时，总是会遇到一些编译报错问题，烧写异常问题，此文主要介绍使用IAR开发环境连接调试RZ/T2M系列MPU的方法和一些注意事项。

设计经验发布时间 : 2023-03-31

“EMBEDDED AI MPU” RZ/V INTRODUCTION

型号- RZ/V2L,RZ/V2M,RZ/V2XX,RZ/V2MA,RZ/V SERIES,RZ/V2XXX,RZ/V3X

商品及供应商介绍 - RENESAS - 2023/9/18 PDF 英文下载查看更多版本

【经验】瑞萨MPU RZ/T1使用code generator生成SCI的初始代码方法

工程师初次使用瑞萨（Renesas）RZ/T1系列MPU时，可能不知道SCI该如何配置波特率，中断入口，中断标志位等。本文将介绍RZ/T1系列MPU利用code generator生产SCI的配置方法。

设计经验发布时间 : 2022-04-22

【经验】瑞萨MPU RZ/T1使用中断方式DMA传输的方法介绍

瑞萨（Renesas）MPU RZ/T1系列可以用于工业通信，伺服等领域项目中，这些领域往往需要主控与外设进行大量数据的交互，当我们使用RZ/T1的DMA中断传输功能接收大量数据时，在程序及配置中具体我们该怎么操作呢，本文主要介绍中断方式操作DMA传输的方法。

设计经验发布时间 : 2022-06-26

RZ/G MPU G2L,LC,UL GROUP

型号- RZ/G3YYY,RZ/G2L,RZ/G2M,RZ/G2LC,RZ/G2UL,RZ/G1M,RZ/G2N,RZ/G1N,RZ/G,RZ/G1C,RZ/G2E,RZ/G1E,RZ/G2H,RZ/G1H,RZ/G3YY,RZ/G3XX,RZ/G3ZZ,RZ/G4X,RZ/G3X,RZ/G3Y,RZ/G4XX,RZ/G3Z

商品及供应商介绍 - RENESAS - SEPTEMBER 2023 PDF 英文下载

Renesas（瑞萨电子）RZ系列64位/32位基于Arm的微处理器(MPU)选型指南

目录- RZ Series MPU RZ/A Series MPU RZ/G Series MPU RZ/T Series MPU RZ/N Series MPU RZ Family MPU Package overview

型号- RZ/A1M,RZ/A1L,RZ/N1D,RZ/G1M,RZ/G1N,RZ/A1H,R8A774BX,RZ/A1LU,RZ/G1C,RZ/G1E,RZ/G1H,RZ/A1,RZ/A,RZ/G2,RZ/N,RZ/A2M,RZ/G2M,RZ/G2N,RZ/G2M 96,R8A774EX,RZ/G,RZ/N1,RZ/G2E 96,RZ/A1LC,RZ/T1,RZ/G2E,RZ/T,RZ/G2H,R8A774C0,RZ/N1S,RZ FAMILY,R8A774AX,RZ/G2M-96CE,RZ/N1L

选型指南 - RENESAS - 2020.02 PDF 英文下载

【经验】解析瑞萨MPU RZ/T1在e2 studio环境下的双核仿真步骤方法

瑞萨（Renesas）RZ/T1为基于32位和64位Arm的高端MPU，广泛应用工业控制领域，本文主要介绍使用瑞萨RZ/T1的双核CR4和CM3在e2 studio下的双核仿真步骤方法，帮助大家快速的进阶RZ/T1项目开发。

设计经验发布时间 : 2022-04-12

RZ/G MPU G2H,M,N,N GROUP

型号- RZ/G3YYY,RZ/G2L,RZ/G2M,RZ/G2LC,RZ/G2UL,RZ/G1M,RZ/G2N,RZ/G1N,RZ/G1C,RZ/G2E,RZ/G1E,RZ/G2H,RZ/G1H,RZ/G3XX,RZ/G3YY,RZ/G3ZZ,RZ/G4X,RZ/G3X,RZ/G3Y,RZ/G4XX,RZ/G3Z

商品及供应商介绍 - RENESAS - SEPTEMBER 2023 PDF 英文下载