【应用】无人驾驶先驱者——ADAS系统图像识别SoC方案

时间： 2019-07-29 来源：世强作者：木木

技术问答

【摘要】ADAS应用于车载安全系统，需要对环境图形进行过滤识别，真实的反映车身周围的影像，需要同时支持多个摄像头的数据解析，并能通过车载总线将数据传输出去。为此，瑞萨专门为ADAS系统而打造的SH7766系列产品，是瑞萨图像识别SoC系列的新产品，在国内外市场中广受好评和青睐。

近年来，汽车界存在一个普遍的共识，即未来汽车会越来越智能，最终达到无人驾驶。在此共识下，无人驾驶项目正在蓬勃发展，而ADAS又是汽车无人驾驶的前提，对解决交通事故高发的问题，以及减少人员伤亡具有非常重要的意义。

ADAS最初的定义是在车辆行驶过程中通过使用相机、雷达感应等功能来检测车道标志物和行人，达到协助司机安全行驶的目的。ADAS应用于车载安全系统，需要对环境图形进行过滤识别，能够清楚的识别图像的细节，真实的反映车身周围的影像，需要同时支持多个摄像头的数据解析，并能通过车载总线将数据传输出去。

为此，汽车芯片供应商瑞萨专门为ADAS系统而打造的SH7766系列产品，是瑞萨图像识别SoC系列的新产品。其集成了硬件引擎的环绕检测系统，包括一个失真校正引擎、图形引擎，和图像识别引擎，极大的优化了影像辅助功能，在国内外市场中广受好评和青睐。

瑞萨SH7766 产品框图如下图1：

如上图SH7766的芯片框架，针对应用于ADAS所需的影像处理，可实现功能：
1）周边物体检测（支持4路摄像头）
2）高性能的图像识别引擎
3）集成DRC（Dynamic Range Control），支持亮度纠正和补偿
4）内置扭曲校正硬件IMR（Image Render Engine）

瑞萨SH7766 系列产品 ADAS方案：

如上图，通过摄像头与图像传感器MLX75412（夜视，轨道偏离报警），将图像信息发送到SH7766（camera sensor mcu），在SH7766内部对图像进行分析识别，进行亮度的纠正与补偿，从而在外挂LCD屏幕上显示，并可实现不同角度视图的切换功能。SH7766可与车身管理MCU通过CAN、SPI等总线通讯，如图3。图像信息可通过CAN网络发送给车载电脑芯片SH7269，从而与车身控制系统进行通讯，实现网络化管理。

SH7766 SOC为ADAS系统影像处理提供解决方案，并能与车身控制系统的雷达检测等安全功能进行通讯配合，从多方面保障ADAS系统的功能完整性，促进了新一代ADAS技术的发展。

SH7766系列SOC的特性：
• 两种标定模式-全自动标定模式和精准标定模式75uA/MHz
• 超级虚拟相机模式
• 基于环视原理的车道偏离驾驶预警模式
• 俯视图的可见区域大小一键更改
• 俯视图完美拼接和分割效果
• 3D效果的环视界面
• 基于3G的视频查看和信息管理
• 语音倒车指南

发送到邮箱 |
+1 赞 0
收藏
评论 2
| 转发至：

本网站所有内容禁止转载，否则追究法律责任！

全部评论（2）

真大虫无双 Lv8. 研究员 2020-06-16

Mark~
七天大神 Lv7. 资深专家 2019-10-22

通过摄像头来做雷达，局限性有点高吧！

没有更多评论了

高级3D全景环视系统的最佳解决方案

R-Car第二代SoC旨在为高级3D全景环视系统提供最佳解决方案，并为驾驶人员提供身临其境、安全的驾乘体验。

新应用发布时间 : 2019-07-10

【技术大神】单芯片SoC助力实现低成本ADAS高清环视系统

采用LVDS作为传输介质的高清方案的成本会很高，基于R-CAR T2 SoC芯片的以太网方案则大大降低了整套系统的成本。

新应用发布时间 : 2019-07-27

无人驾驶从ADAS开始

ADAS是什么？ADAS为何如此重要？ADAS的市场发展前景如何？

新应用发布时间 : 2016-02-26

【产品】低功耗全高清ADAS专用低功耗SoC芯片SGKS6802

森国科SGKS6802是一款针对高级辅助驾驶(ADAS)、流媒体后视镜、夜视系统、透雾透霾及图形图像识别与处理等产品开发的ADAS专用低功耗SoC芯片，1080P@30fps+720P@30fps双路码流H.264编码及高质量的ISP处理。

新产品发布时间 : 2021-07-23

【产品】瑞萨第三代汽车级SOC RCAR-M3带你走进自动驾驶时代

瑞萨电子推出第三代Rcar系列芯片，致力于高级安全（智能）驾驶系统和车载娱乐系统，建立一个完善的无人驾驶领域半导体的技术平台。其中新的Rcar-M3成员（SOC），提供ARM双核cortex-A57以及4核cortex-A53的高CPU性能、3D图像识别处理引擎，符合ISO 26262（ASIL-B）的安全等级，支持系统级封装（SiP）集成高速缓存，功能完善，完美支持先进驾驶辅助系统的开发设计。

新产品发布时间 : 2018-07-29

【产品】瑞萨新一代SOC R-Car V3H，专为自动驾驶前置摄像头应用

瑞萨开发了专门针对前置摄像头应用的SoC——R-Car V3H，集成了专门针对图像处理的功能单元，它比R-Car V3M在视觉处理方面的性能提高了5倍，并只有0.3瓦的超低功耗，更好的适应自动驾驶的需求。

新产品发布时间 : 2018-03-07

How to Build Together a Safe and Efficient AD ＆ ADAS Central Computing Solution

Should RENESAS stop here and call it a success? Clearly no! Progress has no limits and by working together we ensure to constantly update our understanding of how autonomous systems of tomorrow will be and anticipate that by providing state-of-the-art processing solutions that would bring them successfully to the mass market.

技术探讨发布时间 : 2023-11-30

【产品】全新开放式平台，加大对ADAS及自动驾驶的支持

新型R-Car V3M SoC符合ISO26262功能安全标准，为视觉处理提供了低功耗硬件加速功能，还配有内置图像信号处理器。

新产品发布时间 : 2017-04-25

【经验】SoC R CAR V3H2 cnn模型转换后执行以及benchmark过程实操指南

RENESAS SoC R CAR V3H2 cnn模型转换后的输出文件有bcl和.pb 2类，都是可以在端侧执行的，本文记录.pb的推理输出以及benchmark过程实操及解析。

设计经验发布时间 : 2023-09-21

【经验】SoC R CAR V3H2 端侧推理输出的rcar_output.npy数据查看方法

RENESAS R CAR V3H2 端侧推理输出的数据有cvs格式，总共512个输出，同时把cvs数据转化为npy格式保存为一个rcar_output.npy文件，那我如何查看这些数据呢，本文记录数据查看方法。

设计经验发布时间 : 2023-09-23

【经验】使用瑞萨SoC R CAR V3H2 cnn工具链实现onnx模型转caffe模型的实操

R CAR V3H2 的cnn神经网络模块需要运行int16的定点模型，而onnx模型首先需要通过cnn工具链转成caffe模型，然后再转成端侧的可执行模型，本文使用瑞萨的cnn工具链实现onnx模型转caffe模型。

设计经验发布时间 : 2023-08-14

Renesas Introduces Complete Power and Functional Safety Solution for R-Car V3H ADAS Camera Systems

March 30, 2021 - Renesas Electronics Corporation, a premier supplier of advanced semiconductor solutions, announced a new power and functional safety solution for systems based on the R-Car V3H system-on-chip (SoC) for advanced driver assistance systems (ADAS) automotive front cameras and driver monitor cameras.The new solution includes the RAA271050, a 42V synchronous buck ‘pre-regulator‘ that accepts the vehicle‘s 12V supply and steps it down to an intermediate supply voltage of 3.3V or 5.0V.

新产品发布时间 : 2021-04-20