【技术大神】单芯片SoC助力实现低成本ADAS高清环视系统
作为ADAS系统中非常重要的也是非常基本的一个功能，环视系统被越来越多的应用到了中高端汽车上面。目前市场装配的主要还是标清摄像头系统，但是随着人们对显示质量的要求越来越高，同时也为了满足ADAS整个系统中其它功能的要求，高清环视系统的需求已经提上了日程。
目前在个别车型上面已装配了高清环视系统，但是考虑到高清传输需要大量的数据以及实时性的要求，所以目前的方案主要还是采取LVDS的方式传输。不过LVDS也有一个明显的缺点，那就是成本问题。相对于标清方案，采用LVDS作为传输介质的高清方案的成本会高出很多，这也是目前很多OEM比较关心的问题。笔者最近通过调查发现目前市场上已经开始提供以太网的方案，并且以太网传输的介质是双绞线，这样整套系统的成本将大大降低。RENESAS的R-Car T2就是为了解决这一问题而专门设计的一款SoC产品。笔者在开发的过程中使用了该产品，本文就相关的一些数据结果与大家做一个分享。
高清环视系统中通常至少需要4个摄像头，这4个摄像头传到中央显示单元的时间要一致并且足够短，从而保证实时性的要求。R-CAR T2提供了内置硬件的H.264编码单元，这样摄像头采集到的图像可以直接通过硬件的方式进行压缩。压缩后的数据再通过以太网传给中央显示单元。下面是笔者在使用过程中的一些实验数据结果。
笔者的方案中采用了4个高清数字摄像头。摄像头采集到数据之后，首先进行数据压缩，这一步非常重要，如果采用软件的算法进行压缩，通常光软件算法就需要耗费几十毫秒的时间，而如果是硬件实现H.264的压缩算法的话，这个时间几乎就可以忽略不计了。笔者使用的是摄像头模组进行的开发，也就是把摄像头和R-CAR T2集成到一起。这里高清摄像头的分辨率为1280x960，帧率为30fps。这样从采集图像一直到数据从Ethernet AVB发送出去只需要不到1ms的时间。当我们车辆行驶在100km/h的情况下，1ms的延时车辆刚刚向前行驶了不到2.8cm，在实际情况下这个距离几乎可以忽略不计。
100000米/3600000毫秒=0.02778米
除了延时之外，压缩之后的画质效果是另一个关键问题。有些压缩方法虽然可以使压缩后的数据量变得更小，但往往是以损害解压后的画质为代价的。之前笔者测试过采用MJEPG的方式，解压后的很多画面已经模糊了，尤其是对很多标识上的文字的影响更明显，严重的甚至已经完全无法辨识。采用H.264的方式之后的效果则大大改善，在实际的测试中对标志标线的都比较清楚，能够还原采集到的原始图像。
如前所述，高清环视的应用必然是一个趋势。笔者的整个系统通过评估可以达到与LVDS传输几乎一样的应用效果。由于R-CAR T2提供了硬件的压缩方案，这样就大大缩短了整个系统的传输延时。前面提到了只考虑硬件图像压缩大概在1ms以内完成，目前笔者的系统中图像从采集到拼接显示到中央TFT屏上面可以在10ms之内完成。而10ms的延时对于人眼的反应来讲是完全可以忽略的。希望我的经验能对各位从事相关开发的“攻城狮”们能有所帮助。
作者：简单的匠人
- |
- +1 赞 0
- 收藏
- 评论 4
本网站所有内容禁止转载，否则追究法律责任！
评论
全部评论（4）
-
![]()
![]()
用户_8239 Lv7. 资深专家 2018-03-03这个很实用，很厉害，很有前途。 -
![]()
![]()
崽崽 Lv6. 高级专家 2017-12-17哥厉害 -
![]()
![]()
阿冰 Lv8. 研究员 2017-12-13这个很nb -
![]()
![]()
期待 Lv6. 高级专家 2017-07-25写的听详细的，收藏
相关推荐
高级3D全景环视系统的最佳解决方案
R-Car第二代SoC旨在为高级3D全景环视系统提供最佳解决方案，并为驾驶人员提供身临其境、安全的驾乘体验。
新应用 发布时间 : 2019-07-10
【应用】无人驾驶先驱者——ADAS系统图像识别SoC方案
SH7766系列产品集成硬件引擎的环绕检测系统，极大优化了影像辅助功能。
新应用 发布时间 : 2019-07-29
【应用】2+1车载SoC芯片，成就不一样的行车记录仪
R-Car E2具有强大的处理性能，配有2+1的处理器组合，为低功耗做了专门优化。
新应用 发布时间 : 2019-07-27
【产品】低功耗全高清ADAS专用低功耗SoC芯片SGKS6802
森国科SGKS6802是一款针对高级辅助驾驶(ADAS)、流媒体后视镜、夜视系统、透雾透霾及图形图像识别与处理等产品开发的ADAS专用低功耗SoC芯片，1080P@30fps+720P@30fps双路码流H.264编码及高质量的ISP处理。
新产品 发布时间 : 2021-07-23
【产品】ROHM面向高端ADAS开发出业界超稳定运行的DC-DC转换器IC BD9S402MUF-C
ROHM面向包括ADAS、信息娱乐系统等日益复杂的车载应用，开发出一款降压型DC-DC转换器IC“BD9S402MUF-C”。将QuiCur™技术融入，在同等性能的车载二次侧DC-DC转换器IC中，实现业界先进超稳定运行。
新产品 发布时间 : 2022-09-07
【经验】R-Car H3/H3N/M3 SoC芯片的AVS模块介绍及寄存器的配置
Renesas推出驾驶安全辅助系统和车载信息娱乐系统的第三代R-Car SoC芯片，内核方面使用的是Cortex-A57 CPU、Cortex-A53 CPU和Cortex-R7，主要面向无人驾驶、智能辅助驾驶、车机、仪表和ADAS等应用场景，并以其强大的算力和丰富的外设资源赢得了广大车厂和Tier 1的认可。本文将介绍瑞萨R-Car H3/H3N/M3的AVS模块介绍及寄存器的配置。
设计经验 发布时间 : 2020-03-21
【产品】 瑞萨第三代汽车级SOC RCAR-M3带你走进自动驾驶时代
瑞萨电子推出第三代Rcar系列芯片，致力于高级安全（智能）驾驶系统和车载娱乐系统，建立一个完善的无人驾驶领域半导体的技术平台。其中新的Rcar-M3成员（SOC），提供ARM双核cortex-A57以及4核cortex-A53的高CPU性能、3D图像识别处理引擎，符合ISO 26262（ASIL-B）的安全等级，支持系统级封装（SiP）集成高速缓存，功能完善，完美支持先进驾驶辅助系统的开发设计。
新产品 发布时间 : 2018-07-29
【经验】SoC R CAR V3H2 端侧推理输出的rcar_output.npy数据查看方法
RENESAS R CAR V3H2 端侧推理输出的数据有cvs格式，总共512个输出，同时把cvs数据转化为npy格式保存为一个rcar_output.npy文件，那我如何查看这些数据呢，本文记录数据查看方法。
设计经验 发布时间 : 2023-09-23
【产品】瑞萨新一代SOC R-Car V3H，专为自动驾驶前置摄像头应用
瑞萨开发了专门针对前置摄像头应用的SoC——R-Car V3H，集成了专门针对图像处理的功能单元，它比R-Car V3M在视觉处理方面的性能提高了5倍，并只有0.3瓦的超低功耗，更好的适应自动驾驶的需求。
新产品 发布时间 : 2018-03-07
【产品】全新开放式平台，加大对ADAS及自动驾驶的支持
新型R-Car V3M SoC符合ISO26262功能安全标准，为视觉处理提供了低功耗硬件加速功能，还配有内置图像信号处理器。
新产品 发布时间 : 2017-04-25
【经验】SoC R CAR V3H2 cnn模型转换后执行以及benchmark过程实操指南
RENESAS SoC R CAR V3H2 cnn模型转换后的输出文件有bcl和.pb 2类，都是可以在端侧执行的，本文记录.pb的推理输出以及benchmark过程实操及解析。
设计经验 发布时间 : 2023-09-21
【经验】使用瑞萨SoC R CAR V3H2 cnn工具链实现onnx模型转caffe模型的实操
R CAR V3H2 的cnn神经网络模块需要运行int16的定点模型，而onnx模型首先需要通过cnn工具链转成caffe模型，然后再转成端侧的可执行模型，本文使用瑞萨的cnn工具链实现onnx模型转caffe模型。
设计经验 发布时间 : 2023-08-14
【经验】SoC R CAR V3H2 CNN工具链转换restnet18 caffe模型为端侧可执行命令过程解析
RENESAS SoC R CAR V3H2 CNN工具链最主要的功能就是把caffe,onnx等模型转换为V3H2 芯片端可执行模型，命令，本文记录并分析此转换过程。
设计经验 发布时间 : 2023-09-16
【经验】瑞萨SOC R CAR V3H2 cnn工具链docker环境制作以及注意事项
瑞萨（RENESAS）SoC R CAR V3H2 cnn工具链是一个复杂的应用环境，需要多种安装包的安装以及依赖，我们通常把它单独制作为一个docker镜像，以容器的方式来使用cnn工具链，本文记录R CAR V3H2的cnn docker镜像制作以及注意事项。
设计经验 发布时间 : 2023-08-13
360全景！——R-Car V2H应用于ADAS系统
瑞萨推出的首款R-Car系列的ADAS器件R-Car V2H，其包含的附加功能可提高性能、降低功耗、并增强传统汽车和新兴无人驾驶汽车的安全性。
新产品 发布时间 : 2016-02-02
电子商城
品牌：SILICON LABS
品类：Wireless Gecko SoC
价格：￥8.1764
现货： 104,628
品牌：SILICON LABS
品类：Mighty Gecko Multi-Protocol Wireless SoC
价格：￥27.0929
现货： 90,767
品牌：SILICON LABS
品类：Wireless Gecko SoC
价格：￥10.4994
现货： 61,784
品牌：SILICON LABS
品类：Wireless Gecko SoC
价格：￥11.5212
现货： 59,367
现货市场
服务
世强深圳实验室提供Robei EDA软件免费使用服务，与VCS、NC-Verilog、Modelsim等EDA工具无缝衔接，将IC设计高度抽象化，并精简到三个基本元素:模块、引脚、连接线，自动生成代码。点击预约，支持到场/视频直播使用，资深专家全程指导。
实验室地址： 深圳 提交需求>
Ignion可支持多协议、宽频段的物联网天线方案设计，协议：Wi-Fi、Bluetooth、UWB、Lora、Zigbee、2G、3G、4G、5G、CBRS、GNSS、GSM、LTE-M、NB-IoT等，频段范围：400MHz~10600MHz。
最小起订量： 2500 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论