【技术大神】单芯片SoC助力实现低成本ADAS高清环视系统
作为ADAS系统中非常重要的也是非常基本的一个功能，环视系统被越来越多的应用到了中高端汽车上面。目前市场装配的主要还是标清摄像头系统，但是随着人们对显示质量的要求越来越高，同时也为了满足ADAS整个系统中其它功能的要求，高清环视系统的需求已经提上了日程。
目前在个别车型上面已装配了高清环视系统，但是考虑到高清传输需要大量的数据以及实时性的要求，所以目前的方案主要还是采取LVDS的方式传输。不过LVDS也有一个明显的缺点，那就是成本问题。相对于标清方案，采用LVDS作为传输介质的高清方案的成本会高出很多，这也是目前很多OEM比较关心的问题。笔者最近通过调查发现目前市场上已经开始提供以太网的方案，并且以太网传输的介质是双绞线，这样整套系统的成本将大大降低。RENESAS的R-Car T2就是为了解决这一问题而专门设计的一款SoC产品。笔者在开发的过程中使用了该产品，本文就相关的一些数据结果与大家做一个分享。
高清环视系统中通常至少需要4个摄像头，这4个摄像头传到中央显示单元的时间要一致并且足够短，从而保证实时性的要求。R-CAR T2提供了内置硬件的H.264编码单元，这样摄像头采集到的图像可以直接通过硬件的方式进行压缩。压缩后的数据再通过以太网传给中央显示单元。下面是笔者在使用过程中的一些实验数据结果。
笔者的方案中采用了4个高清数字摄像头。摄像头采集到数据之后，首先进行数据压缩，这一步非常重要，如果采用软件的算法进行压缩，通常光软件算法就需要耗费几十毫秒的时间，而如果是硬件实现H.264的压缩算法的话，这个时间几乎就可以忽略不计了。笔者使用的是摄像头模组进行的开发，也就是把摄像头和R-CAR T2集成到一起。这里高清摄像头的分辨率为1280x960，帧率为30fps。这样从采集图像一直到数据从Ethernet AVB发送出去只需要不到1ms的时间。当我们车辆行驶在100km/h的情况下，1ms的延时车辆刚刚向前行驶了不到2.8cm，在实际情况下这个距离几乎可以忽略不计。
100000米/3600000毫秒=0.02778米
除了延时之外，压缩之后的画质效果是另一个关键问题。有些压缩方法虽然可以使压缩后的数据量变得更小，但往往是以损害解压后的画质为代价的。之前笔者测试过采用MJEPG的方式，解压后的很多画面已经模糊了，尤其是对很多标识上的文字的影响更明显，严重的甚至已经完全无法辨识。采用H.264的方式之后的效果则大大改善，在实际的测试中对标志标线的都比较清楚，能够还原采集到的原始图像。
如前所述，高清环视的应用必然是一个趋势。笔者的整个系统通过评估可以达到与LVDS传输几乎一样的应用效果。由于R-CAR T2提供了硬件的压缩方案，这样就大大缩短了整个系统的传输延时。前面提到了只考虑硬件图像压缩大概在1ms以内完成，目前笔者的系统中图像从采集到拼接显示到中央TFT屏上面可以在10ms之内完成。而10ms的延时对于人眼的反应来讲是完全可以忽略的。希望我的经验能对各位从事相关开发的“攻城狮”们能有所帮助。
作者：简单的匠人
- |
- +1 赞 0
- 收藏
- 评论 4
本网站所有内容禁止转载，否则追究法律责任！
评论
全部评论（4）
-
![]()
![]()
用户_8239 Lv7. 资深专家 2018-03-03这个很实用，很厉害，很有前途。 -
![]()
![]()
崽崽 Lv6. 高级专家 2017-12-17哥厉害 -
![]()
![]()
阿冰 Lv8. 研究员 2017-12-13这个很nb -
![]()
![]()
期待 Lv6. 高级专家 2017-07-25写的听详细的，收藏
相关推荐
高级3D全景环视系统的最佳解决方案
R-Car第二代SoC旨在为高级3D全景环视系统提供最佳解决方案，并为驾驶人员提供身临其境、安全的驾乘体验。
【应用】无人驾驶先驱者——ADAS系统图像识别SoC方案
SH7766系列产品集成硬件引擎的环绕检测系统，极大优化了影像辅助功能。
【技术大神】基于专用通信SoC芯片如何实现网关通信
从硬件到软件再到具体的功能解析，全方位介绍基于通信SoC芯片EC-1的网关应用的整体实现。
REF66012 – 参考设计 ADAS SoC用 PMIC解决方案
本资料介绍了ROHM公司为ADAS SoC设计的PMIC（电源管理集成电路）解决方案。方案包括BD96801Q09-CE2四通道DC-DC转换器和BD9S303MUF-CE23A同步降压转换器，旨在提供高效率和高可靠性。该方案适用于智能前视摄像头（IFC），集成200万像素摄像头和多毫米波雷达，支持L2级前向ADAS功能。它采用Horizon Journey2芯片和Infineon TRAVEO II系列CYT4BF微控制器，实现AEB、ACC等功能。此外，还提供了详细的规格和应用说明。
ROHM - PMIC,DC-DC转换器,BD96801Q09-CE2,BD9S303,BD9S303MUF-CE2,BD96801Q09,BD96801,BD9S303MUF,高分辨率摄像头,智能前视摄像头,ADAS
【产品】低功耗全高清ADAS专用低功耗SoC芯片SGKS6802
森国科SGKS6802是一款针对高级辅助驾驶(ADAS)、流媒体后视镜、夜视系统、透雾透霾及图形图像识别与处理等产品开发的ADAS专用低功耗SoC芯片，1080P@30fps+720P@30fps双路码流H.264编码及高质量的ISP处理。
【产品】 瑞萨第三代汽车级SOC RCAR-M3带你走进自动驾驶时代
瑞萨电子推出第三代Rcar系列芯片，致力于高级安全（智能）驾驶系统和车载娱乐系统，建立一个完善的无人驾驶领域半导体的技术平台。其中新的Rcar-M3成员（SOC），提供ARM双核cortex-A57以及4核cortex-A53的高CPU性能、3D图像识别处理引擎，符合ISO 26262（ASIL-B）的安全等级，支持系统级封装（SiP）集成高速缓存，功能完善，完美支持先进驾驶辅助系统的开发设计。
【经验】R-Car H3/H3N/M3 SoC芯片的AVS模块介绍及寄存器的配置
Renesas推出驾驶安全辅助系统和车载信息娱乐系统的第三代R-Car SoC芯片，内核方面使用的是Cortex-A57 CPU、Cortex-A53 CPU和Cortex-R7，主要面向无人驾驶、智能辅助驾驶、车机、仪表和ADAS等应用场景，并以其强大的算力和丰富的外设资源赢得了广大车厂和Tier 1的认可。本文将介绍瑞萨R-Car H3/H3N/M3的AVS模块介绍及寄存器的配置。
【经验】SoC R CAR V3H2 端侧推理输出的rcar_output.npy数据查看方法
RENESAS R CAR V3H2 端侧推理输出的数据有cvs格式，总共512个输出，同时把cvs数据转化为npy格式保存为一个rcar_output.npy文件，那我如何查看这些数据呢，本文记录数据查看方法。
【产品】瑞萨新一代SOC R-Car V3H，专为自动驾驶前置摄像头应用
瑞萨开发了专门针对前置摄像头应用的SoC——R-Car V3H，集成了专门针对图像处理的功能单元，它比R-Car V3M在视觉处理方面的性能提高了5倍，并只有0.3瓦的超低功耗，更好的适应自动驾驶的需求。
【产品】全新开放式平台，加大对ADAS及自动驾驶的支持
新型R-Car V3M SoC符合ISO26262功能安全标准，为视觉处理提供了低功耗硬件加速功能，还配有内置图像信号处理器。
【经验】SoC R CAR V3H2 cnn模型转换后执行以及benchmark过程实操指南
RENESAS SoC R CAR V3H2 cnn模型转换后的输出文件有bcl和.pb 2类，都是可以在端侧执行的，本文记录.pb的推理输出以及benchmark过程实操及解析。
【经验】使用瑞萨SoC R CAR V3H2 cnn工具链实现onnx模型转caffe模型的实操
R CAR V3H2 的cnn神经网络模块需要运行int16的定点模型，而onnx模型首先需要通过cnn工具链转成caffe模型，然后再转成端侧的可执行模型，本文使用瑞萨的cnn工具链实现onnx模型转caffe模型。
【应用】瑞萨R-Car H3 SoC和RH850/P1H-C MCU HAD解决方案套件，助力汽车自动驾驶技术开发
在高级驾驶辅助系统（ADAS）中，推荐Renesas的HAD解决方案套件，包含R-Car H3 SoC和RH850/P1H-C MCU，能够与摄像头、雷达、激光雷达、车辆与车辆以及车辆与基础设施之间的通信，实现了汽车自动驾驶。
【经验】SoC R CAR V3H2 CNN工具链转换restnet18 caffe模型为端侧可执行命令过程解析
RENESAS SoC R CAR V3H2 CNN工具链最主要的功能就是把caffe,onnx等模型转换为V3H2 芯片端可执行模型，命令，本文记录并分析此转换过程。
【经验】解决瑞萨RZ/T1 SoC芯片最小系统硬驱IIC断点死循环问题
客户反应问题：设置瑞萨RZ/T1高性能SoC芯片最小系统硬驱IIC断点，执行不下去，进入while死循环。本文介绍如何解决该问题。
电子商城
品牌：SILICON LABS
品类：Wireless Gecko SoC
价格：￥8.1764
现货： 101,004
品牌：SILICON LABS
品类：Mighty Gecko Multi-Protocol Wireless SoC
价格：￥27.0929
现货： 90,767
品牌：SILICON LABS
品类：Wireless Gecko SoC
价格：￥10.4994
现货： 50,699
现货市场
服务
Ignion可支持多协议、宽频段的物联网天线方案设计，协议：Wi-Fi、Bluetooth、UWB、Lora、Zigbee、2G、3G、4G、5G、CBRS、GNSS、GSM、LTE-M、NB-IoT等，频段范围：400MHz~10600MHz。
最小起订量： 2500 提交需求>
提供语音芯片、MP3芯片、录音芯片、音频蓝牙芯片等IC定制，语音时长：40秒~3小时（外挂flash），可以外挂TF卡或U盘扩容。
最小起订量： 1pcs 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论