ADAS方案转向R-Car平台—强化主动式安全机制
世强基于瑞萨图像识别SoC SH7766的360度环视ADAS方案在市场广受好评后——“此方案已经在国内一个领先的大巴车上得到批量使用。”世强高级市场经理胡越强表示。术业有专攻,在慕尼黑上海电子展上,世强基于瑞萨车载SoC——R-Car系列的新成员R-Car V2H的全新先进驾驶辅助系统(ADAS)解决方案再度成为业内人士关注的焦点。
最尖端的车载SoC——R-Car H2
"R-Car"是瑞萨车载SoC的一种昵称,它面向在全新综合SoC平台上开发的车载信息系统。RENESAS R-Car 系列为包括嵌入式导航装置在内的、从低端到高端的各种车载信息娱乐系统提供了一个高性能的平台。R-Car系列为音频和视频、先进的3D图形,以及图像识别等驾驶辅助功能提供了增强的多媒体处理功能。
这些增强的功能使第二代的R-Car系列非常适合针对高清显示器和先进驾驶辅助系统ADAS等不断进化的车载信息系统的开发,实现汽车导航和TV/DVD等信息娱乐、与云联网的IT信息、前后方视野等的驾驶辅助。
R-Car H2的最大特点是CPU搭载了多个高性能ARM内核、4个低功耗内核构成了高规格的“R-Car”。尤其是作为车载信息系统LSI,R-Car H2在世界上最早支持“big.LITTLE计算”技术并且实现了低功耗和高性能。另一方面,通过将SH-4A固定用于实时处理,并确保了驾驶辅助等要求的实时性。
而针对ADAS应用,瑞萨有专门的汽车图像处理器R-Car V系列,如下图1所示为瑞萨的ADAS产品线。瑞萨电子拥有明确的产品路线图来支持汽车行业不断增加的新需求。
图1:世强代理的瑞萨电子ADAS产品路线图。
“世强此次带来的高级汽车环视辅助驾驶系统方案就是基于R-Car V2H,它是在R-Car H2的基础上针对ADAS应用而专门定制的芯片,其在R-Car H2的基础上做了精简,例如R-Car V2H的CPU只搭载了ARM内核,但这已经足够满足目前ADAS系统对数据处理能力的需求了。” 胡越强在展会现场表示。
世强ADAS方案从SH7766升级到R-Car V2H
而在展会同期举办的“国际汽车电子创新技术大会”上,胡越强还做了题为“以无人驾驶为目标的汽车ADAS解决方案”的演讲。重点讲述了世强此次带来的基于R-Car V2H的高级汽车环视辅助驾驶系统方案的特点及其与前代基于SH7766的ADAS方案在性能上的对比。
图2:世强专家在上海“国际汽车电子创新技术大会”上演讲。
全新R-CarV2H SoC与SH7766共用架构、IP内核以及软件,并可进行扩展,构筑配备图像识别和视点转换功能的ADAS应用。
“目前,ADAS正以每2年4倍的性能提升速度在快速发展,可以说,每一代技术的更新进步,都使得我们离无人驾驶的最终目标又更进了一步。” 胡越强表示,“从SH7766到R-CarV2H,世强新的ADAS方案在性能上主要有4个方面的提升。” 如下图3所示为世强ADAS系统比较。
图3:世强ADAS的系统比较。
1)图像显示:2D—>3D Top View。
SH7766 配备瑞萨图像识别引擎IMP-X2,而R-CarV2H则配备瑞萨最新的实时图像处理单元IMP-X4内核,IMP-X4在与IMP-X2保持数据库兼容性的同时,将处理性能提高至约八倍以上。对于一些应用,R-CarV2H还支持最多六个独立的输入摄像头通道,允许轻松实现360度摄像头视图和标志识别。另外,通过IMP-X4与进行处理判断的同一芯片上的CPU之间的协作,在保持低功耗的同时实现了先进的图像识别性能。
“由于R-CarV2H的图像处理能力是通过硬核引擎实现,处理速度较DSP方式(软件算法)会更快,这就节省了大量的系统资源,相比而言,竞争方案只是实现了图像的环视,世强的这个方案是真正意义上的辅助驾驶系统。”胡越强强调。
基于SH7766的ADAS方案只能支持4通道的模拟摄像头,而新的以R-CarV2H为基础的ADAS方案将支持 6路数字摄像头。由于处理性能的提升,新的方案将能实现3D Top View并且还可以随时改变视角。
2)处理器内核:SH4A—>ARM Cortex-A15双核
瑞萨电子与ARM已有10年的合作,早在2003年就与ARM缔结多处理器行业战略合作伙伴合约。NEC电子(瑞萨电子的前身) 参与多处理器ARM11的开发,并且已经应用于包括R-Car等在内的多个ASSP产品。瑞萨电子实现了世界顶级的ARM多核集成技术,R-Car H2拥有当前世界最小面积的8核ARM core。
而搭载两个ARM内核的R-CarV2H将工作频率由配备瑞萨自己的SH4A系列内核的533MHz提高到了2GHz。胡越强进一步指出:“采用ARM双核,不只提高了处理速度,同时也使得用户可以更加灵活的进行移植,使得各种外设资源更加丰富。未来,我们会向着8核的方向发展。”
由于开发人员对ARM架构很熟悉,即使缺乏经验的汽车应用工程师,也能利用世强提供的ADAS参考方案,针对不同的车型和级别实现不同的功能和特性的扩展。
3)功能安全(Functional safety):ASIL-A—>ASIL-B
安全是汽车电子永恒的主题,为了实现系统的安全目标,对系统架构中的各个要素(Element),如传感器、控制单元和执行单元(电机),都有功能安全需求。世强新的基于R-CarV2H的ADAS方案满足车辆-功能安全国际标准ISO26262 ASIL-B等级,而去年推出的方案只满足ASIL-A等级。
4)摄像头网络:NTSC—>Ethernet AVB
随着智能手机与车载设备的联动,云和大数据的运用,以及ADAS的普及,利用车载以太网传输车载摄像头影像成为发展的趋势,SH7766 支持 NTSC摄像头,而R-CarV2H则转换到了Ethernet AVB模式。传输速度也从100Mbit/s提升到1Gbit/s,新的方案还能够减少车内网络布线,提高车辆的数据传输安全性。
不只是环视,在主动安全上更进一步
“ADAS通常包括360度环视,车道保持,防撞三部分,而竞争方案实现的全景(视觉辅助系统)只是ADAS三分之一的功能。对于视觉辅助系统,图像处理器仅须具备影像校正和显示功能;而对于车道保持,防撞等驾驶警示/辅助系统则要能进行影像辨识,技术难度更高一个级别。” 胡越强指出。
世强此次带来的这套环视ADAS系统方案具有强大的图像处理能力,能实现超清晰图像和高品质色彩还原;完美的画面明暗表现,来自高动态范围的自动调整;且只有极低的CPU占有率和功耗。此方案可以适用于汽车安全系统,如车道偏离警告系统(LDW)、车道保持辅助系统(LKAS)等典型的ADAS应用。如下图4所示为世强ADAS架构。
图4:世强高级汽车环视辅助驾驶系统方案架构。
从图中可以看到,该方案具有6个数字摄像头,可以实现360度环视功能。而传感器融合ECU则能够帮助驾驶员创建物体地图,进行现状分析,还可以辅助驾驶员做出决策。俯视的控制ECU能实现自动泊车,紧密周边观望,行人识别,停车位检测。下图是现场的Demo演示。
图5:世强演示高级汽车环视辅助驾驶系统方案demo。
图6:实例展示。
实例展示1——两种标定模式可以选择
该方案有全自动标定模式和精准标定模式两种标定模式可以选择。“ 我们的全自动标定模式是强大、可靠的,并不需要相机安装角度的苛刻要求,适应大规模生产。”胡越强指出。
依托动态范围控制(DRC ,Dynamic Range Control)功能,可以实现亮度控制,还能调整复合视频亮度,补偿过亮和过暗,以便驾驶员更清晰地看清图像显示。这使得在光照条件很差,或恶劣环境条件下,采用半自动精准校定工具,提供最好的标定结果。
实例展示2——超级虚拟相机模式
“我们在后视的时候,有一个鱼眼矫正功能,鱼眼会让驾驶员感到图象不直观,我们采用硬件矫正的功能,我们通过矫正曲线拉直,还原成一个真实的视图。” 胡越强说道。
图像渲染器(IMR, Image Render Engine)视点转换引擎可实时制作出因视频输入或场景而异的视点俯视图像,利用三角网格校正失真的模式、自动生成矩形网格内的顶点数据,对图像进行失真校正,旋转,缩小或放大。
“超级虚拟的相机模式,让我们可以生成在任意视角下的虚拟视图,任意使用虚拟相机参数,焦点,生成视图,鱼眼和针眼相机都适合。”
实例展示3——基于环视基础的车道偏离预警系统
基于环视的车道偏离技术打开了新的领域,扩展了环视驾驶辅助系统的应用。
实例展示4——环视俯视画面的多种选择
俯视图可视范围可扩展,俯视图的分割或融合可选择。俯视图的可见区域大小能够一键更改,具有完美拼接和分割效果,还有多种模块的备选(包括:3D效果的环视界面、DVR 、基于3G的视频查看和信息管理、语音倒车指南等)。
未来向更智能化ADAS演进
以上的4个实例展示只是世强360度环视ADAS高级汽车驾驶辅助系统方案所能实现的一部分功能展示。未来,世强将和前装车厂更加紧密的合作,开发更加智能化的ADAS方案,实现更深层次的主动安全高级驾驶辅助功能。
“自动驾驶是在先进驾驶辅助系统——ADAS技术基础上的演进,ADAS 是一个正在发展的应用,OEM厂已经为汽车驾驶定义了长期的目标。预测到2020年会逐步实现主动安全,最终会以2025年为时间节点,届时,无人驾驶汽车将真正驶进现实。” 胡越强预测。
- |
- +1 赞 0
- 收藏
- 评论 1
本网站所有内容禁止转载,否则追究法律责任!
相关推荐
高级3D全景环视系统的最佳解决方案
R-Car第二代SoC旨在为高级3D全景环视系统提供最佳解决方案,并为驾驶人员提供身临其境、安全的驾乘体验。
新应用 发布时间 : 2019-07-10
【应用】无人驾驶先驱者——ADAS系统图像识别SoC方案
SH7766系列产品集成硬件引擎的环绕检测系统,极大优化了影像辅助功能。
新应用 发布时间 : 2019-07-29
【技术大神】单芯片SoC助力实现低成本ADAS高清环视系统
采用LVDS作为传输介质的高清方案的成本会很高,基于R-CAR T2 SoC芯片的以太网方案则大大降低了整套系统的成本。
新应用 发布时间 : 2019-07-27
【产品】 瑞萨第三代汽车级SOC RCAR-M3带你走进自动驾驶时代
瑞萨电子推出第三代Rcar系列芯片,致力于高级安全(智能)驾驶系统和车载娱乐系统,建立一个完善的无人驾驶领域半导体的技术平台。其中新的Rcar-M3成员(SOC),提供ARM双核cortex-A57以及4核cortex-A53的高CPU性能、3D图像识别处理引擎,符合ISO 26262(ASIL-B)的安全等级,支持系统级封装(SiP)集成高速缓存,功能完善,完美支持先进驾驶辅助系统的开发设计。
新产品 发布时间 : 2018-07-29
【经验】SoC R CAR V3H2 端侧推理输出的rcar_output.npy数据查看方法
RENESAS R CAR V3H2 端侧推理输出的数据有cvs格式,总共512个输出,同时把cvs数据转化为npy格式保存为一个rcar_output.npy文件,那我如何查看这些数据呢,本文记录数据查看方法。
设计经验 发布时间 : 2023-09-23
【产品】瑞萨新一代SOC R-Car V3H,专为自动驾驶前置摄像头应用
瑞萨开发了专门针对前置摄像头应用的SoC——R-Car V3H,集成了专门针对图像处理的功能单元,它比R-Car V3M在视觉处理方面的性能提高了5倍,并只有0.3瓦的超低功耗,更好的适应自动驾驶的需求。
新产品 发布时间 : 2018-03-07
【产品】全新开放式平台,加大对ADAS及自动驾驶的支持
新型R-Car V3M SoC符合ISO26262功能安全标准,为视觉处理提供了低功耗硬件加速功能,还配有内置图像信号处理器。
新产品 发布时间 : 2017-04-25
DA16200 Ultra Low Power Wi-Fi SoC
型号- DA16200-00000F22,DA16200-00001F22,DA16200-00001A32,DA16200-RRXXXYYZ,DA16200,DA16200-00000A32
【经验】SoC R CAR V3H2 cnn模型转换后执行以及benchmark过程实操指南
RENESAS SoC R CAR V3H2 cnn模型转换后的输出文件有bcl和.pb 2类,都是可以在端侧执行的,本文记录.pb的推理输出以及benchmark过程实操及解析。
设计经验 发布时间 : 2023-09-21
【经验】车载SoC R-Car H3的YOCTO环境bb文件和软件结构目录说明
Renesas的车载SoC R-Car H3的LINUX是基于YOCTO环境开发的,很多工程师对于这个环境不熟悉,从而导致软件开发过程中出现问题,无从下手,本文从应用YOCTO的相关bb文件,以及相关软件的目录结构来抛砖引玉,可以使工程师对R-Car H3的YOCTO环境有一个较深入的理解。
设计经验 发布时间 : 2020-07-15
【经验】SoC R CAR V3H2 CNN工具链转换restnet18 caffe模型为端侧可执行命令过程解析
RENESAS SoC R CAR V3H2 CNN工具链最主要的功能就是把caffe,onnx等模型转换为V3H2 芯片端可执行模型,命令,本文记录并分析此转换过程。
设计经验 发布时间 : 2023-09-16
【经验】使用瑞萨SoC R CAR V3H2 cnn工具链实现onnx模型转caffe模型的实操
R CAR V3H2 的cnn神经网络模块需要运行int16的定点模型,而onnx模型首先需要通过cnn工具链转成caffe模型,然后再转成端侧的可执行模型,本文使用瑞萨的cnn工具链实现onnx模型转caffe模型。
设计经验 发布时间 : 2023-08-14
瑞萨高性能系统级芯片(SoC)R-Car M3被大陆集团用于其车身高性能计算机
全球领先的半导体解决方案供应商瑞萨电子集团于2020年7月7日宣布,大陆集团(Continental)在其第一代车身高性能计算机(HPC)中采用了瑞萨高性能系统级芯片(SoC)R-Car M3。HPC作为车载计算平台,提供对车辆系统的集中控制,并配备安全网关功能以实现云连接。
行业资讯 发布时间 : 2020-07-08
【经验】瑞萨SOC R CAR V3H2 cnn工具链docker环境制作以及注意事项
瑞萨(RENESAS)SoC R CAR V3H2 cnn工具链是一个复杂的应用环境,需要多种安装包的安装以及依赖,我们通常把它单独制作为一个docker镜像,以容器的方式来使用cnn工具链,本文记录R CAR V3H2的cnn docker镜像制作以及注意事项。
设计经验 发布时间 : 2023-08-13
电子商城
品牌:SILICON LABS
品类:Wireless Gecko SoC
价格:¥8.1764
现货: 104,628
品牌:SILICON LABS
品类:Mighty Gecko Multi-Protocol Wireless SoC
价格:¥27.0929
现货: 90,767
品牌:SILICON LABS
品类:Wireless Gecko SoC
价格:¥10.4994
现货: 61,784
品牌:SILICON LABS
品类:Wireless Gecko SoC
价格:¥11.5212
现货: 59,367
现货市场
服务
可定制变压器电压最高4.5KV,高频30MHz;支持平面变压器、平板变压器、OBC变压器、DCDC变压器、PLC信号变压器、3D电源、电流变压器、反激变压器、直流直流变压器、车载充电器变压器、门极驱动变压器等产品定制。
最小起订量: 100000 提交需求>
可定制车载智能天线频率:20kHz、114.5 kHz、120- kHz、125 kHz、134 kHz、134.2kHz、134.5 kHz;工作温度范围:-40ºC to ~125ºC;电感范围:100~734;符合AEC-Q200(汽车质量标准)和IP68标准;
最小起订量: 1 提交需求>
登录 | 立即注册
提交评论