瑞萨与StradVision合作开发下一代ADAS智能摄像头,采用全新R-Car SoC
全球领先的半导体解决方案供应商瑞萨电子株式会社(RENESAS),与具备深度学习专业知识的自动驾驶视觉处理技术解决方案提供商StradVision,于2019年9月26日宣布联合开发基于深度学习的视觉处理解决方案,用于下一代高级驾驶辅助系统(ADAS)的智能摄像头,适用于ADAS Level 2 及以上级别。
为了避免在城市地区发生的常见危险,下一代ADAS需具备高精度视觉处理能力,能够检测出行人和骑行者等所谓弱势道路使用者(VRU)。同时,对于大众市场的中低端车辆,这些系统必须实现非常低的功耗。瑞萨与StradVision的全新解决方案同时实现了这两个目标,旨在加速ADAS的广泛应用。
瑞萨电子汽车技术客户合作事业部副总裁吉田直树表示:“作为视觉处理技术的领导者,StradVision在应用瑞萨R-Car SoC开发ADAS解决方案方面拥有丰富经验。通过此次合作,我们带来了量产级解决方案,面向未来打造安全和精准的移动性能。这一基于深度学习的全新合作解决方案针对R-Car SoC进行了优化,将有助于下一代ADAS的广泛采用,并可支持未来几年内不断提升的视觉传感器要求。”
StradVision首席执行官Junhwan Kim表示:“StradVision很高兴能够与瑞萨联手,帮助开发人员有效推进ADAS的下一次重大飞跃。这一共同努力不仅可以转化为快速有效的评估方案,而且将大大提升ADAS的性能。未来几年中,预计前置摄像头市场将会大规模增长,StradVision和瑞萨联手打造优势技术,无疑将保持双方在该领域的领先地位。”
StradVision基于深度学习的视觉处理软件为车辆、行人和车道的识别等提供了高性能。该高精度视觉处理软件已针对瑞萨R-Car汽车片上系统(SoC)产品R-Car V3H和R-Car V3M进行了优化,而R-Car系列产品已在量产车型中拥有良好的应用业绩。以上R-Car系列产品搭载了CNN-IP(卷积神经网络知识产权)深度学习处理专用引擎,使其能够以最低功耗高速运行StradVision的SVNet汽车深度学习网络。此次合作开发的视觉处理解决方案实现了基于深度学习的视觉处理能力,同时保持了低功耗,使其适用于量产车辆,进而推动ADAS的采用。
基于深度学习的视觉处理解决方案的关键特性:
(1) 解决方案同时支持早期评估及量产车型
StradVision的SVNet深度学习软件是一款强大的AI感知解决方案,用于量产的ADAS系统。它因在弱光环境下的识别精度和识别对象被其它物体部分遮挡时的处理能力而备受关注。R-Car V3H的基本软件包可同时执行车辆、人员与车道的识别,以每秒25帧的速度处理图像数据,实现快速评估和POC开发。以这些功能作为基础,如果开发人员希望通过添加符号、标记和其它物体作为识别物体来定制软件,StradVision可为基于深度学习的视觉处理提供支持,面向量产车辆,涵盖从培训到软件嵌入的所有步骤。
(2) R-Car V3H和R-Car V3M SoC在降低成本的同时提升了智能摄像头系统的可靠性
除了CNN-IP专用深度学习模块,瑞萨R-Car V3H和R-Car V3M还搭载了IMP-X5图像识别引擎。将基于深度学习的复杂物体识别与高度可验证的图像识别处理同人为规则相结合,使设计人员能够构建一个强大的系统。此外,方案还设计了片上图像信号处理器(ISP)对传感器信号进行转换,用于图像渲染和识别处理,从而可以采用无内置ISP的低成本摄像头进行系统配置,以降低BOM成本。
采用全新联合开发的深度学习解决方案的瑞萨电子R-Car SoC(包括StradVision的软件与开发支持),计划于2020年初向开发人员供货。
- |
- +1 赞 0
- 收藏
- 评论 121
本文由宝丁转载自Renesas,原文标题为:瑞萨电子与StradVision合作开发下一代ADAS智能摄像头,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
相关推荐
硬创峰会热点提前知:新能源、车联网、自动驾驶为汽车论坛关键词
硬创峰会热点提前知:新能源、车联网、自动驾驶为汽车论坛关键词
【应用】搭载R-Car SoC与RH850适用于电气架构的车载通信网关的解决方案,促进具有多种服务功能电动汽车的量产
Renesas与生态系统合作伙伴CETITEC合作开发了Vehicle Computer 2评估平台。它基于完整的瑞萨芯片组,涵盖了高达40k DMIPS的性能的通信网关/车载服务器应用。该盒子可用于评估、快速原型制作或数据记录,并为汽车要求和通信标准(如CAN(FD),LIN,MOST,FlexRay,PCIe和以太网)提供特定支持。
Renesas Shifts Mobility System Development into High Gear with Its New Online Market Place for R-Car SoC
Renesas automotive system-on-chips offers developers quick access to evaluation software and documentation to jump start evaluation and speed time to market.
Renesas(瑞萨)汽车产品选型指南
目录- 汽车微控制器 汽车信息系统 - 微控制器 微控制器工具 片上系统 片上系统工具 电源电压产品 分立式电源产品 电机驱动器 可配置的混合信号IC 触觉驱动器 汽车传感器解决方案 无线电源产品 时钟和时序解决方案 视频和显示控制器 光电耦合器 零件编号系统一般信息介绍
型号- R-CAR V3X,Y-RH850-P1X-144PIN-PB-T1-V2,NP60N04VUK,Y-RH850-F1X-100PIN-PB-T1-V3,Y-RH850-F1X-233PIN-PB-T2-V1,NP45N06PUK,NP75N04YUK,NP75N04YUG,R-CAR V4H,NP35N04YUG,R8A779M8,R8A779M7,R8A779M0,NP16N06YLL,R8A779M2,R8A779M1,R8A779M4,R-CAR GEN4,R8A779M3,R-CAR V4X,R-CAR E3E,R8A779M6,R8A779M5,DA9131-A,5P49V60,RL78/F1X,R-CAR M3E-2G,R8A779MB,DA9214-AT,DA7280-A,Y-R-CAR-M3N-SIP-BOARD-SKT-ES20,R5F109LD,R5F109LC,R5F109LB,RH850/D1M1A,R5F109LA,R-CAR D3,SLG46857-A,R5F109LE,NP36P04SDG,Y-RH850-F1X-324PIN-PB-T1-V1,ISL78714,Y-RCAR-V4H-WHITEHAWK-BRD-WS10,DA9215-AT,RTE0T00020KCE00000RE2,Y-ASK-RL78F14-V2,R-CAR D3E,R8A77980A,RAJ2800024H11HPF,R7F702300EABA,DA9132-A,NP160N055TUK,R-CAR S4-4,Y-ASK-RL78F15-V2,ZSC31150,NP45N06VDK,RL78/F13-CAN,DA9213-AT,RH850/ F1K,DA9141-A,NP50P04SDG,Y-QB-V850E2-EE,R-CAR S4-8,Y-RH850-P1XC-404PIN-PB-T1-V2,RH850/F1KM-S1,RH850/F1KM-S4,Y-RH850-X2X-MB-T1-V1,RTE0T00001FWREA000R,RTE7702200EAB00000J,Y-ASK-RH850F1KM-S1-V3,Y-RH850-D1L2-PB-TET-V1,R7F702300EBBG,R7F702300EBBB,RTP8A77980ASKB-0CW0SA001#WS,DA9224-AT,R5F10BAG,R5F10BAF,R5F10BAE,R5F10BAD,R7F702011EABG,R5F10BAC,NP29N06QUK,RTP0RC77995SEB0010S,NP89N04PUK,R-CAR H3,RH850/F1KH-D8,R7F702011EABA,RTP0RC7796SIPB0012SS5A,DA9142-A,NP20P06YLG,Y-RH850-E2X-292PIN-PB-T1-V2,NP179N04TUK,R5F10BBG,R5F10BBF,EWRL78,R5F10BBE,R5F10BBD,R5F10BBC,Y-RH850-E2X-373PIN-PB-T1-V3,R8A779FXLAX0BG,NP75P04YLG,RL78/F12,RL78/F13,RL78/F14,DA9130-A,RL78/F15,R-CAR V3M,R5F10AAA,R5F10DGD,Y-QB-R5F113TL-TB-V2,R5F10DGC,Y-R-CAR-V3M-BOARD-DEV-ES20,R-CAR V3H,RBA250N04AHPF-4UA01,NP30N06QDK,TW8832S,R5F10AAE,R5F10AAD,Y-ASK-RCAR-M3W-8GB-WS30,R5F10AAC,NP35N04YLG,R5F10DGE,R7F701412,Y-ASK-RCAR-V3H-WS11,R7F701652,R7F701410,R7F701653,R7F701411,Y-RH850-P1X-100PIN-PB-T1-V2,R7F701650,R7F701651,Y-RH850-F1X-144PIN-PB-T1-V3,R7F701649,R7F701408,R7F701647,R7F701648,R7F701645,R7F701403,NP15P06SLG,R7F701646,ISL79988,R5F10ABA,ISL79987,Y-QB-RL78D1A2-ZZZ-EE,NP90N04VUK,Y-RH850-D1M2H-PB-DEV-V1,R5F10ABE,R5F10ABD,QB-R5F109GE-TB,RBA160N04AHPF-4UA01,R5F10ABC,R7F701421,R7F701422,ΜPD166033,ΜPD166032,RAA279971,ΜPD166034,RAA279972,R7F701417,R-CAR M3,RV1S2752Q,R5F10CGD,R5F10CGC,R5F10CGB,Y-RH850-U2A-144PIN-PB-T1-V1,Y-QB-RL78F14-ZZZ-EE,Y-SBEV-RCAR-KF-M06,SLG46827-A,RH850/C1M-A2,RH850/C1M-A1,R7F702012AEABG,RTE7701460EPA00000R,R5F10PAE,RAA2S4251B,R5F10PAD,R7F701623,R-CAR GEN4 系列,R7F702012AEABA,ZSSC4132,Y-R-CAR-H3-8GB-BOARD-SKT-WS30,NP109N055PUK,ISL78434,R7F701401,R7F701644,R7F701402,Y-ASK-RCAR-V3H-WS21,DA9223-AT,NP90N06VLK,R5F10PBE,R5F10PBD,R5F10BGF,Y-RCAR-V3H-CONDOR-I-BRD-WS20,R5F10BGE,SLG46880-A,R5F10BGD,Y-RH850-X1X-MB-T1-V1,R5F10BGC,R8A77970,ISL78424,ZSSC3154,DA9062-A,ISL76671,R5F10BGG,NP75N055YUK,NP89N055PUK,NP20P04SLG,R5F113GL,RH850/P1L-C,R5F113GK,ZSSC4151,R5F10DLE,R5F10DLD,R5F10968,R-CAR M3NE-2G,ISL78610,R5F1096E,R5F1096D,R5F1096C,R5F1096B,R5F1096A,Y-ASK-RCAR-V3M-WS20-REV2,RTP0RC77951SKBX010SA03,P9149W,R5F10AGG,R5F10DMJ,QB-R5F10BMG-TB,R5F10AGF,ZSSC3170,R5F10AGE,R5F10AGD,R5F10DMG,R5F10AGC,R5F10DMF,Y-RH850-U2A-292PIN-PB-T1-V2,R5F10DME,R5F10AGA,R5F10DMD,ISL78600,RL78/F13-LIN,Y-R-CAR-D3-BOARD-DEV-WS11,DA9063-A,R- CAR H3NE-1.7G,R7F701710,RH850/P1M-C,RH850/P1M-E,DA9063L-A,QB-R5F10PPJ-TB,Y-RH850-X1X-MB-T2-V1,NP50P06KDG,ZSSC4175,R7F701708,R5F10CLD,R7F701709,NP75N04VUK,5P35023,5P35021,Y-ASK-RCAR-V3M-WS20,NP15P04SLG,R7F701278EAFP,Y-RH850-F1X-048PIN-PB-T1-V1,ZSSC4169,NP100P04PDG,R7F701715,R7F701714,R7F701711,Y-RH850-P1XC-292PIN-PB-T1-V2,ZSSC4161,ZSSC4162,ISL76683,Y-QB-RL78F15-ZZZ-EE,ZSSC4165,R5F10CME,R5F10CMD,R7F701371,R7F701372,NP60N04VDK,R-CAR V4X系列,RH850/X2X,Y-RH850-TFT-EXT-BRD,RH850/F1K,R5F10PGH,R7F701379,R5F10PGG,R5F10PGF,R7F701377,R5F10PGE,R7F701378,Y-RH850-E2X-40NM-EMU-ADAPTER-REV2,R5F10PGD,R7F701375,NP100P06PDG,R7F701376,DA9214-A,R7F701373,R7F701374,R5F10BLC,R5F10DPE,TW8819,R5F10PGJ,SLG46620-A,F1KM-S4,R5F10DPL,R5F10DPK,R5F10DPJ,R5F10BLG,R5F10BLF,R5F10BLE,R5F10DPG,R5F10BLD,R5F10DPF,R7F701382,R7F701383,R7F701380,R7F701381,ISL78365,R-CAR M3E,NP16N06QLK,R5F113LK,R7F701388,R7F701389,R5F10TPJ,R7F701386,R7F701384,R7F701385,NP90N04VLK,R5F113LL,TW8809,RTP8J77961ASKB0SK0SA05A,R5F10BMG,R5F10BMF,R5F10BME,R-CAR M3N,NP33N06YDG,5PB1110,RTE0T0002LKCE00000R,Y-ASK-RCAR-H3-8GB-WS30,R7F701275EABG,Y-BLDC-RH850F1KM-S1-V2,R5F113ML,R5F113MK,R7F701597,NP90N06VDK,NP50P03YDG,DA9215-A,ΜPD166031A,R5F10ALD,R5F10ALC,Y-RH850-F1X-176PIN-PB-T1-V4,NP20P06SLG,NP30N04QUK,TW8832,R5F10ALG,TW8836,R5F10ALF,R5F10ALE,NP83P04PDG,TW8834,DA9141-AT,RH850/X1X,RAA271005,RAJ2800044H12HPF,F1KM-S1,RAA271001,RAA271000,5PB1104,NP36P04KDG,R5F10AME,R-CAR S4,DA9130-AT,RH850/U2A16,RTP0RC77990SEB0020SA00,NP100N04PUK,RH850,Y-RH850-P1XC-144PIN-PB-T1-V1,R5F10DSL,R5F10DSK,R5F10AMG,R5F10DSJ,TW8824,R5F10AMF,TW8823,R7F701690,R7F701691,RH850/ F1KH-D8,DA9142-AT,RTP0RC77965SIPB012S-S,RV1S9184Q,R7F701694,R7F701695,R7F701692,R7F701693,RAA2S4253B,R7F701689,RH850/P1H-C,IPS2550DE1R,NP45N06VUK,NP50P04KDG,R5F10PLE,R5F113PG,R7F701580,R7F701581,DA9063L-AT,Y-R-CAR-M3W-8GB-BOARD-SKT-WS30,R-CAR GEN3E 系列,RH850/P1X-C,R7F701586,R5F10PLJ,R5F113PL,R7F701587,R5F113PK,R-CAR V3X 系列,NP36P06KDG,R5F10PLH,R5F113PJ,DA9224-A,R5F10PLG,R7
【经验】VMware Workstation 14下载及安装详解
VMware Workstation Pro 是将多个操作系统作为虚拟机 (VM) 在单台 Linux 或 Windows PC 上运行的行业标准。方便Renesas R-CAR SoC等嵌入式平台的软件开发环境搭建。本文详细讲解了VMware Workstation 下载及安装。
How to Build Together a Safe and Efficient AD & ADAS Central Computing Solution
Should RENESAS stop here and call it a success? Clearly no! Progress has no limits and by working together we ensure to constantly update our understanding of how autonomous systems of tomorrow will be and anticipate that by providing state-of-the-art processing solutions that would bring them successfully to the mass market.
【产品】瑞萨新一代SOC R-Car V3H,专为自动驾驶前置摄像头应用
瑞萨开发了专门针对前置摄像头应用的SoC——R-Car V3H,集成了专门针对图像处理的功能单元,它比R-Car V3M在视觉处理方面的性能提高了5倍,并只有0.3瓦的超低功耗,更好的适应自动驾驶的需求。
【产品】全新开放式平台,加大对ADAS及自动驾驶的支持
新型R-Car V3M SoC符合ISO26262功能安全标准,为视觉处理提供了低功耗硬件加速功能,还配有内置图像信号处理器。
瑞萨公开下一代车用SoC和MCU处理器产品路线图,全新R-Car MCU系列扩展其车辆控制产品阵容
瑞萨电子公开了针对汽车领域所有主要应用的下一代片上系统(SoC)和微控制器(MCU)计划。未来产品阵容包括采用先进小芯片封装(Chiplet)集成技术的R-Car SoC和基于Arm®核的车用MCU。
【应用】瑞萨输入电压2.7~5.5V的PMIC RAA271000助力车载CMS设计,符合车规级认证
瑞萨PMIC RAA271000完全过车规认证,完全满足汽车CMS项目需求,集成度高,搭配瑞萨R-CAR soc使用,稳定性更高,适配性更好。输入电压2.7~5.5V,满足系统工作电压需求。
【经验】R-Car V3M/H接入2片AVT的RX芯片NS2521实现4路摄像头360环视探索的方法
Renesas的R-Car V3M、R-Car V3H的摄像头并口接入瑞发科的AVT接收芯片,实现4路摄像头的图像接入,从而来实现360度环视拼接功能,那么具体是如何对接的呢?本文详细讲解2颗AVT的RX芯片NS2521接入R-Car V3M/H的原理以及具体方法。
AS244 R-Car V3H视频输出扩展解决方案,适用于环视和AR-HUD
描述- 该资料介绍了Renesas Electronics Corporation的AS244 R-CAR V3H视频输出扩展解决方案,适用于环绕视图和增强现实抬头显示(AR-HUD)应用。该方案结合了R-CAR V3H和TW8846/8847,实现视频输出和AI处理,降低系统BOM成本。主要特点包括易于扩展、高精度AI图像识别、功能安全支持、组件集成等。资料还详细介绍了相关设备和组件的关键特性。
型号- RAA271082A4HNP#HA0,R-CAR M3E-2G,TW8847-LA1-CE,RAA271050,RAA271082A4HNP#AA0,5P35021-000NDGI,TW8846-LA1-CE,R-CAR M3E,RAA279971D3HNP#AA0,R8A77980,SLG46827-AG,R-CAR V3H,RAA279972C3HNP#AA0,5P35021,RAA271000A4HBG#AC0,RAA278840B3HFP#AA0,RAA271000,RAA271082,RAA279971,RAA278840,RAA279972,R8A77980A,5P35021-000NDG2,5P35021B-000NDGI,RAA271082A4HNP#MA0,TW8847,TW8846
【经验】瑞萨R-Car V3M的eagle摄像头适配过程
R-Car V3M的eagle板自带4路摄像头输入解串器max9286,前端可以接入美信的max96705,max9271等串行器,从而实现R CAR V3M平台的4路摄像头的输入,本文记录了接入美信的max96705+OV490(isp)+OV9284(sensor)摄像头的过程。
【经验】R-Car H3 bsp如何实现PCIE endpoint模式?
R-Car系列的大多数型号都集成了PCIE2.0接口的,该接口可以支持root port和endpoint也就是主从两种模式的,最近有用户在使用两颗R-Car H3做PCIE通讯测试时发现无法配置成endpoint模式,经过测试及追查源代码发现,bsp中PCIE驱动没有对endpoint模式做支持,因此需要自行修改相应的驱动代码。
用于汽车的GreenPak™可编程混合信号平台
型号- DA9063-A,SLG46XXX-A,RJQ7031,SLG46538-AP,RH850/F1L,SLG46880-AP,SLG46827-A,RAA271050,DA9213-A,DA9214-A,RH850 / F1X,SLG46625-A,RBA250N10,SLG46857-A,SLG46620-A,SLG46855-A,SLG46620-AG,RJU7032,NP50N04YUK,SLG47004-A,SLG46855-AP,SLG46857-AP,ISL78434,5P35023,RL78 / F1X,SLG46827-AG,R-CAR M3E,SLG46625-AP,RAA271000,R-CAR H3E,R-CAR E3E,RH850/F1KM,SLG47XXX-A,RH850/C1X,R2A25110,RL78/F14,RL78/F15,SLG47004-AG,R-CAR V3M,SLG46880-A,ISL78206,R-CAR V3H,SLG46538-A,SLG47004-AP
电子商城
现货市场
查看全部10条回复