【经验】USB Camera设备接入到地平线的X3生态开发板通用方法，免去了不同型号camera适配带来的开发成本
camera接入到开发板的方式传统的是通过MIPI，但是这种方式不具有通用性，如果用户更换camera，需要重新适配camera。本教程介绍了将通用的标准USB Camera设备接入到地平线的X3生态开发板的方法，免去了不同型号camera适配带来的开发成本。地平线X3处理器处理从usb camera采集到视频后做智能分析后，通过web展示渲染结果。
方案设计
方案整体流程如下图所示
通用的camera设备通过USB接口连接到地平线X3生态开发板，经过智能分析后，X3开发板将视频和智能检测结果通过以太网输出到PC的web端，实现视频的获取、处理和实时渲染展示。
教程
Prerequisite：您需要了解地平线AI-Express应用开发中间件，熟悉Linux平台下的代码编译、部署。
硬件环境：本方案可以部署、运行在地平线X3-Dev开发板上。
软件环境：本方案基于地平线AI-Express应用开发中间件进行开发。
编译环境：您可以使用Docker镜像，其中内置了部分工具包。如果您不使用Docker镜像，则需要安装如下的交叉编译工具。
开发教程
本教程将介绍利用XProto基于USB Camera搭建一个完整的智能应用。
本方案使用到了XProto中的VioPlugin, SmartPlugin, 和WebSocketPlugin。
VioPlugin的的输入源分为两类，实时视频和本地图片回灌，两种模式使用的vio配置不同。对于USB Camera，虽然输入是实时视频，但是vio的配置使用的是回灌配置。原因为USB Camera作为输入在vio plugin内部的处理类似于回灌，具体流程为：
VioPlugin内部需要将USB Camera输出的视频流/图片经过转码后回灌送到金字塔，类似于本地图片回灌流程。USB Camera输出的视频流无法像MIPI接口的Camera直接将视频流送到金字塔。
从USB Camera获取视频流/图片的流程：
USB Camera连接到X3开发板后会自动加载驱动，对应的设备符为/dev/video8。
一般USB Camera支持输出的视频格式包括H264和H265，输出的图片格式为YUY2，MJPEG等，具体需要查看使用的Camera设备。本示例设置的输出格式是YUY格式的图片，分辨率为1920*1080。
运行方式
1、在ai-express-release包中运行“bash build.sh x3 && bash deploy.sh”进行编译和打包，命令成功执行后会生成deploy部署包。
2、将USB Camera设备接入X3开发板的USB接口。
3、在板子上运行deploy包内的run.sh脚本，“sh run.sh face x3dev usb_cam”，开始从camera读取视频流并做智能分析。
4、通过浏览器访问开发板IP，web展示端查看视频流和渲染结果。
- |
- +1 赞 0
- 收藏
- 评论 0
本文由zc转载自地平线，原文标题为:X3开发板接入usb camera，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。
相关推荐
地平线旭日X3系列智能芯片开发经验资料汇总
旭日X3 是地平线针对 AIoT 场景，推出的新一代低功耗、高性能的智能芯片；集成了地平线最先进的伯努利2.0 架构引擎( BPU® )。包含 X3M 和 X3E 两颗芯片，X3M 主要面向 8M 智能前视市场和边缘计算，提供 5TOPS 算力；X3E 主要面向 5M 智能前视市场，提供 3TOPS 算力。
人手关键点检测算法示例
本文主要介绍了地瓜机器人的X3RDK的系统应用在人手关键点检测算法的示例以及使用说明，并给出具体功能代码。
【经验】地平线X3M SDB开发板烧录ubuntu镜像实操和注意事项
地平线X3M SDB开发板，地平线论坛已经支持yocto linux和ubuntu两种SDK包，本文实操烧录ubuntu镜像以及说明注意事项。
地瓜创客孵化营 | 让每一块 RDK X5，都成为你手中的机器人！
地瓜机器人开发者日就要来啦！面向智能计算与机器人解决方案的通用型开发板新品RDK X5，接口丰富，极具性价比，具有10T算力，与强大的图像处理能力，助力开发者轻松实现多种智能应用。加入“地瓜创客孵化营”你将和一群“地瓜创客”一起找到将你的开发板转变为智能机器人的最佳路径。
AI加速边缘计算，聚焦AIOT芯片，NPU SOC，离线语音MCU，高算力智能模组等
世强硬创联合地平线，阿普奇，启英泰伦，美格智能，普林芯驰，唯创知音，九芯电子，芯闻，VINKO，MERRY带来AI新产品，聚焦AIOT芯片，NPU SOC，离线语音MCU，高算力智能模组等，加速边缘计算。
X3批准的供应商名单
该资料列出了X3平台支持的各类元器件供应商列表，包括LPDDR4、DDR4、NAND FLASH、NOR FLASH和传感器。具体内容包括供应商名称、元器件型号、频率、容量、工作温度等信息，以及AI on Horizon的兼容性情况。
地平线 - LPDDR4,NAND闪存,NAND FLASH,传感器,DDR4,NOR闪存,SENSOR,NOR FLASH,K4FBE3D4HM-MGCJ,XTX26Q04C,W25N02JW,MT40A512M16TB-062E,MT40A256M16LY-062E AIT,GD5F1GQ5XEXXG,GD5F4GQ4UA,K4F6E3S4HM-MGCJ,X3,K4F8E304HB-MGCJ,MT53D1024M32D4DT-046AAT,GD25LQ256D,GD5F1GRQRBXIG,F50D4G41XB,K4A8G165WC-BCTD,W25M02GV,W25Q256JW,H9HCNNN4KUMLHR-NMI,IS25WP512,H9HCNNNBKUMLXR-NEE,NT6AN512T32AV-J1,GD25LQ128D,W25N02GW,GD5F1GQ4RCXXG,NT6AN256T32AV-J2,K4A4G165WF,MT53E1G32D2FW-046AUT:A
【经验】地平线X3M开发板添加dummy_codec虚拟声卡驱动的方法
一个完整的声卡信息由cpu_dai，codec_dai，platform，dai_link组成。本文将详细介绍地平线X3M开发板添加dummy_codec虚拟声卡驱动的方法。
地平线机器人开发者创享日，推出全新NodeHub应用中心、RDK X3机器人开发者套件及机器人操作系统
7月25日，“地平线2023机器人开发者创享日”在深圳成功举办。活动现场，地平线官宣了一系列重要发布：全新地平线RDK系列机器人开发者套件正式上线，机器人操作系统 TogetheROS.Bot™2.0版发布，应用中心NodeHub首发亮相，地平线开发者社区改版上线。
【经验】地平线X3开发板使用指南
本文主要讲述地平线X3开发板的使用说明，主要包含：1.了解X3开发板；2.烧写镜像；3.串口或网口登陆开发板；4.uart烧写【uboot被擦除时使用】。
【IC】地平线新品发布，硬件模组RDK，高达96TOPS算力的RDK Ultra系列 ∣ 视频
地平线官宣系列重要发布：全新地平线RDK系列机器人开发者套件正式上线，机器人操作系统 TogetheROS™.Bot 2.0版发布，应用中心NodeHub首发亮相。
RDK X3模块产品简介
RDK X3 Module是一款基于地平线旭日®3系列智能芯片的模块，具备强大的端侧通用和人工智能算力。该模块具有四核Cortex® A53处理器、5Tops算力、最高4GB内存和支持4K@60帧视频编解码等功能。它兼容树莓派CM4，提供多种接口，包括HDMI、千兆以太网、USB 3.0等，并支持双频无线局域网和蓝牙4.2。此外，RDK X3 Module可提供不同容量的RAM和eMMC存储选项。
地平线 - MODULE,模组,RDK X3 MD 002032,RDK X3 MD 104032,RDK X3 MD 002016,RDK X3 MD 104064,RDK X3 MD 102032,RDK X3 MD 004064,RDK X3 MD 004032,RDK X3,RDK X3 MD 102016
【经验】地平线开发板J3刷机问题及操作记录
本文介绍了在地平线J3开发板上面完成刷机以及跑通AI-Express的demo过程中遇到的问题并详细讲解。首先先刷efuse；刷完之后，利用串口进去改一下板子ip；最后按照github上编译AI-Express。
【经验】地平线开发板X3派mjpg-streamer环境安装和测试
基于Linux系统平台下已经开发出众多的优秀的开源软件，用户在开发某一功能前，可以利用这些开源软件来做评估。mjpg‐streamer作为一款开源的V4L2测试框架，可以方便的供用户评估视频相关的功能。
地平线RDK X3语音通信算法通过Alexa ACM方案认证，接口兼容树莓派具有5TOPS端侧推理与4核A53处理能力
地平线RDK X3的语音通信算法通过ACM Qualification认证。ACM认证主要面向通信降噪和回声消除算法领域，帮助Alexa设备顺畅地连接与通信。此次通过认证的语音通信算法，依托地平线RDK X3打造，在通信降噪和回声消除方面具备强劲的性能表现。
电子商城
现货市场
服务
提供7~27寸工控机定制，支持嵌⼊式/ 壁挂式 /桌⾯式/悬挂式等安装方式，采用纯平⾯板IP65防尘防⽔等级，莫⽒7级硬度触摸屏，兼容多种操作系统：组态软件/安卓/XP/win7/8/10/Linux等，支持主板、接⼝、外观、⽀架、刷卡器、⾝份证阅读器、LOGO、⻨克⻛、系统、电池、蓝⽛、4G/5G、摄像头、GPS系统、⼆维码扫描器、指纹等特殊应⽤场景定制
最小起订量： 1台 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论