人体与骨骼关键点检测
功能介绍
mono2d_body_detection package是使用hobot_dnn package开发的单目rgb人体检测算法示例,在地平线X3开发板上使用模型和图像数据利用BPU处理器进行模型推理。 检测模型为fasterRcnn,模型输出包含人体、人头、人脸、人手框和人体关键点检测结果。
示例订阅图片数据image msg,发布自定义的感知结果hobot ai msg,用户可以订阅发布的ai msg用于应用开发。
物料清单
准备工作
地平线RDK已烧录好地平线提供的Ubuntu 20.04系统镜像
摄像头正确连接到RDK X3
使用方法
1. 安装功能包
启动机器人后,通过SSH终端或者VNC连接机器人,点击本页面右上方的“一键部署”按钮,复制如下命令在RDK的系统上运行,完成相关Node的安装。
tros foxy版本
tros humble版本
2. 运行人体检测功能
使用MIPI摄像头发布图片
tros foxy版本
tros humble版本
使用USB摄像头发布图片
tros foxy版本
tros humble版本
3. 查看效果
打开处于同一网络下电脑的浏览器,访问http://IP:8000即可看到视觉识别的实时效果,其中IP为RDK的IP地址:
接口说明
话题
人体识别的结果都通过hobot_msgs/ai_msgs/msg/PerceptionTargets话题发布,该话题的详细定义如下:
参数
- |
- +1 赞 0
- 收藏
- 评论 0
本文由雪飘梦飞转载自D-Robotics官网,原文标题为:人体与骨骼关键点检测,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
相关推荐
在RDK套件上将输入的文本进行任务拆解应用示例
该功能包通过调用通义千问的API,将输入的文本进行任务拆解,并发送请求。
设计经验 发布时间 : 2024-11-07
基于NodeHub智能机器人应用中心是深度学习巡线小车实现示例
视觉巡线Demo基于纯视觉的方法实现赛车在赛道内运动,其中赛道中间有引导线辅助赛车保持在赛道内。NodeHub是地平线为广大机器人开发者提供的“智能机器人应用中心”,该应用中心包含多个类别不同功能的开源Node,能够快速安装和使用,通过串联不同的Node可以完成对三大模块的实现。
设计经验 发布时间 : 2024-11-07
NodeHub包含各种开源Node,能够快速安装和使用 ,助您快速搭建室内服务机器人Demo!
NodeHub是地平线为广大开发者提供给的“智能机器人应用中心”,该应用中心中包含各种不同功能的开源Node,能够快速安装和使用,通过串联不同的Node可以完成室内服务机器人的搭建。该Demo包含了室内服务机器人所需的基础功能,包括地图建立、自主导航、垃圾检测以及人体骨骼关键点检测等,有助于您快速搭建室内服务机器人!
设计经验 发布时间 : 2024-11-06
【IC】D-Robotics RDK X5机器人开发者套件,可提供高达10 Tops算力,加速智能化应用快速落地
D-Robotics RDK X5搭载Sunrise 5智能计算芯片,可提供高达10 Tops的算力,是一款面向智能计算与机器人应用的全能开发套件,接口丰富,极致易用,支持Transfomer、RWKV、Occupancy、Stereo Perception等多种复杂模型和最新算法,加速智能化应用快速落地。
产品 发布时间 : 2024-09-20
深入探讨地平线X5图像多媒体框架技术细节
文章详细介绍了D-Robotics X5图像多媒体框架,从X5图像多媒体框图、各模块总体性能、多媒体调试指南和API接口介绍等多方面进行介绍。
技术探讨 发布时间 : 2024-09-20
基于地瓜机器人旭日5的移动升降双臂平台,10Tops澎湃算力助力轻松完成各类复杂移动操作任务
求之科技最新发布的AIRBOT MMK2是一款高集成度的轻量级双臂移动操作平台,搭载了D-Robotics地瓜新一代机器人智能计算芯片——旭日5,拥有超轻量6自由度智能机械臂、多路视觉传感器、激光雷达、移动底盘等组件。凭借地瓜旭日5的10Tops澎湃算力,可用于双臂移动操作1的数据采集、自动化应用部署与智能化任务执行,可升降作业空间及自主导航功能,。
应用方案 发布时间 : 2024-09-27
基于RDK X3的机械臂物体拾取操作实例
本文介绍RDK X3该功能包接收用户选择方块数字的请求,通过yolov5检测目标,在Z轴距离确定的情况下解算出物体的三维坐标,并请求仿真机械臂控制节点夹取物体的应用实例。
设计经验 发布时间 : 2024-10-28
地瓜机器人助力Fixposition推出全球首款多模态定位感知模组,加速智能移动机器人规模化商业落地
高精度定位行业先导企业Fixposition非普导航科技受邀参加由地瓜机器人举办的开发者大会,并在现场重磅推出全球首款多模态高精度全局定位感知模组xFusion-A1,该模组搭载地瓜机器人最新发布的旭日5智能计算芯片,在不依赖SLAM技术的情况下即可实现室内km尺度场景下的分米级精度定位以及室外无遮挡场景下的厘米级精度定位。这一新品的发布将加速智能移动机器人的规模化商业落地。
原厂动态 发布时间 : 2024-11-06
智能语音聊天机器人功能及使用指南
智能语音聊天机器人通过识别用户语音,调用ChatGPT API获取答复并播放,实现语音聊天。需地平线RDK、ChatGPT API Key及音频板等物料。准备、组装后,安装功能包并运行,配置音频和ChatGPT API Key。常见问题包括设备连接、音频驱动、配置文件及网络访问等。
设计经验 发布时间 : 2024-10-18
在RDK系列开发板上使用火山引擎大模型网关实例
介绍在RDK系列开发板上使用火山引擎大模型网关的技术要求。
设计经验 发布时间 : 2024-10-31
基于RDK系统的双目深度估计算法示例
双目深度估计算法是使用地平线OpenExplorer在SceneFlow数据集上训练出来的StereoNet模型。算法输入为双目图像数据,分别是左右视图。算法输出为左视图的视差。此示例使用mipi双目相机作为图像数据输入源,利用BPU进行算法推理,发布包含双目图像左图和感知结果的话题消息, 在PC端rviz2上渲染算法结果。
设计经验 发布时间 : 2024-11-05
电子商城
登录 | 立即注册
提交评论