在RDK系列开发板上使用火山引擎大模型网关实例
RDK AI Gateway ROS
节点介绍
本仓库让开发者在RDK系列开发板上使用火山引擎大模型网关。
支持的模型如下：
需用户准备以下：
地瓜机器人社区账号和密码。地瓜机器人社区官网：https://developer.D-Robotics.cc/。
RDK系列开发板一台。用户需自行将RDK开发板连网。
节点使用
本项目分为申请节点和使用节点，申请节点只需执行一次。后续每次使用时，只需开启使用节点（即一个ROS服务）并向服务发送请求即可。
环境准备
安装ros依赖：
激活ros环境（注：每次新开一个terminal（终端），都建议重新激活一下环境，即执行以下代码） 对于RDK OS V3.0版本，执行：source /opt/tros/humble/setup.bash 对于RDK OS V2.1版本，执行：source /opt/tros/setup.bash。
在RDK开发板上新建一个工作空间目录，并构建src子目录：
使用git clone命令，将本项目克隆至src目录下。
进入项目，安装pip依赖。
回到工作空间目录，构建项目。
激活项目环境（注：在完成环境构建后，每次新开一个terminal（终端），都建议重新激活一下环境，即执行以下代码） 对于RDK OS V3.0版本，执行：source ./install/setup.sh 对于RDK OS V2.1版本，执行：source ./install/setup.bash。
申请节点
申请节点的意义在于，使用社区账号和RDK开发板申请api key。
输入Y，回车，同意许可协议。 输入用户名、密码。
如社区用户名、密码正确，则会在/root/.ros/rdk_ai_gateway目录下生成auth.bin文件。
使用节点
在auth.bin文件生成后，开发者可在colcon_ws/src/rdk_ai_gateway_ros/rdk_ai_gateway/config/param.yaml中配置当前.bin文件的路径。
随后，启动ROS server节点，输入刚配置的.yaml文件的路径：
后续，开发者可以通过以下两种方式，以client调用服务。
model参数可做如下配置：
- |
- +1 赞 0
- 收藏
- 评论 0
本文由雪飘梦飞转载自D-Robotics官网，原文标题为:火山引擎大模型网关，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。
相关推荐
地平线深度学习双目深度估计算法使用示例
双目深度估计算法是使用地平线OpenExplorer在SceneFlow数据集上训练出来的StereoNet模型。算法输入为双目图像数据，分别是左右视图。算法输出为左视图的视差。此示例使用ZED 2i双目相机作为图像数据输入源，利用BPU进行算法推理，发布包含双目图像左图和感知结果的话题消息，在PC端浏览器上渲染显示算法结果。
RDK X3基于RDK X3的手势识别算法示例
手势识别算法示例订阅包含人手框、人手关键点信息的算法msg，利用BPU进行推理，发布包含手势信息的智能结果msg。手势识别算法集成了人手关键点检测，手势分析等技术，使得计算机能够将人的手势解读为对应指令，可实现手势控制以及手语翻译等功能，主要应用于智能家居，智能座舱、智能穿戴设备等领域。
RDK平台实现MIPI相机驱动的操作实例
本项目案例为对已适配的MIPI接口摄像头进行配置，并将采集的图像数据以ROS标准图像消息或者零拷贝（hbmem）图像消息进行发布，供需要使用图像数据的其他模块订阅。
地瓜机器人与火山引擎联手打造基于大模型的“云-边-端”一体化机器人开发底座
地瓜机器人与字节跳动旗下云服务平台火山引擎达成合作，双方将在“机器人+大模型”领域强强联合，实现地瓜机器人软硬件通用底座与火山引擎边缘智能大模型网关“云-边-端”的全面打通，加速大模型在机器人场景的落地，拓展机器人的无限智能化潜能。作为拥有极致算力性价比与极简开发体验的地瓜机器人开发者套件，RDK X5可提供高达10 TOPS的端侧算力，接口丰富，极致易用。
RDK用户免费畅享地瓜大模型网关，多种主流大模型任意切换，前所未有的资源支持！
地瓜机器人已与字节跳动旗下云服务平台火山引擎达成合作，双方将在“机器人+大模型”领域强强联合。地瓜大模型网关免费申请现已开启，现为所有购买RDK开发板的用户免费开放大模型网关接口能力，允许用户轻松访问和利用强大的云边大模型资源。无论是进行复杂的数据分析、自然语言处理还是机器学习任务，都能得到高效且稳定的支持。用户可以通过NodeHub应用和RDK Studio两种方式进行使用和尝试。
产品升级 | 基于RDK X5主控的差速服务机器人S100现已发售
S100差速服务机器人是轮趣科技推出室内场 景下的开源差速服务机器人产品，ROS主控全新适配基于地瓜机器人RDKX5方案，软件代码全开源，搭载全新升级TOF激光雷达以 及Astra系列深度相机，助力您高效进行二次开发。全新的外观结构设计，支持选配自动回充功能，并配备使用了轮趣多项核心底盘专利、高品质无刷轮毂电机，静音且动力充沛。
【IC】D-Robotics RDK X5机器人开发者套件，可提供高达10 Tops算力，加速智能化应用快速落地
D-Robotics RDK X5搭载Sunrise 5智能计算芯片，可提供高达10 Tops的算力，是一款面向智能计算与机器人应用的全能开发套件，接口丰富，极致易用，支持Transfomer、RWKV、Occupancy、Stereo Perception等多种复杂模型和最新算法，加速智能化应用快速落地。
【软件】「RDK OS-V3.1.1」全新发布：双目算法升级，助力机器人更智能
亲爱的开发者朋友们，本次更新聚焦系统稳定性、双目视觉算法升级和丰富的工具链增强，为您带来更高效的开发体验。下面让我们一起看看本次更新的具体细节吧！
喜讯 | 地瓜机器人助力RoboTwin获得2024 ECCV协同具身智能WORKSHOP Best Paper
作为具身智能行业生态圈的一员，地瓜机器人云平台团队在RoboTwin在线仿真与评估部分提供了全面的技术支持，包括仿真环境搭建、环境迁移、稳定性运维、GPU调度等，并计划在未来将文中的工作全面接入地瓜机器人Data-Copilot平台，为人形机器人公司提供从数据生成，强化学习，模型部署的完整解决方案，力图加速人形机器人与具身智能相关的产业发展。
RDK X5重磅发布、RDK S100惊喜亮相，地瓜机器人开发者套件全家桶全新登场
9月20日，以“加速智能生长”为主题的“2024地瓜机器人开发者日”活动在深圳成功举办。地瓜机器人重磅推出面向“机器人+”时代的软硬件产品全家桶，包括专为新一代通用机器人而生的旭日5智能计算芯片、极致易用全能开发首选RDK X5机器人开发者套件、具身智能全场景算力核心RDK S100，以及赋能全链条全生命周期的机器人云端开发环境，软硬结合、端云一体，让开发更简单、让机器更智能。
D-Robotics RDK™X5产品简介
D-Robotics RDK TM X5 是一款搭载 Sunrise 5 智能计算芯片的全能开发套件，具备高算力（10 Tops），适用于智能计算与机器人应用。该套件具有丰富的接口，支持多种复杂模型和最新算法，旨在加速智能化应用的快速落地。
D-ROBOTICS - 机器人开发者套件,RDK,RDK X5 4GB,RDK™ X5,RDK X5 8GB
地瓜机器人生态新品 | 轮趣科技发布基于RDK X5的ROS2教育机器人V550
V550 R0S2教育机器人是轮趣科技联合地瓜机器人推出的面向ROS教育场景的入门产品，基于地瓜机器人RDKX5机器人开发者套件，并依托于TogetheROS.B机器人操作系统，机器人的软硬件性能大幅度提升，结合全面升级的TOF激光雷达与深度相机，可以满足ROS和AI等进阶学习。并搭载轮趣科技多项专利技术，通过轮趣成熟的工业设计实现了简约外观和开发方便的平衡。
人体与骨骼关键点检测
mono2d_body_detection package是使用hobot_dnn package开发的单目rgb人体检测算法示例，在地平线X3开发板上使用模型和图像数据利用BPU处理器进行模型推理。 检测模型为fasterRcnn，模型输出包含人体、人头、人脸、人手框和人体关键点检测结果。
基于RDK X3操作思岚激光雷达驱动示例
SLLIDAR ROS2驱动，以ROS2标准消息格式发送激光雷达数据。
电子商城
现货市场
服务
提供7~27寸工控机定制，支持嵌⼊式/ 壁挂式 /桌⾯式/悬挂式等安装方式，采用纯平⾯板IP65防尘防⽔等级，莫⽒7级硬度触摸屏，兼容多种操作系统：组态软件/安卓/XP/win7/8/10/Linux等，支持主板、接⼝、外观、⽀架、刷卡器、⾝份证阅读器、LOGO、⻨克⻛、系统、电池、蓝⽛、4G/5G、摄像头、GPS系统、⼆维码扫描器、指纹等特殊应⽤场景定制
最小起订量： 1台 提交需求>
授权代理品牌：集成电路
授权代理品牌：分立元件
授权代理品牌：接插件及结构件
授权代理品牌：部件、组件及配件
授权代理品牌：电源及模块
授权代理品牌：电子材料
授权代理品牌：仪器仪表及测试配组件
授权代理品牌：电工工具及材料
授权代理品牌：机械电子元件
授权代理品牌：加工与定制
我要提问
登录 | 立即注册
提交评论