RDK用户免费畅享地瓜大模型网关,多种主流大模型任意切换,前所未有的资源支持!
在上一篇《地瓜机器人与火山引擎联手打造基于大模型的“云-边-端”一体化机器人开发底座》文章中,我们提到地瓜机器人已与字节跳动旗下云服务平台火山引擎达成合作,双方将在“机器人+大模型”领域强强联合,实现地瓜机器人软硬件通用底座与火山引擎边缘智能大模型网关“云-边-端”的全面打通,加速大模型在机器人场景的落地,拓展机器人的无限智能化潜能。
这次合作不仅标志着地瓜机器人与火山引擎在技术层面的深度融合,更是为开发者社区带来了前所未有的资源支持。现为所有购买RDK开发板的用户免费开放大模型网关接口能力,允许用户轻松访问和利用强大的云边大模型资源。无论是进行复杂的数据分析、自然语言处理还是机器学习任务,都能得到高效且稳定的支持。用户可以通过NodeHub应用和RDK Studio两种方式进行使用和尝试。目前为RDK开发板用户提供如下大模型服务:
doubao-pro-4k、doubao-pro-32k、doubao-pro-128k、doubao-lite-4k、doubao-lite-32k、doubao-lite-128k、qwen-VL-8k、qwen-7B(其它模型敬请期待)。
大模型网关相比于直接接入大模型提供商有着更多的优势。基于火山引擎边缘智能大模型网关提供的边缘缓存和就近访问服务,能够显著提高大模型服务的访问速度,在同一接口下多服务之间还可以互为备份,减少单一服务故障带来的系统性风险,始终为终端用户提供快速、可靠的AI服务体验。
对于已经拥有RDK开发板的用户来说,加入地瓜开发者社区是开启智能开发之旅的关键一步。注册社区账号后,用户不仅可以免费使用大模型网关,还可以与社区其他成员深入交流。完成注册后,通过Nodehub提供的RDK AI Gateway ROS应用完成大模型网关权限申请和接口调用,我们在NodeHub页面提供了详尽的操作手册和视频教程,无论您是ROS新手还是资深开发者,都能获得全方位的指导和支持,确保您顺利完成整个申请过程。
案例分享:打造多模态感知应用
在智能机器人领域,如何让机器人具备视觉感知和自主决策能力,一直是开发者关注的焦点。为了帮助开发者快速了解大模型网关,我们将通过一个具体的案例来展示,如何使用USB摄像头和大模型网关,快速构建一个基于大模型的物体识别和任务拆解的应用。
首先下载RDK Studio应用,完成开发板的连接,并将USB摄像头接入开发板。最后在RDK示例应用中,找到“RDK大模型网关”,鼠标点击Jupyter图标,即可打开Jupyter Notebook看到代码实现。
打开Jupyter Notebook后,执行第一个Cell,可以看到USB摄像头的画面正在实时展示,点击“采集图像”按键,完成USB摄像头拍照,拍摄的照片会在“采集图像”下方显示。
此时,有两个按钮,一个为询问大模型,在这张图片中看到了什么,另一个为将模型看到的物体使用机械臂和已有的API进行任务拆解,将物体移动到一个目标位置。我们先点击“你看到什么”,随后点击“你能做什么”,即可完成模拟机器人的任务拆解。
地瓜机器人和火山引擎还会陆续添加更多云端模型,以及更多基于大模型网关的应用示例供开发者免费使用和体验,帮助开发者借助“云-边-端”的能力实现更多有趣、有用的应用。现在就加入我们,一起探索大模型网关的无限可能吧!
- |
- +1 赞 0
- 收藏
- 评论 12
本文由雪飘梦飞转载自D-Robotics(地瓜机器人公众号),原文标题为:主流大模型任意切换,地瓜大模型网关免费申请现已开启,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
相关推荐
RDK X5重磅发布、RDK S100惊喜亮相,地瓜机器人开发者套件全家桶全新登场
9月20日,以“加速智能生长”为主题的“2024地瓜机器人开发者日”活动在深圳成功举办。地瓜机器人重磅推出面向“机器人+”时代的软硬件产品全家桶,包括专为新一代通用机器人而生的旭日5智能计算芯片、极致易用全能开发首选RDK X5机器人开发者套件、具身智能全场景算力核心RDK S100,以及赋能全链条全生命周期的机器人云端开发环境,软硬结合、端云一体,让开发更简单、让机器更智能。
原厂动态 发布时间 : 2024-11-04
地瓜机器人与火山引擎联手打造基于大模型的“云-边-端”一体化机器人开发底座
地瓜机器人与字节跳动旗下云服务平台火山引擎达成合作,双方将在“机器人+大模型”领域强强联合,实现地瓜机器人软硬件通用底座与火山引擎边缘智能大模型网关“云-边-端”的全面打通,加速大模型在机器人场景的落地,拓展机器人的无限智能化潜能。作为拥有极致算力性价比与极简开发体验的地瓜机器人开发者套件,RDK X5可提供高达10 TOPS的端侧算力,接口丰富,极致易用。
原厂动态 发布时间 : 2024-10-29
地瓜创客孵化营 | 让每一块 RDK X5,都成为你手中的机器人!
地瓜机器人开发者日就要来啦!面向智能计算与机器人解决方案的通用型开发板新品RDK X5,接口丰富,极具性价比,具有10T算力,与强大的图像处理能力,助力开发者轻松实现多种智能应用。加入“地瓜创客孵化营”你将和一群“地瓜创客”一起找到将你的开发板转变为智能机器人的最佳路径。
原厂动态 发布时间 : 2024-09-13
【IC】D-Robotics RDK X5机器人开发者套件,可提供高达10 Tops算力,加速智能化应用快速落地
D-Robotics RDK X5搭载Sunrise 5智能计算芯片,可提供高达10 Tops的算力,是一款面向智能计算与机器人应用的全能开发套件,接口丰富,极致易用,支持Transfomer、RWKV、Occupancy、Stereo Perception等多种复杂模型和最新算法,加速智能化应用快速落地。
产品 发布时间 : 2024-09-20
基于RDK平台的YOLOv10目标检测算法示例
YOLO功能介绍YOLO目标检测算法示例使用图片作为输入,利用BPU进行算法推理,发布包含目标类别和检测框的算法msg。YOLO目标检测算法示例使用图片作为输入,利用BPU进行算法推理,发布包含目标类别和检测框的算法msg。目前支持yolov2、yolov3、yolov5、yolov5x四个版本。
应用方案 发布时间 : 2024-11-13
基于RDK X3和OriginBot的手势控制机器人应用案例
通过视觉进行人手检测、跟踪和手势识别,根据手势类别生成不同运动控制指令并控制机器人运动,包括左右旋转和前后平移运动。该功能支持机器人实物和Gazebo仿真两种体验方式。以下操作过程以OriginBot为例,满足条件的其他机器人使用方法类似。
设计经验 发布时间 : 2024-11-13
在RDK系列开发板上使用火山引擎大模型网关实例
介绍在RDK系列开发板上使用火山引擎大模型网关的技术要求。
设计经验 发布时间 : 2024-10-31
智能语音聊天机器人功能及使用指南
智能语音聊天机器人通过识别用户语音,调用ChatGPT API获取答复并播放,实现语音聊天。需地平线RDK、ChatGPT API Key及音频板等物料。准备、组装后,安装功能包并运行,配置音频和ChatGPT API Key。常见问题包括设备连接、音频驱动、配置文件及网络访问等。
设计经验 发布时间 : 2024-10-18
地平线RDK实现智能循线机器人应用示例
巡线任务,即机器人小车能够自主跟着一条引导线向前运行。地平线RDK通过摄像头获取小车前方环境数据,图像数据通过训练好的CNN模型进行推理得到引导线的坐标值,然后依据一定的控制策略计算小车的运动方式,通过UART向小车下发运动控制指令实现整个系统的闭环控制。
设计经验 发布时间 : 2024-11-12
基于RDK X3的机械臂物体拾取操作实例
本文介绍RDK X3该功能包接收用户选择方块数字的请求,通过yolov5检测目标,在Z轴距离确定的情况下解算出物体的三维坐标,并请求仿真机械臂控制节点夹取物体的应用实例。
设计经验 发布时间 : 2024-10-28
基于RDK X3开发板设计并实现的手持slam建图设计
这里使用RDK X3开发板设计并实现了一款SLAM手持建图设备,它使用RDK X3开发板的计算性能,通过激光雷达实现一个纯激光里程计,通过IMU对激光数据进行畸变矫正和对SLAM的姿态矫正,实现一个手持的SLAM建图功能。
设计经验 发布时间 : 2024-11-04
NodeHub快速入门示例:小海龟绘画
NodeHub快速入门示例,通过键盘控制小乌龟进行绘画。
设计经验 发布时间 : 2024-11-11
电子商城
服务
可加工PCB层数:1-30层;板材类型:FR4板/铝基板/铜基板/刚扰结合板/FPC板/高精密板/Rogers高频板;成品尺寸:5*5mm~53*84cm;板厚:0.1~5.0mm。
最小起订量: 1 提交需求>
可贴PCB板厚范围:0.6~2.0mm,也支持生产软硬接合板,拼板长宽:50*50mm~550*500mm,PCBA快速贴片支持01005CHIP元件。
最小起订量: 1片 提交需求>
登录 | 立即注册
提交评论