【产品】地平线AI开发平台天工开物让AI开发无难事,通过与其AI应用开发中间件的结合最高可节省90%产品开发周期
人工智能60余年的发展,这项产业终于到了大规模落地的前夕。一个当前的共识是,“人工智能将成为像水电煤一样的基础设施。”
但随着参与产业的程度不断加深,地平线对AI从技术演示到商业落地的漫长路径有了更切身的理解。将AI解决方案集成到合作伙伴的产品中,赋能并成就合作伙伴,对大部分公司来说仍然存在不低的门槛。如同互联网的崛起,AI转化为基础生产力的过程也需要诸多开发工具。所以,为地平线AI芯片落地,“让AI开发无难事”,是“天工开物”AI开发平台的目标,即:让AI开发门槛和难度更低,为合作伙伴节省更多的时间和人力成本,也让越来越多的企业和开发者参与到人工智能开发中来,打造良好的生态基础平台。
致力于让AI开发无难事”的地平线“天工开物”AI开发平台
基于以上理念,地平线每天都在努力去降低方案被集成的难度。从工具链到完整AI开发平台,地平线正在身体力行的开放自己的能力与开发者共享。以自研芯片为发力点,地平线“天工开物” AI开发平台的功能模块正日趋完善,包括模型仓库(Model Zoo)、AI芯片工具链(AI Toolchain)及AI应用开发中间件(AI Express)在内的三大功能模块将极大提升合作伙伴的开发速度,保证开发质量。
以本次升级新增的ModelZoo模型为例,地平线通过开放产品、基础和参考三种类别的算法,可充分响应不同合作伙伴的需求——
· 通过产品算法,合作伙伴实现了即拿即用,不需要做任何开发和训练,就可以将地平线已“打包”的人脸、人体、非机动车和机动车相关算法投入使用;
· 通过基础算法,合作伙伴拿到算法之后就可以自己复现地平线在经典网络上训练出的业界领先(state-of-the-art)结果,可以快速验证BPU的实际性能,也可以用来熟悉AI芯片工具链,使应用芯片的学习时间下降50%;
· 通过参考算法,合作伙伴得以为实际产品嫁接领先的算法整体解决方案,用自己的数据进行训练,从而最大化的提升精度,并快速建立自己的护城河。
“天工开物”ModelZoo功能模块包含的算法类别
以上这一切,都将推动合作伙伴探索自身在数据和算法方面的独特价值,形成自己的竞争壁垒与护城河。实践表明,在ModelZoo的助力下,合作伙伴新产品上市时间可缩短60%,而通过与AI应用开发中间件(AI Express)的结合,合作伙伴最高可节省90%的产品开发周期。
此外,升级后的AI芯片工具链也获得了大幅优化。通过打通业界最流行的深度学习训练框架和地平线的AI芯片,可以让合作伙伴在芯片上实现当前流行训练框架的无缝衔接应用。
通常一个嵌入式系统的AI算法开发主要包括训练、转换、部署三个步骤。同时,为了增加边缘AI芯片的能效比、性价比,边缘AI芯片的神经网络加速模块通常只支持整数运算,不支持浮点运算,所以,把浮点模型转换为定点模型就成为AI落地的关键环节。为了加速这一过程,地平线芯片工具链提供了两种量化方案:一是训练阶段的量化,适用于对精度要求非常高,开发能力强的客户;二是转换阶段的量化,即通过地平线提供的浮点转定点工具,将完成训练的浮点模型转化为定点模型直接通过预测库在芯片上加载并运行预测。前者的优点是精度高,可以利用地平线在算法方面的经验积累,且出现量化精度损失后合作伙伴可以自主调试;后者的优势是易于实施、大大降低了开发门槛,支持更多Operator、更多网络结构,支持客户自定义Operator。在实际开发过程中,前者支持TensorFlow和MXNET,后者目前支持Caffe,并预计于2020年底前实现对Pytorch、ONNX和Tensorflow的支持。
“天工开物”新亮点——浮点转定点方案
浮点转定点方案大大降低了使用门槛,是地平线AI芯片“兼顾灵活”的原则的重要体现之一。作为“天工开物”升级后的一大亮点,浮点转定点方案的最大优势便在于无需重新训练模型带来的易实施性和灵活性,无论是合作伙伴之前训练的模型还是网上下载的公开模型,均可通过该方案,快速转换为可在地平线AI芯片上运行的模型格式,通过调用地平线BPU实现数据处理。
在开放性上,地平线对外开放程度,与对内部算法团队开放程度完全一致,充分确保灵活性和可编程性满足合作伙伴算法工程师的使用需求。搭配AI应用开发中间件(AI Express),合作伙伴可以定制自己的场景,灵活组合产品算法并高效投入应用,让整个算法和策略像搭积木一样的容易。
“天工开物”加持,释放BPU极致效能通过AI芯片工具链的编译器自动优化,合作伙伴可实现成倍的提升性能。在MobileNet-v2在ImageNet上的分类任务中,在编译器优化前的双核FPS是400多,优化后则可达到800多,这样的吞吐量变化意味着帧率提升一倍的同时延时降低了一半,同时,优化后BPU的利用率提升了一倍,而DDR带宽则降低了60%,而这一过程完全是自动优化的。
软硬结合,协同优化,是地平线AI芯片“首重效能”的原则的重要体现之一。与同等算力的竞品相比较,通过编译器和BPU芯片架构的协同优化,地平线AI芯片在新的网络结构上无论是性能和功耗都有出色的表现。在分类任务上实测结果显示,地平线AI芯片在新Backbones上可保持更好的帧率,且大幅度高出于同类产品。特别是2018年的ModelleNetV2、和2019年的VarGNet上的帧率,地平线AI芯片表现突出。
在“首重效能,兼顾灵活”的原则下,地平线“天工开物”不仅在评测中展示了BPU的超强性能,更重要的是已在合作伙伴合作中发挥效用。
“天工开物”的应用实践案例
案例一:在与韩国通信运营商SK电讯的合作中,地平线通过“天工开物”提供的参考算法和开放灵活的AI芯片工具链,SK电讯开发AI算法,解决了道路前方坑洞检测问题、车辆靠边时对行人和其他车辆的检测,和地平线提供的ADAS算法、环境感知算法,一起运行在地平线的征程二代芯片上。这对SK电讯提升竞争力和加快方案部署起到了至关重要的作用。
案例二:在与某知名智能摄像机厂商合作时,该厂商认为算法是核心竞争力,希望避免“黑匣子”问题自己掌握算法。地平线通过提供给参考算法助力其实现了自身对人体骨骼、人脸检测等任务需求,同时合作伙伴也借助AI Express实现了工程软件框架,将多个算法串接为整体解决方案,从而快速达到了量产要求。
案例三:在与国内激光雷达领先企业速腾聚创合作过程中,地平线通过提供基础算法和工具链,使其得以快速了解地平线AI芯片。在此基础上,禾塞将自己的原有算法通过“天工开物”快速实现了芯片端的移植,其方案效果也在2020 CES上得到展示。
通过三个案例的分享,相信足以展示地平线的“天工开物”最大特点,即基于软硬结合、协同优化达到的 AI 芯片“极致效能”。而在效能之外,地平线基于赋能战略和算法积累的全方位“开放”和基于内部和外部项目打磨积累的“成熟”经验,也正让合作伙伴真正受益于AI带来的智能化变革。
- |
- +1 赞 0
- 收藏
- 评论 1
本文由宝丁转载自地平线,原文标题为:打破开发门槛,地平线“天工开物”让AI开发无难事,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
相关推荐
【产品】地平线天工开物AI开发平台OpenExplorer统一发布功能介绍
OpenExplorer,中文名称天工开物AI开发平台,是地平线AI芯片开放赋能的重要武器之一,主要由AI Toolchain工具链,AI Express应用开发中间件、AI Solution应用参考解决方案以及系统软件组成。
新产品 发布时间 : 2022-05-20
地平线发布具有4核ARMA53处理能力的X3派AI开发平台,支持H.264/H.265编解码和5Tops端侧推理|视频
地平线旭日®️X3派是一款面向生态开发者的嵌入式AI开发板,接口兼容树莓派,具有5Tops端侧推理与4核ARMA53处理能力。可同时多路CameraSensor的输入并支持H.264/H.265编解码。
新产品 发布时间 : 2022-06-16
【产品】AI全生命周期开发平台“天工开物”,提供丰富的算法资源、灵活高效的开发工具和简单易用的开发框架
基于地平线自研AI芯片打造的“天工开物™” AI全生命周期开发平台,包括模型仓库、AI芯片工具链和AI应用开发中间件三大功能模块,为地平线芯片合作伙伴提供丰富的算法资源、灵活高效的开发工具和简单易用的开发框架。
新产品 发布时间 : 2021-01-10
MEIG(美格)5G+AIoT模组选型指南
目录- 公司简介 模组概览 5G模组系列 4G模组系列 NB-IoT/Cat M模组系列 产品解决方案
型号- SLT866,SLT188A,SLM550,SLM756CH,SLM156,SLM828M,SLM790,SLM759J,SNM951,SRM825L,MT548,SLM820,SLM756LA,SRM930-C,SLM550-AU,SLM828,SLM925-AU,SRM900,SLM900NA,SLM758J,SLM750-Z,SLM900EU,SLM759C,SLM828G,SLM759E,SLM759A,SLM759B,SRM900L-C,MP617,SLT868Q,SRM900-C,SLM130,SLT818A,SRT873,SLM920,SLM500LA,SRT873S,SLM500LC,MC539,SLM920-J,SLM500LE,SLT719,SLM925,SLM500LJ,SLM900LA,SLM920-E,SLM920-C,SLT711,SLM130F,SLT818H,SLM920-A,SLM757,SLM900CH,SLM756,SLM550-C,SLM759,SLM758,SLM550-A,SNM900,SLM755,SLM130X,SLM550-E,SLM550-J,SLM328Y,MA800,SRM810,SLM190,SRM930,SRM811,SLM755L,SRM815,SLM750 MINI PCLE,SLM160X,SLM750,SLM900,MT504,SNM758,SLM925-E,SLM925-J,SRM821,SLM500L,SLT776,SRM825,SLM925-C,SLT778,SLM925-A,SRT856,SRM815N,SLM770A,SLM100,SRM900L,SRT853,SRM815-GL,SRT855,SLM500SC,SLM500SB,SLM500SE,SNM920,SLM730,SLM770U,SLM757QA,SLM757QC,SLM500S,SLM757QE,SLM500Q,SLM920-LA,SNM925,SLM330,SLM332,SLM190X,SRT853C,SLM758B,SLM328,SLM758C,SLM758E,SLM323,SLM756EU,SLM790 MINI PCLE,SNM930,SRM825WN,SLM326,SLM758A,SLM756NA,SLM925-LA,SRM930-E,SRM825W,SLM160,SRM930-J,SRT838S,SLT879,SRM825N,SLM320,SLM322,SRT830,SRT831,SLM500QA,SLM500QC,SLM500QE,SLM770A MINI PCLE,SLM920-AU,SLM500QJ
解码“新质生产力”,一站式AI工具成工业智能化升级关键
企业部署AI小模型面临着一系列挑战,亟需宝维塔™「匠心」平台这样的一站式AI工具帮助他们应对挑战,高效完成工业AI应用的开发和部署。凭借端到端的全链路架构,以及亚像素分割、推理加速等特色优势,宝维塔™平台成为工业智能化升级的理想工具。
应用方案 发布时间 : 2024-11-04
重磅官宣!涂鸦智能正式加入联合国全球契约组织!
近日,涂鸦智能宣布正式加入联合国全球契约组织(United Nations Global Compact,简称UNGC),承诺将支持联合国全球契约组织关于人权、劳工、环境和反腐败四个领域的《全球契约十项原则》。加入UNGC对涂鸦而言意义重大,它不仅标志着公司长期以来积极履行社会责任的努力获得了国际认可,同时也为涂鸦在全球借助GenAI等创新技术推动可持续发展提供了更宽广的平台。
原厂动态 发布时间 : 2024-06-05
启英泰伦(Chipintelli)三代人工智能语音芯片/语音模块选型指南
型号- CI-D03GS02S,CI-D02GS07J-BT,CI-D02GS02S,CI-D02GS01J,CI-C22GS02S,CI1122,CI1301,CI1312,CI-D03GS01J,CI1302,CI1303,CI-C22GS02J,CI2305,CI2306,CI1306
基于地平线旭日X3派平台开发的具身智能机器狗“汪汪”
本项目聚焦腿臂机器人在多模态环境感知、自然语言交互和自主行为控制方面的技术瓶颈,基于地平线旭日X3派平台进行AI大模型算法开发,提出了一种融合AI大模型的创新性解决方案,提升腿臂机器人的综合性能。
应用方案 发布时间 : 2024-10-30
TuyaOS重磅更新:AI赋能设备升级,配网速度10倍提升
作为降低智能解决方案开发门槛的 TuyaOS 操作系统,此次又迎来了重大更新(点击查看 TuyaOS 完整介绍)!本次 TuyaOS 3.10.0 版本发布了超丰富的开发框架,覆盖多种协议连接和平台,可供开发者更快速便捷地接入涂鸦 IoT PaaS。还有超强 AI 赋能和组件能力,以及改变传统开发方式的新机制,赶紧来看看。
原厂动态 发布时间 : 2024-07-24
豪威集团宣布其高性能全局快门图像传感器和处理器适配英伟达Holoscan和Jetson平台
豪威集团,全球排名前列的先进数字成像、模拟、触屏和显示技术等半导体解决方案开发商,当日宣布由OG02B10彩色全局快门(GS)图像传感器和OAX4000 ASIC图像信号处理器(ISP)组成的整体摄像头解决方案现已通过验证,并能够与英伟达Holoscan传感器处理平台及英伟达Jetson™平台配合使用,适用于边缘人工智能(AI)和机器人技术的应用。
产品 发布时间 : 2024-10-24
涂鸦引领云开发AI浪潮,实用给力的三大开发者工具全新发布!
目前,AI 浪潮在云开发领域的发展势头汹涌澎湃,引领了一场效率与创新的双重革命。涂鸦云开发者平台作为这股 AI 浪潮中的探索者,不仅牢牢把握住了 AI 的精髓,更以开放的平台架构与高效的开发工具,为开发者们开辟了一条便捷设备开发的高速通道。
产品 发布时间 : 2024-10-16
启英泰伦(Chipintelli)语音AI芯片、模组、算法及解决方案,为IoT人工智能开发提供一站式Turnkey服务
启英泰伦成立于2015年,专注于语音AI芯片和算法的开发和提供配套产品应用解决方案。2016年,其发布全球首款离线语音识别BNPU(脑神经网络处理单元)芯片CI1006,此芯片是全球第一款出货量超过百万的离线语音AI专用芯片。之后,启英泰伦持续研发出多款产品,2018年推出升级版离线语音AI芯片CI1002;2019年发布全球首款降噪一体多核语音AI芯片CI100X系列,发布语音AI平台;2020
公司动态 发布时间 : 2021-02-02
2024 TUYA全球开发者大会(欧洲)盛大启幕,涂鸦携手开发者共筑绿色低碳未来
2024年9月9日,TUYA全球开发者大会在德国柏林会展中心隆重举办。作为TUYA开发者大会的欧洲首站,此次活动精彩纷呈,创新AI产品、解决方案层出不穷。涂鸦智能携手海内外行业翘楚,为开发者们带来精彩的前沿洞察与实践经验分享。
原厂动态 发布时间 : 2024-10-16
电子商城
现货市场
登录 | 立即注册
提交评论