粤港澳大湾区依附多年积累的强盛机械人工业供应链,,,,,,,已经在全球市场上占有了领先位置,,,,,,,立异产品如雨后春笋般涌现。。。。。。因此,,,,,,,面临这场划时代的工业革命,,,,,,,以深圳为代表的大湾区将站在天下舞台的中心,,,,,,,抢占这一重大的工业高地!
设想一下,,,,,,,扫地机械人不再只是简朴的清洁工具,,,,,,,而是通过具身智能手艺,,,,,,,配备了无邪的机械手臂,,,,,,,能够整理房间;;;;;;剪草机械人配备智能机械手,,,,,,,轻松打理庭院;;;;;;复合机械人完善团结移动和抓取功效,,,,,,,在差别场景中展现无限可能。。。。。。这不但仅是科技的奔腾,,,,,,,更是商业时机的海洋,,,,,,,为全球企业带来了亘古未有的增添空间。。。。。。
然而,,,,,,,具身智能的到来陪同着算法、算力和数据的重大手艺挑战。。。。。。为资助粤港澳大湾区的机械人企业捉住这一历史性机缘,,,,,,,优德官网具身智能中心在2024年启动了三大焦点研发项目:
-
优德官网HIP:解决具身智能算法整合的难题,,,,,,,像安卓系统为智能手机赋能一样,,,,,,,让种种机械人迅速具备具身智能的能力。。。。。。
-
优德官网TONE:在50美元内的芯片上实现具身智能的全栈运算能力,,,,,,,突破算力瓶颈。。。。。。
-
优德官网PEED:通过数据收罗赋能机械人,,,,,,,以训练出通用的具身智能系统,,,,,,,为未来铺平蹊径。。。。。。
今天,,,,,,,优德官网宣布优德官网HIP 0.1版,,,,,,,期待普惠业界所有的机械人科技公司,,,,,,,为新中国建设75周年献上科技界的一份贺礼!
优德官网HIP官方网站:/en/airship
优德官网HIP代码:?https://github.com/airs-admin/airship?
接待来到优德官网HIP!优德官网HIP是一个开源的具身智能机械人软件栈,,,,,,,旨在为种种形式的智能机械人赋能。。。。。。
虽然具身智能在塑造未来经济方面拥有重大的潜力,,,,,,,但它也面临着重大的挑战,,,,,,,尤其是在盘算领域。。。。。。要实现所需的无邪性、效率和可扩展性,,,,,,,必需具备重大的盘算资源,,,,,,,但最紧迫的挑战仍然是软件的重大性。。。。。。重大性往往导致系统的不无邪性。。。。。。
具身智能系统必需无缝整合多种功效,,,,,,,从情形感知和物理交互到重大使命的执行。。。。。。这需要传感器数据剖析、先进的算法处置惩罚和准确的执行器控制等组件的协同操作。。。。。。为了支持种种机械人形式及其特定使命,,,,,,,一个多功效且可顺应的软件栈是至关主要的。。。。。。然而,,,,,,,建设一个统一的软件架构,,,,,,,确保这些多样化元素的协调运行,,,,,,,会引入重大的重大性,,,,,,,使构建精简高效的软件生态系统变得难题。。。。。。
优德官网HIP旨在解决具身智能中的软件重大性问题。。。。。。其使命是提供一个易于安排的软件栈,,,,,,,为种种智能机械人赋能,,,,,,,从而增进可扩展性并加速具身智能行业的商业化。。。。。。优德官网HIP受到Android的启发,,,,,,,后者在移动盘算革掷中通过提供一个开源、无邪的平台,,,,,,,施展了至关主要的作用。。。。。。Android使得众多装备制造商能够在差别价位点上创立智能手机清静板电脑,,,,,,,引发了快速的立异和竞争,,,,,,,促成了强盛且价钱合理的移动装备的普遍普及。。。。。。Android通过Google Play市肆提供的富厚应用程序生态系统,,,,,,,资助开发者触及全球用户,,,,,,,大大推动了移下手艺的普及。。。。。。
类似地,,,,,,,优德官网HIP的愿景是通过提供开源的具身智能软件栈来赋能机械人构建者。。。。。。该平台使得建设真正智能的机械人成为可能,,,,,,,能够执行许多已往本钱高昂甚至无法实现的使命。。。。。。优德官网HIP项目的座右铭“Stronger United, Yet Distinct”体现了一个信心,,,,,,,即真正的智能通过整合而爆发,,,,,,,但这种整合应该提升而不是限制机械人设计者的创立力,,,,,,,允许奇异且立异的设计得以实现。。。。。。
优德官网HIP具有以下特点:
-
这是一个集成的开源具身机械人系统,,,,,,,提供详细的硬件规范和软件组件。。。。。。
-
它具有???????榛臀扌暗娜砑系统,,,,,,,???????榭梢云局げ畋鸬挠τ镁傩兴秤蛱婊弧。。。。。
-
只管优德官网HIP受大型模子的支持,,,,,,,但它坚持了盘算效率,,,,,,,大大都软件???????槎荚诵性谇度胧脚趟阆低成希,,,,,,确保系统在种种应用场景中坚持高性能和可会见性。。。。。。
优德官网HIP混淆机械人由轮式底盘、带有兼容夹持器的机械臂、Nvidia Orin盘算板,,,,,,,以及包括LiDAR、摄像头和RGBD摄像头在内的传感器套件组成。。。。。。详细的硬件规格请拜见开源文档此文件。。。。。。下图展示了优德官网HIP机械人的硬件架构。。。。。。


优德官网HIP旨在应对可以剖析为顺序导航和抓取使命的场景。。。。。。通过使用最先进的语言和视觉基础模子,,,,,,,优德官网HIP为古板机械人付与了具身人工智能能力,,,,,,,包括对高条理人类指令的明确以及场景感知。。。。。。它将这些基础模子集成到现有的机械人导航和抓取软件栈中,,,,,,,增强了机械人的智能化体现。。。。。。

上图中展示的软件架构使用大型语言模子(LLM)来诠释高条理的人类指令,,,,,,,并将其剖析为一系列基本的导航和抓取行动。。。。。。导航通过古板的机械人导航栈完成,,,,,,,涵盖了地图构建、定位、路径妄想以及底盘控制。。。。。。语义地图将语义工具转换为地图中的位置,,,,,,,毗连了高条理的导航目的与低条理的机械人行动。。。。。。抓取通过神经网络实现,,,,,,,该网络凭证视觉输入确定夹持器的姿态,,,,,,,随后由古板的机械人手臂控制执行操作。。。。。。视觉基础模子举行零样本物体支解,,,,,,,将语义抓取使命转换为基于视觉的使命。。。。。。

导航软件管道的运行历程如下:定位???????榻獿iDAR和IMU数据融合,,,,,,,天生稳固的里程计数据,,,,,,,并在预先构建的点云地图中准确确定机械人的位置。。。。。。路径妄想???????橥ü趾途植客肫魈焐夼鲎驳墓旒!。。。。。随后,,,,,,,路径妄想器向底盘控制器提供速率和旋转指令,,,,,,,底盘控制器最终天生控制信号,,,,,,,确保;;;;;等搜赝肼肪缎惺弧。。。。。

抓取软件管道的运行历程如下:GroundingDINO吸收图像和目的物体的名称,,,,,,,并输出该物体在图像中的界线框。。。。。。SAM使用该界线框天生物体的像素级掩码。。。。。。GraspingNet处置惩罚RGB和深度图像,,,,,,,天生场景中所有物体的潜在夹持姿态。。。。。。物体掩码对这些姿态举行过滤,,,,,,,以确定目的物体的最佳抓取姿态。。。。。。
现在开源的是优德官网HIP 0.1的版本,,,,,,,主要是为了验证具身智能软件架构以及软件栈,,,,,,,下一阶段优德官网HIP的焦点生长偏向包括:
-
赋能更多的硬件形态,,,,,,,包括可是不限于扫地机械人、割草机械人、复合型效劳机械人、人形机械人。。。。。。
-
引入通用上下文学习(GPICL)机制搭建具身智能机械人基础模子以赋能具身智能机械人更好的从情形中学习。。。。。。
-
引入更领先的仿真情形来支持多种差别具身智能机械人算法的研发。。。。。。
