項(xiàng)目簡介

2020年12月，達(dá)闥發(fā)布了云端機(jī)器人操作系統(tǒng) HARIX OS海睿。這是繼電腦Windows、手機(jī)Android和iOS之后，全球首個(gè)面向機(jī)器人的操作系統(tǒng)。HARIX OS 海睿由“人工增強(qiáng)機(jī)器智能”、“多模態(tài)融合人工智能”、“數(shù)字孿生”、“持續(xù)閉環(huán)學(xué)習(xí)和智能進(jìn)化”四個(gè)部分組成，是基于“云-網(wǎng)-邊-端”協(xié)同的應(yīng)用開發(fā)訓(xùn)練實(shí)驗(yàn)平臺(tái)。云端大腦HARIX提供機(jī)器人的AI能力，經(jīng)過5G安全高速網(wǎng)絡(luò)，控制機(jī)器人完成各種任務(wù)。

基于HARIX OS海睿，我們?yōu)殚_發(fā)者提供了一套基于數(shù)字孿生的云端機(jī)器人開放服務(wù)平臺(tái)和開發(fā)工具包：HARIX RDK（Robot Development Kit）。HARIX RDK包括應(yīng)用行為藍(lán)圖編輯器、動(dòng)作舞蹈編輯器、場景地圖工具等；為機(jī)器人訓(xùn)練、評(píng)估、學(xué)習(xí)提供仿真平臺(tái)，包括虛擬現(xiàn)實(shí)環(huán)境的模擬、機(jī)器人實(shí)體建模仿真、事件驅(qū)動(dòng)的動(dòng)態(tài)情境模擬等；為服務(wù)機(jī)器人在大數(shù)量群體、大規(guī)模場景、持續(xù)性條件下的智能、高效、快速評(píng)估和進(jìn)化訓(xùn)練提供支持，可以在全虛擬環(huán)境下實(shí)現(xiàn)多個(gè)智能體大規(guī)模AI模擬、試驗(yàn)和智能自主訓(xùn)練學(xué)習(xí)，并建立完善的評(píng)價(jià)標(biāo)準(zhǔn)和評(píng)估體系。

具有34個(gè)柔性關(guān)節(jié)執(zhí)行器的Cloud Ginger XR-1云端服務(wù)機(jī)器人，結(jié)合各種視覺、聽覺、觸覺等傳感器，通過4G/5G模組連接云端大腦，在HARIX OS海睿分布式操作系統(tǒng)處理下完成各種復(fù)雜場景的服務(wù)。

機(jī)器人在復(fù)雜場景中與目標(biāo)物進(jìn)行交互操作，是智能服務(wù)機(jī)器人區(qū)別于監(jiān)控?cái)z像頭、智能音響、AGV小車、工業(yè)機(jī)械臂等人工智能應(yīng)用最不同之處。如何通過動(dòng)態(tài)規(guī)劃和強(qiáng)化學(xué)習(xí)算法，實(shí)現(xiàn)不同機(jī)器人多模態(tài)AI能力的時(shí)序排列，非常具有挑戰(zhàn)性。HARIX OS海睿平臺(tái)，為開發(fā)者提供開源、開放的技能集（SkillSet），降低機(jī)器人多模態(tài)編程的難度。

技能集（Skillset）的分級(jí)

一級(jí)-原子技能（Atomic Skill）：指直接驅(qū)動(dòng)機(jī)器人硬件的程序，可以使用不同的編程語言，如C++、Python、Java等完成，比如：關(guān)節(jié)驅(qū)動(dòng)、人臉識(shí)別、物體識(shí)別、導(dǎo)航、TTS、ASR等；

二級(jí)-分子技能（Molecular Skill）：指通過不同原子技能構(gòu)成的程序，比如：握手、敬禮、舞蹈等；

三級(jí)-細(xì)胞技能（Cell Skill）：指通過不同分子技能構(gòu)成的程序，比如：跟我學(xué)、跟我走、人臉跟隨、遞送、抓取、運(yùn)動(dòng)等。

比如：通過藍(lán)圖程序編輯器實(shí)現(xiàn)機(jī)器人“移動(dòng)抓取”的技能

第一個(gè)RDK應(yīng)用程序

藍(lán)圖節(jié)點(diǎn)API

基于RDK使用yolov5算法識(shí)別水果

使用Maps目錄下的地圖

咖啡廳地圖請(qǐng)使用百度網(wǎng)盤，下載地址鏈接：https://pan.baidu.com/s/1Cl6ZmOixZEfOpkv7rvmZmA

提取碼：hari

下載地址

安裝RDK

vpn安裝文檔

HARIX is licensed under the Apache License, Version 2.0

貢獻(xiàn)者