首頁 > AI資訊 > 最新資訊 > 15分鐘開發一個機器人,硬件軟件都現成,背后還有“三板斧”

15分鐘開發一個機器人,硬件軟件都現成,背后還有“三板斧”

新火種    2023-11-28

豐色 發自 凹非寺

量子位 | 公眾號 QbitAI

隨著大模型的演進,機器人領域似乎也迎來了無限可能。

譬如前幾日李飛飛團隊發布的具身智能成果就著實驚艷了眾人一把。

然而你可能有所不知的是——

現在,在最為基礎的開發前線,一個小白可能最快只需要15分鐘,就能從零完成一個能自主規劃線路并進行目標檢測的室內小型機器人。

為什么會這么快?

因為全程你就只需要像搭積木一樣,組裝好開發板和部件,然后分別去復制粘貼相應軟件模塊的安裝和部署代碼到終端,相機、激光雷達、底盤運行、SLAM導航以及人物、垃圾檢測功能就能全部搞定了。

整個過程不需要你進行任何額外的調試和開發,一個能在家里自由地跑來跑去,并對環境里的一些常見物體進行跟蹤和檢測的機器人就能順利“出生”。

這,就是打造了征程系列自動駕駛芯片,并立志為機器人行業造底座的地平線公司,給開發者的一點小小的震撼。

在這家公司首次舉辦的開發者創享日活動中,我們就來一窺究竟這是如何辦到的。

讓攢機器人更簡單的“三大板斧”

眼下,中國已成為全球最大的機器人市場,行業發展迅速。

這里面,既有完整工業鏈提供自動化基礎,也有智能手機、智能汽車產業崛起,奠定智能技術基礎,最后大眾遞增的購買力也帶來了更廣闊的消費基礎。

然而,機器人產業也存在著開發效率低、迭代周期長、技術落地難、研發成本與產品價值不匹配等痛點,行業內存在反復“造輪子”現象。

這對于最前線的開發者來說,大家都有著不同程度的困擾。

如何破局?

在地平線機器人事業部生態負責人胡春旭看來,機器人開發的三個關鍵問題可以簡單抽絲剝繭為:做什么、用什么以及怎么做。

第一個問題不用多說,我們主要重點針對后兩者。

在此,地平線就從硬件到軟件以及生態方面為開發者提供了解決思路,用“三大板斧”幫大家把機器人開發的全生命周期都安排妥當。

首先,是基于地平線智能芯片打造的開發者套件(也就是俗稱的開發板),包括RDK X3、RDK X3 Module、RDK Ultra。

其中RDK X3(499元起)搭載地平線旭日3系列芯片,推理算力5Tops,可同時處理多路MIPI Camera輸入,并支持最高4K 60幀的H.264/H.265編解碼能力,支持2.4G/5G無線網絡,接口兼容樹莓派,適合基礎開發者。

RDK X3 Module模組則包括一系列能夠進行定制的核心組件,更小巧、更高級和靈活,能提供給做機身產品的開發者或者企業去做定制開發。

RDK Ultra(3299元起)則專門針對有著更高算力需求的開發者,適用于機器人商用、工業AMR、高校科研等場景。

具體而言,相比基礎板RDK X3,RDK Ultra具有高達96Tops的端側推理算力與8核CPU處理能力,可同時處理4路MIPI Camera輸入并支持最高4K 60幀的H.265編解碼能力。

除了硬件本身,相關的“大算力算法”,如BEV、雙目深度檢測、三維目標檢測等,地平線都一并提供,開發者直接下載即可使用。

胡春旭表示,為了幫助更多資深開發者進行進一步開發,所有RDK系列中的底層Linux代碼和算法都全部開源。

同時,除了開發板,還有50款以上的配件,包括屏幕、相機、傳感器、雷達相等等。

那么,有了開箱即用的RDK以及各種周邊配件,大家就能夠快速地把一個機器人的硬件給它攢起來了。

下一步,我們就要開始coding了,也就是解決“怎么做”的問題。

在此,地平線面向機器人廠商和生態開發者推出機器人操作系統TogetheROS.Bot。

該系統集成了各種豐富的算法示例,包括VIO、SLAM、音視頻交互、環境感知等等,全部開源,可進行二次開發。

而通過Shared Memory機制實現高效通訊,硬件加速濾波、縮放、旋轉等算法,系統可以降低數據傳輸時延,減少系統資源消耗。

當然,它也主打一個高效開發,適配各種機器人傳感器包括RDX開發板,可簡化端側算法部署,降低智能算法使用門檻,進而節省開發時間。

至此,硬件和操作系統都有了,但這還不夠。胡春旭表示,其實機器人應用開發看似復雜,其實有跡可循。

他們通過調研大量場景,將機器人功能和應用做了如下的Node和Hub分類。其中Node是點,Hub是面,從點到面我們通過一系列組合就能直接做出各種各樣的產品類型。

因此,對于這樣一個未來機器人應用開發的新范式,地平線現在還推出了機器人開發平臺應用中心NodeHub。

它集成了各種應用節點,也就是功能包,我們只需要簡單下載對應的安裝包就能攢出各種功能的機器人。

如開頭所示的案例,正是通過它在大約15分鐘內完成的。

值得一提的是,NodeHub還計劃推出共創計劃,如果你有非常不錯的項目,也可以貢獻給大家一起使用。

地平線希望,最終將NodeHub打造成一個類似手機應用商店的平臺。

當然,再次強調,NodeHub上所有應用包的代碼也都是開源的,哪里不滿意哪里想精進,都能自己動手改。

張亞勤:未來十年是機器人的黃金十年

在創享日活動當晚的“機器人搖滾夜話”環節中,中國工程院院士、清華大學講席教授、智能產業研究院(AIR)院長張亞勤預測:

未來十年是機器人的黃金十年。

身為開發者,選擇這個行業就已經成功了一半。(手動狗頭)

不過,張院士表示,造AI機器人比起通用AI來說,其實有著四方面的區別和挑戰:

一是要有能力去處理端到端的閉環機械應用。相對成熟的開環AI應用比如人臉識別、語音識別等等,close loop對算法的挑戰極大,不過可以參考目前無人駕駛或自動駕駛的一些解決思路;

二是要有能力保證安全性,畢竟讓機械接入到物理世界后,對犯錯的容忍度肯定要比現在AIGC等技術低很多;

三是所應用的AI技術要能夠適應算力受限的機器人平臺,比如現在火爆的大模型技術;

四是對數據的采集和使用要求會更加的苛刻。

言外之意,機會很多挑戰更多。

而地平線,為大家提供了一個構建機器人的底座平臺,從硬件到軟件以及生態都進行了全方位的覆蓋,將幫助更多熱衷于此的有志之士更快迅速地進入該領域,從而為行業提供更多的可能性。

— 完 —

量子位 QbitAI · 頭條號簽約


相關推薦
免責聲明
本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。

熱門文章