|
一水 衡宇 魚羊 發(fā)自 凹非寺
( d! m$ o- e! h) W文章來源:量子位 | 公眾號 QbitAI剛剛,“鴿”了一年的稚暉君,終于帶著具身智能新品來填坑了!3 D2 G$ j" c* ^8 `; i. P/ \* g6 ]' J
沒有什么比抽獎抽一臺,更能體現(xiàn)對產(chǎn)品的自信了。
2 N' @) e- M6 O: j% l
0en0yeubexb64014195035.png (189.29 KB, 下載次數(shù): 0)
下載附件
保存到相冊
0en0yeubexb64014195035.png
2024-9-1 11:49 上傳
; g+ W0 R: p! }. g一上來,稚暉君也沒藏著掖著,就在直播現(xiàn)場搭建的“攝影棚”里,機器人當(dāng)場秀了一波在語音指令下動手調(diào)飲料的操作:! e: j( o& j9 K }$ c8 \
f1tfhmybyg464014195136.gif (6.88 MB, 下載次數(shù): 0)
下載附件
保存到相冊
f1tfhmybyg464014195136.gif
2024-9-1 11:49 上傳
2 @" _+ n/ F" h6 ?
; O- @7 A: V& c
0nnmwq4hk0n64014195237.gif (3.48 MB, 下載次數(shù): 0)
下載附件
保存到相冊
0nnmwq4hk0n64014195237.gif
2024-9-1 11:49 上傳
- N" S* [, m8 O7 x: ?7 I7 B) P/ B
△2倍速現(xiàn)場主持人,也由此番發(fā)布的遠征A2機器人親自擔(dān)當(dāng)。 X7 y' ?8 h! R1 o
0cxwpjgt42i64014195338.gif (4.82 MB, 下載次數(shù): 0)
下載附件
保存到相冊
0cxwpjgt42i64014195338.gif
2024-9-1 11:49 上傳
- q) m ?/ A" e
一套小連招下來,網(wǎng)友們be like:9 P; S0 @+ @( E. k8 |/ V
yb0efhbmxl264014195438.png (683.54 KB, 下載次數(shù): 0)
下載附件
保存到相冊
yb0efhbmxl264014195438.png
2024-9-1 11:49 上傳
7 ]: G1 V9 C2 h$ aB站科技區(qū)流量擔(dān)當(dāng),誠不我欺(手動狗頭)。3 s0 \8 L) D) k* F' P
jrlb3lvrro064014195538.png (40.04 KB, 下載次數(shù): 0)
下載附件
保存到相冊
jrlb3lvrro064014195538.png
2024-9-1 11:49 上傳
, S. ]& m$ @& L
盡管發(fā)布會只有短短1小時不到,但稚暉君和他背后公司智元機器人憋了一年,此番屬實帶來不少干貨,先給大家伙做個小總結(jié):( l5 b& d2 W0 u; T
發(fā)布遠征A2系列人形機器人
7 W( E# ^ Z; h. s+ E5 u全棧開源靈犀X1系列機器人,主打一個“人形機器人人人造”
% M+ B4 D4 j9 j _; G/ D0 [% X6 j自研關(guān)節(jié)模組實現(xiàn)量產(chǎn)化迭代升級,靈巧手自由度升級至19個6 b% }! Q, l/ I c: E' o" p; B
定義具身智能G1至G5演進路線
+ v' @. W, ?# t……
$ |+ q a( c& M. C. O6 n* ?" p總之,可以說是秀產(chǎn)品力的同時,也把硬核DIY的科技情懷給拉滿了。( e' U. {/ v- ~' W
gr3pe0n50wv64014195638.gif (679.84 KB, 下載次數(shù): 0)
下載附件
保存到相冊
gr3pe0n50wv64014195638.gif
2024-9-1 11:49 上傳
: b7 a9 P. f3 P! i3 A
具體詳情,咱們一項一項展開來嘮~* |5 }8 I4 k2 G# W7 I$ V* G1 d
面向量產(chǎn)的人形機器人就像稚暉君自己所說,自去年8月中旬發(fā)布遠征A1以來,他及他身后的智元機器人頗有些低調(diào),在公眾視野里可以說是“鴿”了一年。! J0 U$ a! R2 _ y4 z
wsuc4qq3b4e64014195738.png (28.21 KB, 下載次數(shù): 0)
下載附件
保存到相冊
wsuc4qq3b4e64014195738.png
2024-9-1 11:49 上傳
! m! X5 e( D7 e; m
但其實這一年中,智元機器人一直在“悶聲干大事”。; i# h' [2 _' s( @
智元機器人銷售服務(wù)總經(jīng)理姜青松對此補充說:8 ~8 b1 @# Z, `& X' Y* h# E
我們每個月都在迭代,但因為不具備商用條件,所以沒有宣傳。7 x# ^. @ D5 R
而現(xiàn)在,面向商用,智元確實在這場發(fā)布會上,給出了階段性的思考和答案。
2 ^0 N9 m3 k8 Y+ Q8 g8 p: \首先,在產(chǎn)品方面,遠征A2系列機器人相較于前代,主打的就是一個“面向量產(chǎn)改進”。
9 G" h* \& k7 Z( A" l0 i- M
1j223lpna4u64014195838.png (166.47 KB, 下載次數(shù): 0)
下載附件
保存到相冊
1j223lpna4u64014195838.png
2024-9-1 11:49 上傳
3 B- y3 Y* \/ Z* p4 \為此,智元此番發(fā)布了3款適用于不同場景的機器人:' L: I6 l5 f) {% c
遠征A2,身高一米七,體重140斤,是能雙足行走的交互服務(wù)機器人。大模型加持下,具備流暢的講解能力和穩(wěn)定的運動功能。2 ~( C/ E: @9 _6 m: N; w
遠征A2-W,輪式柔性智造機器人。一開場給稚暉君做飲料的就是它,具備動態(tài)任務(wù)編排、復(fù)雜作業(yè)執(zhí)行,以及雙臂協(xié)同作業(yè)等能力。$ M7 A" K2 f t2 e
遠征A2-Max,重載特種機器人,能夠搬動40kg以上的重物。該款機器人目前處于產(chǎn)品研發(fā)階段。
! V; x& G6 F. I# z3 n2 ~& |4 F. K+ X
ojwkfnoox5k64014195939.gif (6.48 MB, 下載次數(shù): 0)
下載附件
保存到相冊
ojwkfnoox5k64014195939.gif
2024-9-1 11:49 上傳
+ k$ r! T5 r. _* B6 n
具體到技術(shù)細節(jié)上,智源機器人將機器人系統(tǒng)劃分為動力域、感知域、通信域和控制域。
7 B7 J1 y+ C( a6 L6 n$ `5 O
zrdumnogiom64014196039.png (62.91 KB, 下載次數(shù): 0)
下載附件
保存到相冊
zrdumnogiom64014196039.png
2024-9-1 11:49 上傳
$ T2 C, \( @& ^; R2 V- [8 N# v I動力域方面,智元自研的PowerFlow關(guān)節(jié)模組實現(xiàn)量產(chǎn)化迭代升級。其中最強型號額定扭矩達到270Nm,峰值扭矩達到512Nm。
/ s% l. f! G% R$ K5 c* k
3dj2ejvd3qr64014196139.png (129.58 KB, 下載次數(shù): 0)
下載附件
保存到相冊
3dj2ejvd3qr64014196139.png
2024-9-1 11:49 上傳
! [' b* g1 ^& r7 k稚暉君表示,PowerFlow此番提升,主要是可靠性和穩(wěn)定性達到量產(chǎn)級別。在現(xiàn)場,他也透露這款關(guān)節(jié)模組將開啟對外售賣。
, o: X1 e' l) R此外,機器人靈巧手的自由度也升級至19個,其中主動自由度達到12個,并引入了基于MEMS原理的觸覺感知和視觸覺感知技術(shù)。- I; ?7 E0 e% j* X. W* d' }; o( @5 v% _2 @
使用工具擰螺絲:
+ ]- _6 b4 {: A+ n6 N# z' v
zh0ubmvdnxl64014196239.gif (1.12 MB, 下載次數(shù): 0)
下載附件
保存到相冊
zh0ubmvdnxl64014196239.gif
2024-9-1 11:49 上傳
, w' Z# |0 b0 m% K
拆快遞:
2 j& c$ E1 G: `
cktoegowlzx64014196340.gif (1.43 MB, 下載次數(shù): 0)
下載附件
保存到相冊
cktoegowlzx64014196340.gif
2024-9-1 11:49 上傳
, ^ R6 F) E, U F$ m+ ]- q- g, p0 v
干點穿針引線的精細活,都不在話下:. Z A8 I' T" r% w; Z
g3z4jbqqp0z64014196440.gif (701.1 KB, 下載次數(shù): 0)
下載附件
保存到相冊
g3z4jbqqp0z64014196440.gif
2024-9-1 11:49 上傳
4 A8 @% Y& b; v3 p/ ^6 n6 F感知域方面,遠征A2系列集成了RGBD相機、激光雷達、全景相機等傳感器,引入自動駕駛Occupancy感知方案,通過SLAM算法進一步提升環(huán)境理解能力。
; D1 f: e1 Y0 m- q" e7 e: g通信域方面,智元自研了專為具身智能打造的輕量化、高性能通信框架AimRT。3 G6 f1 W" {+ H0 v6 x/ P; T
相比ROS等第三方中間件,在性能、穩(wěn)定性、系統(tǒng)部署效率和靈活性均有提升的同時,兼容了ROS/ROS2已有生態(tài)。) s: h3 f9 Z5 K: a0 E; y* A5 _% ]
AimRT還將于9月底開源。
8 p2 f# R1 b& O2 F' r1 N2 W' ]
531wkkmvk2v64014196540.png (389.05 KB, 下載次數(shù): 0)
下載附件
保存到相冊
531wkkmvk2v64014196540.png
2024-9-1 11:49 上傳
7 I& N, v' A& M6 m! j; R) H6 ?, q, D控制域方面,結(jié)合Model-based和Learning-based兩種算法,智元進一步提升了機器人的運動控制和適應(yīng)能力。并預(yù)研了基于自然語言指令集驅(qū)動的、可以適配不同機器人本體的AgentOS,基于強化學(xué)習(xí),實現(xiàn)機器人技能的精準(zhǔn)編排和高效執(zhí)行。
; G6 m2 W8 w% I
tavb3xyacdh64014196640.png (132.08 KB, 下載次數(shù): 0)
下載附件
保存到相冊
tavb3xyacdh64014196640.png
2024-9-1 11:49 上傳
9 O" c$ W- P, s$ u: B另外,智元還構(gòu)建了面向開放生態(tài)的軟件平臺AIMA(AI Machine Architecture),覆蓋機上、云端和客戶端。該平臺集成了機器人軟件的核心技術(shù),同時提供豐富的二次開發(fā)接口。8 S+ S2 h; C3 q
具身智能技術(shù)演進路線值得關(guān)注的是,配合自家商用化進程,智元此番還提出了類似自動駕駛L1-L5的具身智能技術(shù)演進路線:
3 u3 V7 J1 u' Y( e8 E) y- J- tG1至G5(其中“G”指通用人工智能)。8 }5 B* T+ b. l0 B7 \( y! s" [. y
zqzqx2arf5z64014196740.png (431.29 KB, 下載次數(shù): 0)
下載附件
保存到相冊
zqzqx2arf5z64014196740.png
2024-9-1 11:49 上傳
: n$ |6 z( B S, ^: ~
其中,G1為傳統(tǒng)自動化階段,機器人基于大量人工編排執(zhí)行任務(wù),輔以簡單視覺,基本不具備泛化能力。
6 @* u# Y1 j3 X* bG2階段,有了大模型的加持,機器人開始實現(xiàn)一大類場景的快速遷移。
& D- u$ p0 E* {! Y9 z1 n8 Y: p方法是,針對大量不同場景任務(wù),提煉出可復(fù)用的原子能力,且以相對通用的方式實現(xiàn)這些能力。
. a) q) L, Y2 p8 s5 u) r4 B0 U, E過去一年,智元機器人在G2路線取得了階段性突破,實現(xiàn)了通用的:位姿估計模型UniPose、抓取模型UniGrasp,力控插拔模型UniPlug等一系列zero-shot和few-shot的通用原子技能。
9 y2 k ?. C9 ]7 m$ j' f) O% G
ca3vqladstb64014196840.png (496.62 KB, 下載次數(shù): 0)
下載附件
保存到相冊
ca3vqladstb64014196840.png
2024-9-1 11:49 上傳
, F: _) d+ y( z5 a, E5 }% W不過嘛,以上階段都還采用了大量手工編排。7 q# w& `: ?2 T$ F! V$ ^, U
到了G3端到端階段,機器人訓(xùn)練從算法驅(qū)動變成數(shù)據(jù)驅(qū)動。
' d% m' c0 ]4 W/ W# x) z! k4 `2 u* K9 |此時,由手工設(shè)計各類原子能力變?yōu)橐揽看罅繑?shù)據(jù)采集。這一階段的目標(biāo)是,形成一套通用技能訓(xùn)練框架。" P6 C. _2 y# R4 N2 x* @8 \3 S
比如發(fā)布會反復(fù)提到的“PPT能力”,即抓、放、遞……
2 y, A; d# |% Q+ y/ Q3 Y
iawphaibgs564014196940.png (567.99 KB, 下載次數(shù): 0)
下載附件
保存到相冊
iawphaibgs564014196940.png
2024-9-1 11:49 上傳
# U8 B" ]8 A1 L* e
稚暉君特意提醒,當(dāng)前實驗表明,端到端是一條具備Scale up潛力的路線。/ i" Q3 b& R/ r7 v4 I/ p
在G3基礎(chǔ)上,G4主要實現(xiàn)通用操作大模型。
3 I) b: \! _9 I舉個例子,比如對于開瓶子、開門把手這兩個動作,G3階段還需要單獨采集數(shù)據(jù),以訓(xùn)練不同的技能。
0 V; M) Z( ~% c5 }( ?# L6 }0 h但對人類來說,其實動作的底層邏輯是相通的。
) A1 [0 D) u! h6 e因此,G4引入了大量跨場景的真實、仿真數(shù)據(jù),再加上時間模型等類似技術(shù),讓AI理解背后物理原理,從而執(zhí)行更加復(fù)雜的任務(wù)。( o2 L3 o: a6 L# \
至于最后的終極目標(biāo):AGI。對具身智能來說,主要還是能夠走出實驗室,在開放場景具備跨任務(wù)的泛化能力。
3 c, Y {/ n; |8 `2 _從G1到G5,一個顯著趨勢是:數(shù)據(jù)需求不斷上漲。
3 z) @ e) r }
1 b: K, H q9 K; g" B姜青松透露,目前智元已經(jīng)邁向G3階段。在G3路線上,智元機器人還形成了一套具身數(shù)據(jù)方案AIDEA。
( y( U1 {6 |" j3 J1 ?0 c6 g% E7 n這是因為,“有多少人工就有多少智能,在具身智能領(lǐng)域依然成立”。
' k$ ~7 c; B, G3 Y7 u也就是說,高質(zhì)量的人機操作數(shù)據(jù)非常關(guān)鍵。5 e6 `3 N, @, H6 k
# L. c$ e# |. w" T
具體來說,AIDEA包括數(shù)采本體、遙操設(shè)備和數(shù)據(jù)平臺。7 t9 D1 E5 T. V: O. A- E5 I
數(shù)采本體也就是輪式、足式等類型豐富、可靠穩(wěn)定的機器人。, f1 W2 g" H* Q& ^
遙操設(shè)備支持全身映射、臂手協(xié)同和高精實時。7 T4 ^, f* z) q- \& S4 L- F
數(shù)據(jù)平臺覆蓋數(shù)據(jù)采集、數(shù)據(jù)標(biāo)注、數(shù)據(jù)管理、模型訓(xùn)練、模型評測、模型部署再到數(shù)據(jù)回傳的全鏈路,支持SaaS服務(wù)和私有化部署。. g6 {+ N& @8 m& h$ o
Q C* Z7 Y" @' W6 Z8 c彩蛋是,基于AIDEA的百萬條真機、千萬條仿真數(shù)據(jù),同樣開源。今年四季度,感興趣的小伙伴可以蹲起來了~
- u u6 ^7 }. [+ R“人形機器人人人造”以為介紹完遠征系列,智元機器人一年一度亮活大會就結(jié)束了嗎?3 O- p& \/ B; c5 { k3 J
并不!
$ a) P7 t' E% s+ H; R稚暉君一聲令下,遠征A2-W緩緩?fù)粕蟻砹艘粋沒它高的神秘黑箱。- o# W& X, T+ \6 y0 G
有點眼熟,好像是直播最開始,稚暉君指揮A2-Max搬走的那玩意兒:- ]7 I# Q- U2 M* V
) W: W9 L' a# W里面的東西破箱而出,是智元推出的另一款機器人。! [' B; r0 o9 K5 z$ R
靈犀X1。' N. w% @- f, w4 U& d2 h8 i
誕生于智元X-Lab實驗室(也可以簡單理解為智元內(nèi)部的稚暉君實驗室),是智元機器人專門面向極致創(chuàng)新和敏捷探索而設(shè)立的。
( j4 @4 P1 G6 J* a0 h; ^+ p' R
M1 q- @8 T: @; F今年6月立項,10個人組團投入其中,不到半個月前剛剛正式降生。
. h: A* B2 b% l. p; h' e: @4 m0 U' B! C/ D! q
視頻錄像顯示,靈犀X1身經(jīng)百摔:
8 o% h1 M9 }/ V2 }
2 v Y W* P3 Z8 e. @; G現(xiàn)在已經(jīng)能做到被大力推攘也不會摔倒了。
% ~, [2 h8 L+ n: e8 J7 N1 n, h& l3 p1 \0 ^
1 |( Y% _' x5 O% c5 X( o& i
△來人啊,這里有人霸凌具身小機器人(不是)靈犀X1身高1.3米,體重小于33kg——比起遠征系列,靈犀系列看起來更小巧玲瓏;它的最大行走速度高于2米/秒,單臂負載大于3kg。
: M; u4 C6 K: `據(jù)介紹,靈犀X1全身上下都由兩款自研PowerFlow關(guān)節(jié)搭建成,分別命名為PF86和PF52。( [' C2 i: s8 C" K* Z: y& J
這兩款PowerFlow對外銷售。
- c4 ~! h/ j. U1 `9 M' _3 p- ^$ p6 x! y7 J% C
此外,靈犀X1還具備中空走線、輸出端絕對值編碼、支持PF-Link智能接口等眾多功能。
% x( _ C5 W6 ?7 I9 U, k: |" Y它融入了模塊化設(shè)計理念,可以通過簡單抱箍形式輕松拆裝,尤其是它的兩只“手”。2 u/ L% p( Z; ?( `" `" v2 R' `$ b8 }1 ?
要知道,靈犀X1的標(biāo)配是智元X-Lab自研的兩個“帶前饋力控、超低成本”的自適應(yīng)通用夾爪。
) D( v) Z6 {+ c! p3 |/ @自適應(yīng)抓握,僅1個主動自由度。" N4 A0 L# X) ]7 u
; C7 b. W4 j! Y但泛化性很強,抓啥都行。
# Z/ {& p6 P. X1 C* u
9 q, Q' p1 l/ J9 t. [甚至是桌面上平躺著的一根針,也能穩(wěn)穩(wěn)夾起來。8 s* D! I' [9 f$ {+ t
; R& r6 L9 V+ h4 a2 {但靈犀X1的執(zhí)行器不僅可以是自適應(yīng)通用夾爪,也可以是百元級成本的六維力傳感器,滿足不同場景需求的那種。5 l* [. ?' p2 s* N& P$ E
1 Y1 ^) X2 c/ p1 S% f0 d! O/ m有點意思的是,靈犀X1可以開啟“機機模式”。
3 X# X) O, \& ?' I/ ]簡單來說,就是打開靈犀X1的腦子(里面本來是空的),把手機裝進去,用性價比更高、功能更豐富、算力更強、普及率更廣的手機,來當(dāng)它的腦子。
( ^: [! b. ?1 Q* E然后大家就能看到以下這個又好笑又有點詭異的對話畫面:/ n: S7 r/ h) |
! K9 C+ l' r3 }+ c此外,靈犀系列還有款機器人:1 {: I+ C; D2 A
專業(yè)數(shù)采機器人X1-W。% g8 p) w+ Y3 }) B
和遠征系列的A2-W一樣,它們都是輪式,然后上半身可上下升降。
- ~$ `* ^! k2 C! |, S不過與采訓(xùn)推一體機器人A2-W相比,X1-W價格更低,適用于只做真實數(shù)據(jù)采集,服務(wù)預(yù)訓(xùn)練階段;而A2-W可服務(wù)采集、訓(xùn)練、推理多個流程,不僅對預(yù)訓(xùn)練有用,對fine tuning也有用。 ~4 l) l8 y: w- _+ { q
不同的應(yīng)用場景可選用不同的機器人進行采集,搭配滿足全棧數(shù)據(jù)采集需求。
; [$ i# T+ H0 f" U9 Z
]" m1 o4 U5 R, N$ s% p最后就是大家都很關(guān)心的價格了。
3 Z+ B* C) g" {1 w“友商都很卷,我們不參與價格戰(zhàn)!闭f完這句話,稚暉君按下手中的PPT遙控器,屏幕上出現(xiàn)了靈犀X1的價格——
; M _$ u% F5 n: z; u! _0元。
_# N, ~ R9 U$ F" O+ ?2 B3 N5 l4 N `: ]4 |
他表示,除自研關(guān)節(jié)外,靈犀X1的本體設(shè)計圖紙、軟件框架、中間件源碼、基礎(chǔ)運控算法,統(tǒng)統(tǒng)即將開源。" b Y2 x% l8 a
主打的就是一個“人形機器人人人造”。5 ], W8 [* I+ q
* W8 K r7 B: h9 p. ~" y2 m/ H, u
稚暉君也現(xiàn)場給他的X-Lab打了波招聘廣告,“歡迎有想法的年輕人加入智元,加入X-Lab”。
/ T8 B% R" n: K$ j4 H3 n1 F) Q) ^& \, S' I1 ?9 ]
One More Thing最后,咱再來簡單正式介紹一下智元機器人(AgiBot)。: M8 S# |( u6 M6 O
它成立于2023年2月,致力于AI+機器人的融合創(chuàng)新,以及打造具身智能機器人產(chǎn)品和應(yīng)用生態(tài)。& l4 ^$ C W% Y3 F7 F1 |, ~) D
創(chuàng)始團隊包括稚暉君(彭志輝),電子科大畢業(yè)后,先后在OPPO研究院、華為工作(以華為天才少年身份入職)。同時,他也是B站up主,自稱野生鋼鐵俠。
' q2 e. {1 [7 @2 Y
$ M j8 b- ~; }同為創(chuàng)始人的,還有上海人工智能研究院智慧康養(yǎng)首席科學(xué)家、上海交通大學(xué)機械與動力工程學(xué)院教授閆維新。, w4 F+ P' @; {! K0 A. E
去年8月,智元機器人推出首款產(chǎn)品:
1 j+ K( Z- j- d3 @9 X通用型具身智能機器人原型機,遠征系列的A1。 n) C4 J# y1 W! }
) g* H: d+ x: |" E( K
今天,屬于是智元機器人第二次大張旗鼓地對外展示研發(fā)和產(chǎn)品進展。
5 Q! ~4 G% ?3 ]! }3 I- Z截止到目前,智元機器人已完成了A4輪等多輪融資。
4 f, T0 I. N; a0 z3 K/ Y+ ?; W智元官方還透露:
/ P" r: u) W5 F8 P/ m V今年,智元機器人預(yù)估發(fā)貨量達到300臺左右,其中雙足200臺左右,輪式100臺左右。- V8 K; R0 M) q3 k, w% P
我是老溫,一名熱愛學(xué)習(xí)的嵌入式工程師( C" T4 y& K, ]3 o; Z
關(guān)注我,一起變得更加優(yōu)秀! |
|