|
一水 衡宇 魚羊 發(fā)自 凹非寺
# R6 Y* d) S: [ z3 }文章來源:量子位 | 公眾號 QbitAI剛剛,“鴿”了一年的稚暉君,終于帶著具身智能新品來填坑了!5 X7 [- u) Q+ Q. t
沒有什么比抽獎抽一臺,更能體現(xiàn)對產(chǎn)品的自信了。" e# C: I" J; i) d2 Y. E4 b" r4 M
isgn5awrjvh6408842902.png (189.29 KB, 下載次數(shù): 1)
下載附件
保存到相冊
isgn5awrjvh6408842902.png
2024-8-29 12:13 上傳
) Y' C& [+ ^- D. _+ s- S, V) z
一上來,稚暉君也沒藏著掖著,就在直播現(xiàn)場搭建的“攝影棚”里,機器人當場秀了一波在語音指令下動手調飲料的操作:
9 k( N& p' _) n \- O2 j
0gtdfyquxcj6408843003.gif (6.88 MB, 下載次數(shù): 0)
下載附件
保存到相冊
0gtdfyquxcj6408843003.gif
2024-8-29 12:13 上傳
5 c6 }) @5 Q* K8 J$ V& p. E* w) o! q6 m+ W
mqu1grsvtrh6408843103.gif (3.48 MB, 下載次數(shù): 0)
下載附件
保存到相冊
mqu1grsvtrh6408843103.gif
2024-8-29 12:13 上傳
4 Q4 I. ?! ^' [4 { {8 [7 D△2倍速現(xiàn)場主持人,也由此番發(fā)布的遠征A2機器人親自擔當。
0 D5 k3 w7 q# {' s
dnd5gj2eoef6408843204.gif (4.82 MB, 下載次數(shù): 0)
下載附件
保存到相冊
dnd5gj2eoef6408843204.gif
2024-8-29 12:13 上傳
6 z& O- t, r; m+ k
一套小連招下來,網(wǎng)友們be like:$ @1 F% W: F8 e+ C5 C
nqoyoiiteov6408843304.png (683.54 KB, 下載次數(shù): 0)
下載附件
保存到相冊
nqoyoiiteov6408843304.png
2024-8-29 12:13 上傳
' o8 D5 `/ g) e* U2 Z! AB站科技區(qū)流量擔當,誠不我欺(手動狗頭)。
! \" o1 L5 w* @
p4nomit4mwp6408843404.png (40.04 KB, 下載次數(shù): 0)
下載附件
保存到相冊
p4nomit4mwp6408843404.png
2024-8-29 12:13 上傳
/ T7 d9 m4 t+ H" J( E
盡管發(fā)布會只有短短1小時不到,但稚暉君和他背后公司智元機器人憋了一年,此番屬實帶來不少干貨,先給大家伙做個小總結:
+ H7 Q! ]. T/ `* ]發(fā)布遠征A2系列人形機器人+ w, Y/ F3 `3 {3 k! E6 {
全棧開源靈犀X1系列機器人,主打一個“人形機器人人人造”# r7 c" ?; _5 o* w9 @
自研關節(jié)模組實現(xiàn)量產(chǎn)化迭代升級,靈巧手自由度升級至19個1 r4 S" h1 H2 |- \# X- n
定義具身智能G1至G5演進路線
: k$ F, b6 ^- d4 o/ F' W" \& l0 k……! B% u o; B; E2 Q! |
總之,可以說是秀產(chǎn)品力的同時,也把硬核DIY的科技情懷給拉滿了。 a2 I; X5 {- ]& q' f/ h- C! c& F/ }
ppeh3litut36408843504.gif (679.84 KB, 下載次數(shù): 0)
下載附件
保存到相冊
ppeh3litut36408843504.gif
2024-8-29 12:13 上傳
7 _ e y; J/ x# W
具體詳情,咱們一項一項展開來嘮~
# {( n3 d" N6 i% X面向量產(chǎn)的人形機器人就像稚暉君自己所說,自去年8月中旬發(fā)布遠征A1以來,他及他身后的智元機器人頗有些低調,在公眾視野里可以說是“鴿”了一年。! F+ Q7 Z3 V4 E |; A$ F/ ?
2w30410uovq6408843604.png (28.21 KB, 下載次數(shù): 0)
下載附件
保存到相冊
2w30410uovq6408843604.png
2024-8-29 12:13 上傳
; K0 ], F& y/ E3 o* O但其實這一年中,智元機器人一直在“悶聲干大事”。+ _" k7 o* H! n% [
智元機器人銷售服務總經(jīng)理姜青松對此補充說:
2 l/ r! W2 ], O4 [; Y, w; H我們每個月都在迭代,但因為不具備商用條件,所以沒有宣傳。! Y+ P: O; B% Z4 K/ j6 f0 @5 u
而現(xiàn)在,面向商用,智元確實在這場發(fā)布會上,給出了階段性的思考和答案。6 X- Z: b" e3 V/ w: X E) O
首先,在產(chǎn)品方面,遠征A2系列機器人相較于前代,主打的就是一個“面向量產(chǎn)改進”。% e# c) t8 G1 g. j$ F
32lrsptppe36408843704.png (166.47 KB, 下載次數(shù): 0)
下載附件
保存到相冊
32lrsptppe36408843704.png
2024-8-29 12:13 上傳
' M% D8 n6 ?' X# o2 T! `- _
為此,智元此番發(fā)布了3款適用于不同場景的機器人:
2 ^3 U7 O" I9 J7 K; t遠征A2,身高一米七,體重140斤,是能雙足行走的交互服務機器人。大模型加持下,具備流暢的講解能力和穩(wěn)定的運動功能。0 \) f( @! c+ ]! C f& n
遠征A2-W,輪式柔性智造機器人。一開場給稚暉君做飲料的就是它,具備動態(tài)任務編排、復雜作業(yè)執(zhí)行,以及雙臂協(xié)同作業(yè)等能力。
6 [- b$ Q2 C& \: A遠征A2-Max,重載特種機器人,能夠搬動40kg以上的重物。該款機器人目前處于產(chǎn)品研發(fā)階段。
0 {; }! u6 @5 I4 [- c7 u! C( k9 Y0 `
mml4pcsgw5r6408843805.gif (6.48 MB, 下載次數(shù): 0)
下載附件
保存到相冊
mml4pcsgw5r6408843805.gif
2024-8-29 12:13 上傳
8 P/ h7 F+ F: }( }: [2 d! `具體到技術細節(jié)上,智源機器人將機器人系統(tǒng)劃分為動力域、感知域、通信域和控制域。. @" X9 ^9 X, G5 w4 i( Y! P
qszxsmlsw0u6408843905.png (62.91 KB, 下載次數(shù): 0)
下載附件
保存到相冊
qszxsmlsw0u6408843905.png
2024-8-29 12:13 上傳
$ }: O' {; d7 U4 Y- ]" x
動力域方面,智元自研的PowerFlow關節(jié)模組實現(xiàn)量產(chǎn)化迭代升級。其中最強型號額定扭矩達到270Nm,峰值扭矩達到512Nm。0 D+ ^, h7 w$ O) J/ p H
a5dfh4ulvut6408844005.png (129.58 KB, 下載次數(shù): 0)
下載附件
保存到相冊
a5dfh4ulvut6408844005.png
2024-8-29 12:13 上傳
# X. [( ?$ i& P6 h2 U; a7 F6 U4 \稚暉君表示,PowerFlow此番提升,主要是可靠性和穩(wěn)定性達到量產(chǎn)級別。在現(xiàn)場,他也透露這款關節(jié)模組將開啟對外售賣。
6 w; I' p3 q+ e& x此外,機器人靈巧手的自由度也升級至19個,其中主動自由度達到12個,并引入了基于MEMS原理的觸覺感知和視觸覺感知技術。 l3 @ p, L6 l# U/ N1 X: ^
使用工具擰螺絲:
T4 J) q) t6 E: o7 f* f
4ylo4a1vch56408844105.gif (1.12 MB, 下載次數(shù): 0)
下載附件
保存到相冊
4ylo4a1vch56408844105.gif
2024-8-29 12:13 上傳
" x: F. ~' J1 {拆快遞:
2 Z3 J; h( h* J& E' j- Y
4htsd3choss6408844206.gif (1.43 MB, 下載次數(shù): 0)
下載附件
保存到相冊
4htsd3choss6408844206.gif
2024-8-29 12:13 上傳
% a1 P( q, b( A- e! k4 S r1 @3 D干點穿針引線的精細活,都不在話下:
& d9 P" z- r; \1 Z0 h, n( g! n* M
i44gnavxkia6408844306.gif (701.1 KB, 下載次數(shù): 0)
下載附件
保存到相冊
i44gnavxkia6408844306.gif
2024-8-29 12:13 上傳
7 Y" O. m- Z* f6 R* i3 f/ W感知域方面,遠征A2系列集成了RGBD相機、激光雷達、全景相機等傳感器,引入自動駕駛Occupancy感知方案,通過SLAM算法進一步提升環(huán)境理解能力。
$ J; W, Z6 ]; n9 t* e9 ]通信域方面,智元自研了專為具身智能打造的輕量化、高性能通信框架AimRT。
) V/ }( O3 y8 k% p8 ]# F/ b相比ROS等第三方中間件,在性能、穩(wěn)定性、系統(tǒng)部署效率和靈活性均有提升的同時,兼容了ROS/ROS2已有生態(tài)。 v0 D/ I L, @ U: @: g6 t
AimRT還將于9月底開源。
$ ?% Z+ e' G) U# a# F
jqqovlejyvg6408844406.png (389.05 KB, 下載次數(shù): 0)
下載附件
保存到相冊
jqqovlejyvg6408844406.png
2024-8-29 12:13 上傳
3 D* q( R7 B# k4 R, y4 B控制域方面,結合Model-based和Learning-based兩種算法,智元進一步提升了機器人的運動控制和適應能力。并預研了基于自然語言指令集驅動的、可以適配不同機器人本體的AgentOS,基于強化學習,實現(xiàn)機器人技能的精準編排和高效執(zhí)行。
; L+ c5 [) o4 v7 i2 V
4wf4pblrnby6408844506.png (132.08 KB, 下載次數(shù): 0)
下載附件
保存到相冊
4wf4pblrnby6408844506.png
2024-8-29 12:13 上傳
1 Q5 a5 B C3 f) F( W3 L0 \/ X8 A另外,智元還構建了面向開放生態(tài)的軟件平臺AIMA(AI Machine Architecture),覆蓋機上、云端和客戶端。該平臺集成了機器人軟件的核心技術,同時提供豐富的二次開發(fā)接口。
+ H- k/ R8 o V. j- Z& V具身智能技術演進路線值得關注的是,配合自家商用化進程,智元此番還提出了類似自動駕駛L1-L5的具身智能技術演進路線:
7 S! I5 K, o2 T9 K; B/ @+ X* q4 pG1至G5(其中“G”指通用人工智能)。
4 `# m b: C y/ p/ d) o
tycjrba2w0z6408844606.png (431.29 KB, 下載次數(shù): 1)
下載附件
保存到相冊
tycjrba2w0z6408844606.png
2024-8-29 12:13 上傳
- C1 \, i! m$ w s7 b3 x6 O, l
其中,G1為傳統(tǒng)自動化階段,機器人基于大量人工編排執(zhí)行任務,輔以簡單視覺,基本不具備泛化能力。, p! C' N4 ]7 A9 U
G2階段,有了大模型的加持,機器人開始實現(xiàn)一大類場景的快速遷移。
; K/ F4 f% x. T( x0 w方法是,針對大量不同場景任務,提煉出可復用的原子能力,且以相對通用的方式實現(xiàn)這些能力。
! P5 L( Y9 p6 f, R: r過去一年,智元機器人在G2路線取得了階段性突破,實現(xiàn)了通用的:位姿估計模型UniPose、抓取模型UniGrasp,力控插拔模型UniPlug等一系列zero-shot和few-shot的通用原子技能。
5 x1 U; B8 T! O4 K( U5 Y6 m
g1cvpxi2wki6408844706.png (496.62 KB, 下載次數(shù): 0)
下載附件
保存到相冊
g1cvpxi2wki6408844706.png
2024-8-29 12:13 上傳
6 I- k8 [+ D( d/ Q
不過嘛,以上階段都還采用了大量手工編排。
. v8 e! K# t7 m到了G3端到端階段,機器人訓練從算法驅動變成數(shù)據(jù)驅動。5 a% k, Q2 ^$ E$ k- X
此時,由手工設計各類原子能力變?yōu)橐揽看罅繑?shù)據(jù)采集。這一階段的目標是,形成一套通用技能訓練框架。5 S+ m- w+ _3 V9 ?& `1 M- `% J
比如發(fā)布會反復提到的“PPT能力”,即抓、放、遞……" N* ?6 N/ {) k% r
xjmsxzmviov6408844806.png (567.99 KB, 下載次數(shù): 1)
下載附件
保存到相冊
xjmsxzmviov6408844806.png
2024-8-29 12:13 上傳
/ o( X* K, ~& G& m( W$ E, l) P
稚暉君特意提醒,當前實驗表明,端到端是一條具備Scale up潛力的路線。
( S; J4 I/ z; D+ I! U' h! o在G3基礎上,G4主要實現(xiàn)通用操作大模型。
* {* W0 Q" ~/ O7 n舉個例子,比如對于開瓶子、開門把手這兩個動作,G3階段還需要單獨采集數(shù)據(jù),以訓練不同的技能。! w' D" D6 h* j2 O7 V
但對人類來說,其實動作的底層邏輯是相通的。$ u3 d9 l7 c7 j+ `: c: C
因此,G4引入了大量跨場景的真實、仿真數(shù)據(jù),再加上時間模型等類似技術,讓AI理解背后物理原理,從而執(zhí)行更加復雜的任務。' v* e0 W& [0 U
至于最后的終極目標:AGI。對具身智能來說,主要還是能夠走出實驗室,在開放場景具備跨任務的泛化能力。5 a+ E. ?3 B6 x! V! a0 ? F
從G1到G5,一個顯著趨勢是:數(shù)據(jù)需求不斷上漲。$ l' H6 h" _1 E9 R9 y+ @
: o% p/ t' H# K+ `2 K9 k姜青松透露,目前智元已經(jīng)邁向G3階段。在G3路線上,智元機器人還形成了一套具身數(shù)據(jù)方案AIDEA。8 k' K; f1 f1 C% G
這是因為,“有多少人工就有多少智能,在具身智能領域依然成立”。
6 W2 ^/ n* G, u, e# z. q也就是說,高質量的人機操作數(shù)據(jù)非常關鍵。
: K# u7 c* q6 L1 ^4 L* X, e; Q# w b2 X/ d C3 S+ F
具體來說,AIDEA包括數(shù)采本體、遙操設備和數(shù)據(jù)平臺。' }. v* _- ?. X# e* y D
數(shù)采本體也就是輪式、足式等類型豐富、可靠穩(wěn)定的機器人。
5 A' Q. |1 U) r' o9 t8 c: p, i遙操設備支持全身映射、臂手協(xié)同和高精實時。
9 F3 o: t) a- Z( r( t數(shù)據(jù)平臺覆蓋數(shù)據(jù)采集、數(shù)據(jù)標注、數(shù)據(jù)管理、模型訓練、模型評測、模型部署再到數(shù)據(jù)回傳的全鏈路,支持SaaS服務和私有化部署。
/ p1 F2 B8 i. E' N' x9 W# U, u+ G" e9 U$ J7 K1 |0 K: K3 j# g" _( p
彩蛋是,基于AIDEA的百萬條真機、千萬條仿真數(shù)據(jù),同樣開源。今年四季度,感興趣的小伙伴可以蹲起來了~
' y* O3 l" u& S8 `“人形機器人人人造”以為介紹完遠征系列,智元機器人一年一度亮活大會就結束了嗎?
6 S( `9 K3 h% j1 e4 O5 \ Y并不!
( ^4 M; }% e {稚暉君一聲令下,遠征A2-W緩緩推上來了一個沒它高的神秘黑箱。% L% q' F+ {6 G
有點眼熟,好像是直播最開始,稚暉君指揮A2-Max搬走的那玩意兒:
/ k0 y$ o; `& l8 I
& _$ M; P/ P4 o7 ~% K1 T; Z# i里面的東西破箱而出,是智元推出的另一款機器人。 B9 I t3 |/ a, |. B
靈犀X1。1 l; \7 ]) V+ W0 B3 d" A' {
誕生于智元X-Lab實驗室(也可以簡單理解為智元內部的稚暉君實驗室),是智元機器人專門面向極致創(chuàng)新和敏捷探索而設立的。
; c- X* w' ?0 R
. O) m2 m5 P! w5 A今年6月立項,10個人組團投入其中,不到半個月前剛剛正式降生。
& Z, |- Y$ O% Y. W9 I0 o+ C7 M: j: x: `
8 P( I* G/ V. A1 q6 T! q& N視頻錄像顯示,靈犀X1身經(jīng)百摔:
+ c( P2 W' \# V
% r1 [: S9 d0 d; k. B, N$ f5 L* W6 X# I現(xiàn)在已經(jīng)能做到被大力推攘也不會摔倒了。
5 g4 }/ z6 H, f5 G
+ T% I3 P5 T7 w9 j' Y- `
% ~6 G: `) C1 j: t- m△來人啊,這里有人霸凌具身小機器人(不是)靈犀X1身高1.3米,體重小于33kg——比起遠征系列,靈犀系列看起來更小巧玲瓏;它的最大行走速度高于2米/秒,單臂負載大于3kg。
% F5 g# [) G( w+ G# P據(jù)介紹,靈犀X1全身上下都由兩款自研PowerFlow關節(jié)搭建成,分別命名為PF86和PF52。' A* x$ Y A6 _
這兩款PowerFlow對外銷售。
" M& F* N$ A0 n4 ~# i* e2 Z& J' Y) h, K1 |7 F C# E. P
此外,靈犀X1還具備中空走線、輸出端絕對值編碼、支持PF-Link智能接口等眾多功能。# k5 D0 u' |+ V$ N" Q
它融入了模塊化設計理念,可以通過簡單抱箍形式輕松拆裝,尤其是它的兩只“手”。
# o- e) x% M# A9 D; T2 G; } @. ~要知道,靈犀X1的標配是智元X-Lab自研的兩個“帶前饋力控、超低成本”的自適應通用夾爪。+ h! a8 y) v0 x' d; o4 C
自適應抓握,僅1個主動自由度。( L& d$ H& }0 y
* o8 y: C: K+ r- J* T1 m$ y但泛化性很強,抓啥都行。
: a" D( c2 \$ B; c# n8 x. o. Z# O# |3 M, P! B3 L2 N4 Y2 ?. i9 p
甚至是桌面上平躺著的一根針,也能穩(wěn)穩(wěn)夾起來。
; ?0 \8 T4 a4 ]! k! t4 y5 Y0 _+ ^/ U/ |5 w) L5 ~0 t6 q: t: G
但靈犀X1的執(zhí)行器不僅可以是自適應通用夾爪,也可以是百元級成本的六維力傳感器,滿足不同場景需求的那種。# ?* M8 ^% m( \/ p7 q9 P
4 \7 c( y$ J2 a7 g8 P+ n有點意思的是,靈犀X1可以開啟“機機模式”。
4 _$ R' k/ a) U: B簡單來說,就是打開靈犀X1的腦子(里面本來是空的),把手機裝進去,用性價比更高、功能更豐富、算力更強、普及率更廣的手機,來當它的腦子。. l; o x I* E
然后大家就能看到以下這個又好笑又有點詭異的對話畫面:
; }) h W! b; v+ I# y" I3 a8 e
9 r4 I) H1 g6 h此外,靈犀系列還有款機器人:
4 g0 P# K7 A6 F1 Q0 `- i專業(yè)數(shù)采機器人X1-W。+ j% Q" T3 p9 o3 e, h9 c, h% ^
和遠征系列的A2-W一樣,它們都是輪式,然后上半身可上下升降。$ N$ m: M6 E; [5 U8 ^& u4 }4 P9 B
不過與采訓推一體機器人A2-W相比,X1-W價格更低,適用于只做真實數(shù)據(jù)采集,服務預訓練階段;而A2-W可服務采集、訓練、推理多個流程,不僅對預訓練有用,對fine tuning也有用。& C& J, C' f! u! V) S: g' L
不同的應用場景可選用不同的機器人進行采集,搭配滿足全棧數(shù)據(jù)采集需求。3 C1 H# L) i0 `2 [6 V5 U
) W# s3 t0 @4 N4 g8 b最后就是大家都很關心的價格了。0 B7 T% I( ?' y0 D8 O( ^2 k7 P/ [
“友商都很卷,我們不參與價格戰(zhàn)!闭f完這句話,稚暉君按下手中的PPT遙控器,屏幕上出現(xiàn)了靈犀X1的價格——
" x$ Q8 W& A9 l0 o, A0元。. `0 Y1 a% y+ o# C
# {/ g. B' B* B# ^7 m! R. `
他表示,除自研關節(jié)外,靈犀X1的本體設計圖紙、軟件框架、中間件源碼、基礎運控算法,統(tǒng)統(tǒng)即將開源。: A3 b4 C8 H1 u, u' C
主打的就是一個“人形機器人人人造”。0 I* \+ R7 C$ u
# i3 P# X0 R" o R
稚暉君也現(xiàn)場給他的X-Lab打了波招聘廣告,“歡迎有想法的年輕人加入智元,加入X-Lab”。7 c* x% W7 M' q8 V
9 Y. |1 m0 l- O9 T& s# mOne More Thing最后,咱再來簡單正式介紹一下智元機器人(AgiBot)。
3 s7 L" d D# V' W2 T它成立于2023年2月,致力于AI+機器人的融合創(chuàng)新,以及打造具身智能機器人產(chǎn)品和應用生態(tài)。5 H9 G4 c) h/ U( ]$ S) J
創(chuàng)始團隊包括稚暉君(彭志輝),電子科大畢業(yè)后,先后在OPPO研究院、華為工作(以華為天才少年身份入職)。同時,他也是B站up主,自稱野生鋼鐵俠。! F8 o: R9 K4 m' J' l7 {) `
C: o4 B# |; i* H
同為創(chuàng)始人的,還有上海人工智能研究院智慧康養(yǎng)首席科學家、上海交通大學機械與動力工程學院教授閆維新。+ G( l1 s& C3 g4 W
去年8月,智元機器人推出首款產(chǎn)品:% f( o: G# h# X
通用型具身智能機器人原型機,遠征系列的A1。) v G* G+ f( L! j+ }) M
) g* K b y9 E5 ~3 p: V
今天,屬于是智元機器人第二次大張旗鼓地對外展示研發(fā)和產(chǎn)品進展。: d1 z. j" F6 {+ q. q# L/ }
截止到目前,智元機器人已完成了A4輪等多輪融資。
: B% `2 U8 U* o& e# ?智元官方還透露:
0 n2 E1 Z6 V0 T+ Z- t& w9 ^( T; K今年,智元機器人預估發(fā)貨量達到300臺左右,其中雙足200臺左右,輪式100臺左右。 m1 j$ Y! L2 l0 R
我是老溫,一名熱愛學習的嵌入式工程師
4 M6 O" H, m+ x% \7 v5 c( P; \6 I關注我,一起變得更加優(yōu)秀! |
|