|
一水 衡宇 魚羊 發(fā)自 凹非寺- i% I: ^: ]% E/ a( \6 C z( m
文章來源:量子位 | 公眾號 QbitAI剛剛,“鴿”了一年的稚暉君,終于帶著具身智能新品來填坑了!
$ l% E6 U3 X% |# M+ `5 N沒有什么比抽獎抽一臺,更能體現(xiàn)對產(chǎn)品的自信了。0 n2 }; y. u$ J6 ^
mcux01oyg2f6403557242.png (189.29 KB, 下載次數(shù): 0)
下載附件
保存到相冊
mcux01oyg2f6403557242.png
2024-9-7 11:15 上傳
' u4 U6 p8 v" s8 p7 V+ c
一上來,稚暉君也沒藏著掖著,就在直播現(xiàn)場搭建的“攝影棚”里,機器人當(dāng)場秀了一波在語音指令下動手調(diào)飲料的操作:; @7 J' q+ K/ `! @2 y
1ykxyjgp5r46403557343.gif (6.88 MB, 下載次數(shù): 0)
下載附件
保存到相冊
1ykxyjgp5r46403557343.gif
2024-9-7 11:15 上傳
$ M+ Q1 X( [8 ~! j# N q4 s
3 g# ~& E* Z1 C- i: f7 S; T
xib1exwwpfo6403557443.gif (3.48 MB, 下載次數(shù): 1)
下載附件
保存到相冊
xib1exwwpfo6403557443.gif
2024-9-7 11:15 上傳
3 f3 p. t/ a. J0 g3 m w M
△2倍速現(xiàn)場主持人,也由此番發(fā)布的遠(yuǎn)征A2機器人親自擔(dān)當(dāng)。9 X+ r& k" c# N% B
fuyzb5vabbf6403557545.gif (4.82 MB, 下載次數(shù): 0)
下載附件
保存到相冊
fuyzb5vabbf6403557545.gif
2024-9-7 11:15 上傳
# _( i& }& k6 r! @0 v% S6 Y
一套小連招下來,網(wǎng)友們be like:
) W0 u J3 I; @- O0 I+ t
4it42odafan6403557645.png (683.54 KB, 下載次數(shù): 0)
下載附件
保存到相冊
4it42odafan6403557645.png
2024-9-7 11:15 上傳
4 p# ^2 ]4 B3 N. \! n- AB站科技區(qū)流量擔(dān)當(dāng),誠不我欺(手動狗頭)。
9 Z& `& k/ Q- t1 b
3trq1fqgs4s6403557745.png (40.04 KB, 下載次數(shù): 0)
下載附件
保存到相冊
3trq1fqgs4s6403557745.png
2024-9-7 11:15 上傳
, G1 f3 x9 {" Q- |& B8 h
盡管發(fā)布會只有短短1小時不到,但稚暉君和他背后公司智元機器人憋了一年,此番屬實帶來不少干貨,先給大家伙做個小總結(jié):9 y* Y( Z8 Z) X& f
發(fā)布遠(yuǎn)征A2系列人形機器人8 G2 b9 Y( d0 J- \% x! b( U& P C, s1 u
全棧開源靈犀X1系列機器人,主打一個“人形機器人人人造”
8 g) y! I% I- f' U; k6 V自研關(guān)節(jié)模組實現(xiàn)量產(chǎn)化迭代升級,靈巧手自由度升級至19個1 j* J, e' I( f# `- T9 {
定義具身智能G1至G5演進(jìn)路線
. k( }( ]/ q6 p6 s6 ^' b1 k/ Z) z……
! t7 S X( d! a; x* m總之,可以說是秀產(chǎn)品力的同時,也把硬核DIY的科技情懷給拉滿了。
; L' j9 e) q Z! F+ T
byzypvmdg256403557845.gif (679.84 KB, 下載次數(shù): 0)
下載附件
保存到相冊
byzypvmdg256403557845.gif
2024-9-7 11:15 上傳
: X3 o1 ?4 E. S9 U2 J
具體詳情,咱們一項一項展開來嘮~2 K- I; K6 }* t' @' u& @+ P
面向量產(chǎn)的人形機器人就像稚暉君自己所說,自去年8月中旬發(fā)布遠(yuǎn)征A1以來,他及他身后的智元機器人頗有些低調(diào),在公眾視野里可以說是“鴿”了一年。: t. E6 R5 O; Z' n0 V5 } w
nzkewx4ford6403557945.png (28.21 KB, 下載次數(shù): 0)
下載附件
保存到相冊
nzkewx4ford6403557945.png
2024-9-7 11:15 上傳
/ r* K# e( C" V, G" w0 c但其實這一年中,智元機器人一直在“悶聲干大事”。& w5 W2 f2 X$ c# M
智元機器人銷售服務(wù)總經(jīng)理姜青松對此補充說:. V& ~% D) e3 D' }6 `1 x* r0 ^
我們每個月都在迭代,但因為不具備商用條件,所以沒有宣傳。
/ d& L4 K1 X" m; p8 \& W# @而現(xiàn)在,面向商用,智元確實在這場發(fā)布會上,給出了階段性的思考和答案。
, i2 V6 ~4 K" s, r- G& }5 N/ s, a首先,在產(chǎn)品方面,遠(yuǎn)征A2系列機器人相較于前代,主打的就是一個“面向量產(chǎn)改進(jìn)”。. [2 Z% g. M; B0 |* Q
p3nrxctgzxl6403558045.png (166.47 KB, 下載次數(shù): 0)
下載附件
保存到相冊
p3nrxctgzxl6403558045.png
2024-9-7 11:15 上傳
9 [2 {. z" Q- m( F5 v/ W. U" b為此,智元此番發(fā)布了3款適用于不同場景的機器人:
: {+ w7 D, Q j+ B2 e, \遠(yuǎn)征A2,身高一米七,體重140斤,是能雙足行走的交互服務(wù)機器人。大模型加持下,具備流暢的講解能力和穩(wěn)定的運動功能。2 w2 P/ ~. ], W& [" Q/ A- [6 G, [. w
遠(yuǎn)征A2-W,輪式柔性智造機器人。一開場給稚暉君做飲料的就是它,具備動態(tài)任務(wù)編排、復(fù)雜作業(yè)執(zhí)行,以及雙臂協(xié)同作業(yè)等能力。
/ c6 r4 `( ^6 u) U$ r遠(yuǎn)征A2-Max,重載特種機器人,能夠搬動40kg以上的重物。該款機器人目前處于產(chǎn)品研發(fā)階段。1 a' O: S1 I; b
/ r& Y5 `! Y' I" Q8 U
nzbglv4ji2x6403558146.gif (6.48 MB, 下載次數(shù): 0)
下載附件
保存到相冊
nzbglv4ji2x6403558146.gif
2024-9-7 11:15 上傳
2 N7 `9 _1 t" j4 v" T
具體到技術(shù)細(xì)節(jié)上,智源機器人將機器人系統(tǒng)劃分為動力域、感知域、通信域和控制域。
6 O# a. j1 U7 r) w
b1osntvn3js6403558246.png (62.91 KB, 下載次數(shù): 0)
下載附件
保存到相冊
b1osntvn3js6403558246.png
2024-9-7 11:15 上傳
9 ~! C, P6 w; }6 X" }
動力域方面,智元自研的PowerFlow關(guān)節(jié)模組實現(xiàn)量產(chǎn)化迭代升級。其中最強型號額定扭矩達(dá)到270Nm,峰值扭矩達(dá)到512Nm。& N. B+ d. Q& l7 A! }
53is1bl5xck6403558346.png (129.58 KB, 下載次數(shù): 0)
下載附件
保存到相冊
53is1bl5xck6403558346.png
2024-9-7 11:15 上傳
7 ?# w8 F* a7 { N' J稚暉君表示,PowerFlow此番提升,主要是可靠性和穩(wěn)定性達(dá)到量產(chǎn)級別。在現(xiàn)場,他也透露這款關(guān)節(jié)模組將開啟對外售賣。
) l2 }6 _: M8 X7 S4 n( ?此外,機器人靈巧手的自由度也升級至19個,其中主動自由度達(dá)到12個,并引入了基于MEMS原理的觸覺感知和視觸覺感知技術(shù)。5 d4 w$ ?, u. x3 _
使用工具擰螺絲:
# _2 A/ A) }0 N' j6 l; O1 I& `
5vghuuzrbau6403558446.gif (1.12 MB, 下載次數(shù): 0)
下載附件
保存到相冊
5vghuuzrbau6403558446.gif
2024-9-7 11:15 上傳
3 u4 F, P& t* e: D! a拆快遞:
" \3 [; K% h5 \
pjahhxx1h0q6403558547.gif (1.43 MB, 下載次數(shù): 1)
下載附件
保存到相冊
pjahhxx1h0q6403558547.gif
2024-9-7 11:15 上傳
5 L' ?% T" P( h: }2 V# G1 H
干點穿針引線的精細(xì)活,都不在話下:6 t O: R' U+ W: x
3ugofunt5wo6403558647.gif (701.1 KB, 下載次數(shù): 0)
下載附件
保存到相冊
3ugofunt5wo6403558647.gif
2024-9-7 11:15 上傳
+ A+ ~5 }: |/ ^! A' n6 c# w2 }9 B$ p感知域方面,遠(yuǎn)征A2系列集成了RGBD相機、激光雷達(dá)、全景相機等傳感器,引入自動駕駛Occupancy感知方案,通過SLAM算法進(jìn)一步提升環(huán)境理解能力。' ]) O) A) A/ n8 ?5 ?
通信域方面,智元自研了專為具身智能打造的輕量化、高性能通信框架AimRT。2 H( X& C9 K# L3 o% t# R. L. h0 u
相比ROS等第三方中間件,在性能、穩(wěn)定性、系統(tǒng)部署效率和靈活性均有提升的同時,兼容了ROS/ROS2已有生態(tài)。
% v* h" V, {- O6 HAimRT還將于9月底開源。
3 w0 i* ]' q4 [, H# J
bdqttojxkyh6403558747.png (389.05 KB, 下載次數(shù): 0)
下載附件
保存到相冊
bdqttojxkyh6403558747.png
2024-9-7 11:15 上傳
) I2 o: X" d' U. J1 N% F( y
控制域方面,結(jié)合Model-based和Learning-based兩種算法,智元進(jìn)一步提升了機器人的運動控制和適應(yīng)能力。并預(yù)研了基于自然語言指令集驅(qū)動的、可以適配不同機器人本體的AgentOS,基于強化學(xué)習(xí),實現(xiàn)機器人技能的精準(zhǔn)編排和高效執(zhí)行。0 \$ C4 d# t& r9 j
vvdx2lknvq26403558847.png (132.08 KB, 下載次數(shù): 0)
下載附件
保存到相冊
vvdx2lknvq26403558847.png
2024-9-7 11:15 上傳
2 E$ d' M; w% [3 N% ~' Y5 `另外,智元還構(gòu)建了面向開放生態(tài)的軟件平臺AIMA(AI Machine Architecture),覆蓋機上、云端和客戶端。該平臺集成了機器人軟件的核心技術(shù),同時提供豐富的二次開發(fā)接口。* g3 h0 F7 F" C5 B3 i4 w- X
具身智能技術(shù)演進(jìn)路線值得關(guān)注的是,配合自家商用化進(jìn)程,智元此番還提出了類似自動駕駛L1-L5的具身智能技術(shù)演進(jìn)路線:- K* v; o* @7 ?, }4 ?+ G
G1至G5(其中“G”指通用人工智能)。2 k6 \* f& U ]5 h# X- T. d
nu0ur2quvzf6403558947.png (431.29 KB, 下載次數(shù): 0)
下載附件
保存到相冊
nu0ur2quvzf6403558947.png
2024-9-7 11:15 上傳
/ q( g# h. t& R2 V+ T( w其中,G1為傳統(tǒng)自動化階段,機器人基于大量人工編排執(zhí)行任務(wù),輔以簡單視覺,基本不具備泛化能力。
, O6 `2 Y- ~6 K. F+ tG2階段,有了大模型的加持,機器人開始實現(xiàn)一大類場景的快速遷移。7 C) W/ p9 N O5 g
方法是,針對大量不同場景任務(wù),提煉出可復(fù)用的原子能力,且以相對通用的方式實現(xiàn)這些能力。& n8 h$ q1 U& c* w* k: j6 r9 ~
過去一年,智元機器人在G2路線取得了階段性突破,實現(xiàn)了通用的:位姿估計模型UniPose、抓取模型UniGrasp,力控插拔模型UniPlug等一系列zero-shot和few-shot的通用原子技能。3 Q6 X# q7 H6 x1 T% S$ s
k1nqekh0hjg6403559047.png (496.62 KB, 下載次數(shù): 0)
下載附件
保存到相冊
k1nqekh0hjg6403559047.png
2024-9-7 11:15 上傳
+ ~+ q; L, r0 ^2 V4 @9 }& B
不過嘛,以上階段都還采用了大量手工編排。
0 a. B2 F* ^8 g! i7 }到了G3端到端階段,機器人訓(xùn)練從算法驅(qū)動變成數(shù)據(jù)驅(qū)動。) D" q; I0 w5 p" T9 ~
此時,由手工設(shè)計各類原子能力變?yōu)橐揽看罅繑?shù)據(jù)采集。這一階段的目標(biāo)是,形成一套通用技能訓(xùn)練框架。4 T9 N! O+ k* I2 Q$ B3 L2 a a
比如發(fā)布會反復(fù)提到的“PPT能力”,即抓、放、遞……
: S) Y) u9 a1 u) Z- h
pyjpbzdll536403559147.png (567.99 KB, 下載次數(shù): 0)
下載附件
保存到相冊
pyjpbzdll536403559147.png
2024-9-7 11:15 上傳
; w# X5 ]: R' ` @) ^0 q稚暉君特意提醒,當(dāng)前實驗表明,端到端是一條具備Scale up潛力的路線。
) ^' c- k( [' \% ]在G3基礎(chǔ)上,G4主要實現(xiàn)通用操作大模型。! ~; N Y: f+ M9 b: f, q0 ?, z3 d
舉個例子,比如對于開瓶子、開門把手這兩個動作,G3階段還需要單獨采集數(shù)據(jù),以訓(xùn)練不同的技能。- H4 I! x( z# q& d* n! W
但對人類來說,其實動作的底層邏輯是相通的。8 m$ N: S2 {9 s6 e4 H
因此,G4引入了大量跨場景的真實、仿真數(shù)據(jù),再加上時間模型等類似技術(shù),讓AI理解背后物理原理,從而執(zhí)行更加復(fù)雜的任務(wù)。8 V. f, S- ^; K( u# P, s% D
至于最后的終極目標(biāo):AGI。對具身智能來說,主要還是能夠走出實驗室,在開放場景具備跨任務(wù)的泛化能力。1 X1 f z( J: B9 _' P9 I+ F
從G1到G5,一個顯著趨勢是:數(shù)據(jù)需求不斷上漲。
& I! r: E: j; v# @+ s* }1 z" n `- ? N8 v" c
姜青松透露,目前智元已經(jīng)邁向G3階段。在G3路線上,智元機器人還形成了一套具身數(shù)據(jù)方案AIDEA。
4 F5 Y7 o! y6 z% A這是因為,“有多少人工就有多少智能,在具身智能領(lǐng)域依然成立”。
5 Z2 {$ h% _9 w3 j: X也就是說,高質(zhì)量的人機操作數(shù)據(jù)非常關(guān)鍵。) t8 F1 Q% ]4 M8 y
+ n% j0 {; Q1 d |0 q4 T8 V" Y; C9 S
具體來說,AIDEA包括數(shù)采本體、遙操設(shè)備和數(shù)據(jù)平臺。
4 j- y2 H" P' V6 V% |數(shù)采本體也就是輪式、足式等類型豐富、可靠穩(wěn)定的機器人。* N3 \- ~" v# M. k7 l n
遙操設(shè)備支持全身映射、臂手協(xié)同和高精實時。+ `3 e$ |4 @" N8 C6 g: g
數(shù)據(jù)平臺覆蓋數(shù)據(jù)采集、數(shù)據(jù)標(biāo)注、數(shù)據(jù)管理、模型訓(xùn)練、模型評測、模型部署再到數(shù)據(jù)回傳的全鏈路,支持SaaS服務(wù)和私有化部署。
0 o: m% T, [5 b' q% p8 T
4 M5 A/ h$ @1 {. [9 x1 i彩蛋是,基于AIDEA的百萬條真機、千萬條仿真數(shù)據(jù),同樣開源。今年四季度,感興趣的小伙伴可以蹲起來了~3 i# p2 f% L8 w3 A" o
“人形機器人人人造”以為介紹完遠(yuǎn)征系列,智元機器人一年一度亮活大會就結(jié)束了嗎?5 F* ^! P5 n% C: P' h7 y
并不!
1 m9 g. h0 z3 {9 _5 M$ s7 \+ b稚暉君一聲令下,遠(yuǎn)征A2-W緩緩?fù)粕蟻砹艘粋沒它高的神秘黑箱。
% E$ T0 I2 N, o2 |) l2 D有點眼熟,好像是直播最開始,稚暉君指揮A2-Max搬走的那玩意兒:
$ p. E8 f0 [1 F. M+ i+ \. @$ q1 l! l( h
里面的東西破箱而出,是智元推出的另一款機器人。' ?% y2 G4 p. `, `) i* a! }
靈犀X1。
! p. d! }- j5 |# z3 P+ I誕生于智元X-Lab實驗室(也可以簡單理解為智元內(nèi)部的稚暉君實驗室),是智元機器人專門面向極致創(chuàng)新和敏捷探索而設(shè)立的。
% q5 r3 S- Z G4 _* I1 |( R8 z4 r: J) n
今年6月立項,10個人組團(tuán)投入其中,不到半個月前剛剛正式降生。) P* K7 |2 P! t/ m( i! E+ i* Q
8 C! s& O6 \, }視頻錄像顯示,靈犀X1身經(jīng)百摔:
- A/ G6 B" ?+ S; j3 ^: ^/ b$ j" A( w
現(xiàn)在已經(jīng)能做到被大力推攘也不會摔倒了。8 ?" p; a0 s7 u5 V
% o6 Z) s6 p, k( V* {; V
& B! J+ [2 L3 L7 {; i△來人啊,這里有人霸凌具身小機器人(不是)靈犀X1身高1.3米,體重小于33kg——比起遠(yuǎn)征系列,靈犀系列看起來更小巧玲瓏;它的最大行走速度高于2米/秒,單臂負(fù)載大于3kg。. m$ d: k& @) Z; |# v
據(jù)介紹,靈犀X1全身上下都由兩款自研PowerFlow關(guān)節(jié)搭建成,分別命名為PF86和PF52。2 F% w( |& Q9 s+ o1 ?9 l
這兩款PowerFlow對外銷售。0 j5 ^# k( |. K5 G
* r& A$ M) p# n( S: l$ I! E此外,靈犀X1還具備中空走線、輸出端絕對值編碼、支持PF-Link智能接口等眾多功能。
0 H4 n& R1 z" E* ^7 C它融入了模塊化設(shè)計理念,可以通過簡單抱箍形式輕松拆裝,尤其是它的兩只“手”。! ]. S; z4 u4 N3 h
要知道,靈犀X1的標(biāo)配是智元X-Lab自研的兩個“帶前饋力控、超低成本”的自適應(yīng)通用夾爪。
( D# n3 v/ r/ e) I! m3 s自適應(yīng)抓握,僅1個主動自由度。, }! i+ p5 g7 }8 ]% \4 b
2 G$ P" ?3 e* g+ V2 ^9 X4 e
但泛化性很強,抓啥都行。
9 T& U! h8 p$ v% x$ H( I/ W ~! t, C& U# W) M* g
甚至是桌面上平躺著的一根針,也能穩(wěn)穩(wěn)夾起來。
. M/ U* F: c' x$ g1 I8 e/ E
% ]. G1 _' @# j/ i但靈犀X1的執(zhí)行器不僅可以是自適應(yīng)通用夾爪,也可以是百元級成本的六維力傳感器,滿足不同場景需求的那種。+ _; F" @" A' n7 f; y& \1 j$ b
8 O2 L. a1 X. L4 s
有點意思的是,靈犀X1可以開啟“機機模式”。
$ {9 Z" P, P/ F# m5 T ~3 _簡單來說,就是打開靈犀X1的腦子(里面本來是空的),把手機裝進(jìn)去,用性價比更高、功能更豐富、算力更強、普及率更廣的手機,來當(dāng)它的腦子。
& Z8 N' j9 M8 ?+ Z/ x+ u+ J* `然后大家就能看到以下這個又好笑又有點詭異的對話畫面:
# x- Z0 H, P. [* c0 d
" K$ |; P& {/ n- q$ ?6 n" w) J此外,靈犀系列還有款機器人:
t9 t2 M! r; T/ I' y專業(yè)數(shù)采機器人X1-W。& l' P+ d' v. A; D K8 {+ W
和遠(yuǎn)征系列的A2-W一樣,它們都是輪式,然后上半身可上下升降。' J/ Y1 E1 V# g2 C# l/ [ A
不過與采訓(xùn)推一體機器人A2-W相比,X1-W價格更低,適用于只做真實數(shù)據(jù)采集,服務(wù)預(yù)訓(xùn)練階段;而A2-W可服務(wù)采集、訓(xùn)練、推理多個流程,不僅對預(yù)訓(xùn)練有用,對fine tuning也有用。! e" }2 o0 m) I& j- Z5 H$ i* \
不同的應(yīng)用場景可選用不同的機器人進(jìn)行采集,搭配滿足全棧數(shù)據(jù)采集需求。
8 Y1 c0 G$ z2 D6 m3 O. H0 h3 Q; o$ U/ B t8 [, b2 i
最后就是大家都很關(guān)心的價格了。: ?1 ^' i5 [; d0 B0 L
“友商都很卷,我們不參與價格戰(zhàn)。”說完這句話,稚暉君按下手中的PPT遙控器,屏幕上出現(xiàn)了靈犀X1的價格——
7 T7 i% l; w8 a: U3 f+ m5 m0元。# P4 |9 g* c% N4 h) J$ s
( A5 v% J2 L: G9 E- J5 k) }) w他表示,除自研關(guān)節(jié)外,靈犀X1的本體設(shè)計圖紙、軟件框架、中間件源碼、基礎(chǔ)運控算法,統(tǒng)統(tǒng)即將開源。) U( ^& c3 Z! E
主打的就是一個“人形機器人人人造”。* n/ X' t. B2 J
# _4 w- K+ [- d' b稚暉君也現(xiàn)場給他的X-Lab打了波招聘廣告,“歡迎有想法的年輕人加入智元,加入X-Lab”。
& }3 M( z" O: D$ \+ x" v/ [$ G& s* G) S1 F. I
One More Thing最后,咱再來簡單正式介紹一下智元機器人(AgiBot)。7 h3 \3 L- I/ y$ k( p8 @
它成立于2023年2月,致力于AI+機器人的融合創(chuàng)新,以及打造具身智能機器人產(chǎn)品和應(yīng)用生態(tài)。+ U4 _, O& E1 l
創(chuàng)始團(tuán)隊包括稚暉君(彭志輝),電子科大畢業(yè)后,先后在OPPO研究院、華為工作(以華為天才少年身份入職)。同時,他也是B站up主,自稱野生鋼鐵俠。4 I% C: g9 v) j% ~
4 ~' X1 K# U7 i
同為創(chuàng)始人的,還有上海人工智能研究院智慧康養(yǎng)首席科學(xué)家、上海交通大學(xué)機械與動力工程學(xué)院教授閆維新。# W/ E! {! y# [: Z5 v0 }
去年8月,智元機器人推出首款產(chǎn)品:9 ^$ R5 d/ m5 y
通用型具身智能機器人原型機,遠(yuǎn)征系列的A1。( ?% @8 g7 s$ l
" [2 @4 E; e5 j+ E1 c+ D! K8 M, C
今天,屬于是智元機器人第二次大張旗鼓地對外展示研發(fā)和產(chǎn)品進(jìn)展。8 `2 I4 v: ]6 I& ~
截止到目前,智元機器人已完成了A4輪等多輪融資。
! ^& P7 Q' Y1 k" [! H智元官方還透露:' h* }+ i3 }- g- s$ U$ r
今年,智元機器人預(yù)估發(fā)貨量達(dá)到300臺左右,其中雙足200臺左右,輪式100臺左右。
* P+ s( E8 x$ f我是老溫,一名熱愛學(xué)習(xí)的嵌入式工程師( Y; }, Q/ c+ i3 y+ S* `) K; o6 M4 Z
關(guān)注我,一起變得更加優(yōu)秀! |
|