2026年，從PMTalk出發(fā)，我現(xiàn)在帶著團(tuán)隊(duì)做人形機(jī)器人以及腦機(jī)接口，利用vision Pro這類空間計(jì)算設(shè)備，每一次都是感受到了這幾年前的科技進(jìn)步與不可思議。

我們這一代人越來越幸福，可以在空間計(jì)算下完成系統(tǒng)程序開發(fā)，做一些非常有價(jià)值的產(chǎn)品。

相較于普通的App應(yīng)用，空間計(jì)算應(yīng)用看得見摸得著，并且還能夠互動(dòng)，通過AI模型還能夠讓這些所謂的虛擬化有生命。

我身邊的計(jì)算機(jī)博士生，都開始躺平了

在最近，我越來越感覺現(xiàn)在人類的學(xué)習(xí)進(jìn)度已經(jīng)跟不上AI的發(fā)展了，你越花時(shí)間學(xué)習(xí)的東西，AI都可以短短時(shí)間超越過你，我身邊的計(jì)算機(jī)博士師兄越發(fā)覺得做科研沒意義，做出來的東西要么就是沒用，要么就是AI就會(huì)。

比如我的博士研究是RAG，而3年的博士生涯，RAG從剛出現(xiàn)到現(xiàn)在發(fā)展為agent，已經(jīng)讓單模態(tài)的甚至是多模態(tài)的RAG都變得非常尷尬。

唯一現(xiàn)在AI模型的RAG還能夠發(fā)揮價(jià)值的是在垂直行業(yè)領(lǐng)域

但這一點(diǎn)都在被通用模型利用C端的侵入逐步打破。因?yàn)橥ㄓ媚Ｐ屯ㄟ^人形機(jī)器人也在滲透。

一個(gè)MR眼鏡操作人形機(jī)器人的開源框架

今天推薦的這個(gè)開源框架是基于MR眼鏡來操作人形機(jī)器人的系統(tǒng)，是MIT開源的，支持商業(yè)化使用，雖然僅支持vision Pro與人形機(jī)器人和互動(dòng)，可以完成機(jī)器人的頭部追蹤、手勢追蹤完成機(jī)器人與人類同步。

目前開源框架支持下面3個(gè)能力

1.真實(shí)世界遠(yuǎn)程

通過支持聲音、視頻操作，來完成真實(shí)世界的遠(yuǎn)程操作，可以遠(yuǎn)程操作機(jī)器人的手勢、與頭部姿勢。

2.機(jī)器人與人類同步操作

讓機(jī)器人和vision Pro完成同步操作，跟著人類的手勢、頭部姿勢完成行為動(dòng)作。

3.空間視頻存儲(chǔ)與直播

通過直播與錄播空間視頻，完成機(jī)器人視野數(shù)據(jù)錄制與直播，隨時(shí)了解遠(yuǎn)方情況

完全自主的人形機(jī)器人最難的是物理規(guī)律模型：每個(gè)物理規(guī)律都是一個(gè)大模型

相較于自動(dòng)化駕駛，人形機(jī)器人主要是要掌握物理世界這些所有規(guī)律，從風(fēng)速、氣壓、重力、再到壓力、硬度等，這些每一個(gè)物理規(guī)律都可以作為一個(gè)模型，要想機(jī)器人在現(xiàn)實(shí)世界實(shí)時(shí)互動(dòng)，那這些都必須要解決。

否則機(jī)器人就像一個(gè)紙飛機(jī)，只能做一些外部環(huán)境固定的場合，而這個(gè)就很難通用起來，因?yàn)槟銕缀跽也坏较褡詣?dòng)化駕駛汽車一樣有各種交通規(guī)則通用的地方，并且道理很簡單就是不要觸碰到任何真實(shí)物體。

而機(jī)器人是需要去操作觸碰任何物體

MR眼鏡加人形機(jī)器人加空間AI模型，幾乎是唯一的一個(gè)過渡方式，全自動(dòng)化的機(jī)器人的通用模型就算可以訓(xùn)練出來，但是要達(dá)到亞毫秒級別的延遲，但是通過人類驅(qū)動(dòng)的機(jī)器人則是可以達(dá)到這種水平，而人類操作機(jī)器人最好的終端不是遙控器，而是MR眼鏡。

通過共享視野以及共享操作，再加上非常低的網(wǎng)絡(luò)延遲，就可以實(shí)現(xiàn)機(jī)器人像人一樣的行為動(dòng)作操作。

今天的分享就到這里

開源地址，在公眾號后臺(tái)留言回復(fù)：visionPro，將獲得這個(gè)開源框架。

題圖來自 Unsplash ，基于 CC0 協(xié)議， 如有侵權(quán)，請聯(lián)系pmtalk123刪除

“分享產(chǎn)品經(jīng)理改變世界的點(diǎn)滴”

產(chǎn)品顧問｜ 產(chǎn)品咨詢｜培訓(xùn)合作

請?zhí)砑游⑿?strong>PMxiaowanzi

最近我的原創(chuàng)

每日案例拆解庫，AI等產(chǎn)品打卡群

我創(chuàng)建的產(chǎn)品設(shè)計(jì)打卡社群，加入后365天，每天體驗(yàn)一款A(yù)PP。提升產(chǎn)品設(shè)計(jì)能力，同時(shí)有1300份體驗(yàn)報(bào)告幫助你找到競品

在這里你可以隨時(shí)查詢到你想找的各類競品行業(yè)APP，無須自己親自下載就可以馬上得到APP的一手產(chǎn)品優(yōu)化、交互設(shè)計(jì)、功能描述信息。

從優(yōu)化&建議、商業(yè)模式、運(yùn)營、功能描述、交互設(shè)計(jì)、產(chǎn)品定位至少6個(gè)維度，體驗(yàn)一款應(yīng)用。

平均1天1塊錢，掃碼購買即可加入

連續(xù)體驗(yàn)48款應(yīng)用，通過后原路退回

報(bào)名后添加星球助理

PMTalk123