標題: 基於電腦視覺的機器人遙作業系統可應用於多種不同機器人
導言
近年來機器人和人工智慧領域的快速發展開闢了遙操作的新途徑,即遠端控制機器人在遠處完成任務。這項技術能讓使用者遠端參觀博物館、在難以到達的場所進行維護或技術工作,或以更具互動性的方式遠端參加活動。然而大部分現有的遙作業系統都是針對特定場景和特定機器人設計的,這極大地約束了它們的應用潛力。最近,美國網納能和加州大學聖地亞哥分校的研究人員共同開發了一種基於電腦視覺的遙作業系統,可以應用於更廣泛的場景。詳細報導
研究人員介紹的這一名為 AnyTeleop 的系統可以遠端操作各種機器人手臂和手部進行不同的手工任務。在過去的研究中,人們通常將重點放在如何教導機器人進行遙操作,但這種方法有兩個障礙:首先訓練一個現代化的模型需要很多示範;其次現有的設定通常需要昂貴的裝置或感應器硬體,且僅適用於特定的機器人或部署環境。研究人員的目標是創造一個低成本、易於部署且能夠在不同任務、環境和機器人系統中具有良好泛化能力的遙作業系統。 AnyTeleop 從單個或多個攝像頭追蹤人手姿勢,然後將其重定向到多指機械手的手指控制上,並使用基於 CUDA 加速的運動規劃器來控制手腕點以控制機械手臂的運動。與過去大部分研究中介紹的其他遙作業系統相比,AnyTeleop 能夠與不同的機械臂、機械手、攝像頭配置和不同的模擬或真實世界環境進行互動。此外它可以應用於使用者附近和遠端位置的兩種場景。這個平臺還可以幫助收集人類示範資料,這些資料代表人們在執行特定手工任務時的動作和行為,進一步用於訓練機器人自主完成不同任務。評論與建議
AnyTeleop 的一大突破在於它的通用且易於部署的設計。它的一個潛在應用是將虛擬環境和虛擬機器人部署在雲端,讓邊緣使用者使用入門級計算機和攝像頭(如 iPhone 或 PC)遠端操作它們。這可能徹底改變研究人員和工業開發人員教授機器人新技能的資料流程。在初步測試中,AnyTeleop 在應用於特定機器人時,甚至超越了一個專為該機器人設計的現有遙作業系統,凸顯了它作為增強遙操作應用工具的價值。網納能公司將很快釋出 AnyTeleop 系統的開源版本,讓全球的研究團隊可以測試並應用於他們的機器人。未來,這一有前景的新平臺可能有助於擴大遙作業系統的應用,同時促進機械手臂的訓練資料收集。 研究人員計劃使用收集到的資料進一步探索機械人學習的問題,其中一個值得注意的重點是如何克服從模擬轉移到真實世界時的領域差異。儘管如此基於電腦視覺的遙作業系統的發展為機器人技術帶來了更多可能性,不僅可以透過遠端實現更多的工作,還能夠以更低的成本和更高的泛化能力實現特定任務的自動化。這一技術對於工業自動化、醫療保健、教育和娛樂等領域都具有巨大的潛力,帶來更多的機會和挑戰。結論
基於電腦視覺的 AnyTeleop 遙作業系統開闢了將遠端控制機器人應用於不同場景的新途徑。它的設計通用且易於部署,可以應用於不同的機器人和環境,同時還能夠收集人類示範資料以訓練機器人進行自主學習。這一技術的出現對於推動機器人技術的發展具有重要意義,有望在各個領域中帶來重大變革。隨著這一領域的不斷發展,相信我們將看到更多令人驚奇的創新和應用。Robot-未來科技,機器人,遙作業系統,電腦視覺,技術發展
延伸閱讀
- 獨家專訪:Wayve 聯合創始人 Alex Kendall 談車輛和機器人的自主未來
- 突破獨家訪談:Wayve 共同創辦人 Alex Kendall 談自動駕駛汽車和機器人的未來
- 替代雲技術蓬勃發展,企業尋求更便宜的 GPU 存取
- 科技專題:攜手科技巨頭,共建未來航太工程
- 人工智慧領域的新創公司:興致漸失?
- Mobileye 創始人正在研發一款身形酷似人類的機器人
- Google 雲端大會:Google 全力開發生成式人工智慧
- 比利時電腦視覺新創公司 Robovision 著眼於擴充套件至美國以應對勞動力短缺
- 蘋果電動車計畫無獲利,家用機器人或能受惠
- 大型語言模型可幫助家庭機器人在無需人類幫助的情況下恢復錯誤