NVIDIA宣布將其人工智能 (AI) 和 Isaac Sim 技術(shù)與Intrinsic 的 開發(fā)環(huán)境相集成。合作公司開發(fā)了一款專注于提高機(jī)器人抓取能力的原型。 Intrinsic 是一家獨立的 Alphabet 公司，專注于創(chuàng)新軟件和人工智能驅(qū)動的機(jī)器人技術(shù)。正如上一篇文章所強(qiáng)調(diào)的，NVIDIA 致力于生成式 AI 的集成和實施，以幫助使工業(yè)虛擬宇宙成為現(xiàn)實。
NVIDIA 和 Intrinsic 合并平臺專業(yè)知識，以推進(jìn)工業(yè)環(huán)境中的機(jī)器人抓取。圖片由NVIDIA提供
NVIDIA Isaac 機(jī)械手
NVIDIA 的Isaac Manipulator是模塊化通用處理單元 (GPU) 加速庫（用于計算密集型應(yīng)用程序）和基礎(chǔ)模型的存儲庫，允許機(jī)器人軟件開發(fā)人員構(gòu)建和部署可重復(fù)且可擴(kuò)展的工作流程，以編排需要靈巧操作的機(jī)器人任務(wù)。
Isaac Manipulator 使用基礎(chǔ)模型（FoundationPose、Synthetica DETR、NVIDIA cuMotion 和 FoundationGrasp） ——一種嵌套在機(jī)器學(xué)習(xí)領(lǐng)域并與 Transformer 深度學(xué)習(xí)架構(gòu)（由用于數(shù)據(jù)處理的解碼器/編碼器塊組成）相結(jié)合的AI 神經(jīng)網(wǎng)絡(luò)——它可以通過跟蹤數(shù)據(jù)特征并識別順序數(shù)據(jù)中的關(guān)系來理解大量未標(biāo)記的數(shù)據(jù)。
使用未標(biāo)記的數(shù)據(jù)比使用標(biāo)記的數(shù)據(jù)成本更低、耗時更少?；A(chǔ)模型被描述為生成人工智能的形式，根據(jù)輸入（人類語言指令的提示）創(chuàng)建生成的輸出。
基礎(chǔ)模型集中了來自各種來源的數(shù)據(jù)，可用于許多應(yīng)用程序。圖片由基礎(chǔ)模型研究中心 (CRFM)提供
NVIDIA表示，通過Isaac Manipulator開發(fā)機(jī)器人工業(yè)應(yīng)用時，開發(fā)人員可以節(jié)省寶貴的編程時間，并將路徑規(guī)劃速度加快多達(dá)80倍。零樣本學(xué)習(xí)（無需先前的示例）還提高了機(jī)器人的部署速度，提高了效率和生產(chǎn)力，并使開發(fā)人員能夠自動執(zhí)行更多新的機(jī)器人任務(wù)。早期的生態(tài)系統(tǒng)合作伙伴包括泰瑞達(dá)旗下的Universal Robots、READY Robotics、PickNik Robotics、Yaskawa 等。
機(jī)器人抓取能力
執(zhí)行機(jī)器人抓取任務(wù)的缺點包括對自主操作進(jìn)行編程以完成各種動態(tài)任務(wù)的費用和耗時。這在可用于簡化和加速基于機(jī)器人操作的應(yīng)用程序開發(fā)的適應(yīng)性軟件創(chuàng)新方面留下了關(guān)鍵差距。
作為與 NVIDIA 合作的一部分，Intrinsic 利用NVIDIA Isaac Sim的功能生成節(jié)省成本的合成數(shù)據(jù)，以訓(xùn)練機(jī)器人的 AI 神經(jīng)網(wǎng)絡(luò)，以使用金屬板和吸力夾具的計算機(jī)輔助設(shè)計模型執(zhí)行真空抓取。最終的原型使用了 Intrinsic 的虛擬開發(fā)環(huán)境Intrinsic Flowstate，該環(huán)境可以在校準(zhǔn)真實硬件之前通過模擬進(jìn)行路徑規(guī)劃、姿態(tài)估計和機(jī)器人單元工作流程測試。
從 NVIDIA 基礎(chǔ)模型開發(fā)并在 Intrinsic Flowstate 中實施的抓取技能執(zhí)行的虛擬和現(xiàn)實世界視圖。視頻由NVIDIA提供
Isaac Manipulator 和 Isaac Sim 可以組合起來，為機(jī)器人夾具生成適合應(yīng)用的姿勢、計算統(tǒng)一設(shè)備架構(gòu) (CUDA) 加速的機(jī)器人運動，并在通過 Intrinsic 平臺在實際實施之前評估虛擬原型。
提高機(jī)器人的靈活性
NVIDIA 和 Intrinsic 攜手合作，通過采用兩家公司各自技術(shù)的最新原型，采用可調(diào)節(jié)的基于人工智能的生成模型，加速在全球工業(yè)環(huán)境中開發(fā)和部署機(jī)器人自動化任務(wù)。