案例簡(jiǎn)介

本案例中通過在 NVIDIA Isaac 平臺(tái)集成觸覺仿真器，借助NVIDIA Isaac Sim平臺(tái)的 3D 場(chǎng)景生成技術(shù)和NVIDIA Isaac Lab的強(qiáng)化學(xué)習(xí)與數(shù)據(jù)增擴(kuò)技術(shù)，帕西尼感知科技實(shí)現(xiàn)了從接觸仿真、觸覺信號(hào)產(chǎn)生、仿真數(shù)據(jù)生成，再到觸覺模態(tài)模型訓(xùn)練的全流程 GPU 加速，提升標(biāo)定和訓(xùn)練效率 100 倍，完成觸覺傳感器的批量標(biāo)定和觸覺模態(tài)規(guī)?；瘜?shí)機(jī)部署。

NVIDIA 技術(shù)驅(qū)動(dòng)帕西尼觸覺感知與人形機(jī)器人智能突破

帕西尼感知科技（深圳）有限公司作為一家在觸覺技術(shù)及人形機(jī)器人領(lǐng)域擁有前沿核心技術(shù)的創(chuàng)新企業(yè)，致力于將機(jī)器人的觸覺感知能力提升至人類水平，從而實(shí)現(xiàn)對(duì)外界環(huán)境的精細(xì)解析與敏捷響應(yīng)。

作為國(guó)內(nèi)觸覺傳感技術(shù)的革新者，帕西尼感知科技憑借其觸覺傳感陣列與深度學(xué)習(xí)算法，能夠?qū)崟r(shí)采集并精準(zhǔn)分析靈巧手及機(jī)器人與外部環(huán)境交互的觸覺數(shù)據(jù)，通過基于物理模型的預(yù)處理與特征提煉，將其轉(zhuǎn)化為對(duì)物體形狀、質(zhì)地、力度等屬性的精準(zhǔn)描述。帕西尼感知科技應(yīng)用NVIDIA Warp提供的高效并行機(jī)制和高層級(jí)接口，高效實(shí)現(xiàn)了柔性體接觸計(jì)算和觸覺仿真器，并集成到 Isaac Sim 平臺(tái)上。Isaac Sim 平臺(tái)的 3D 場(chǎng)景生成技術(shù)和 Isaac Lab 的數(shù)據(jù)增擴(kuò)技術(shù)協(xié)助帕西尼感知科技實(shí)現(xiàn)了從接觸仿真、觸覺信號(hào)產(chǎn)生、仿真數(shù)據(jù)生成，再到觸覺模態(tài)模型訓(xùn)練的全流程，在 NVIDIA GPU 的并行能力加持下，提升訓(xùn)練效率超 100 倍，完成觸覺傳感器的觸覺模態(tài)規(guī)?；瘜?shí)機(jī)部署。在此基礎(chǔ)上，借助高性能計(jì)算平臺(tái)與智能優(yōu)化算法，實(shí)現(xiàn)復(fù)雜觸覺信息的深度挖掘與高效解析，為靈巧手及機(jī)器人在動(dòng)態(tài)環(huán)境中構(gòu)建強(qiáng)大的智能決策引擎。

具身智能觸覺感知突破與三大挑戰(zhàn)

觸覺的雙向交互性對(duì)人類意義重大，讓我們感知自身存在，幫助我們完成各種復(fù)雜任務(wù)。同樣的，具身智能體也必須依靠觸覺感知才能實(shí)現(xiàn)精巧、實(shí)時(shí)的反饋。高精度的觸覺感知，一直都是具身智能領(lǐng)域極為關(guān)鍵和稀缺的模態(tài)，智能通用化能力是限制人形機(jī)器人規(guī)?；蜕虡I(yè)化的瓶頸所在，在通往具身智能的道路上依然需要克服的幾大挑戰(zhàn)：

一是傳感數(shù)據(jù)仿真模型的參數(shù)優(yōu)化和輕量化，主要挑戰(zhàn)在于構(gòu)建陣列式觸覺傳感器的計(jì)算物理和計(jì)算力學(xué)模型，該模型需要在邊緣側(cè)以毫秒量級(jí)處理近萬個(gè)獨(dú)立參數(shù)，并在服務(wù)器端實(shí)現(xiàn)高速仿真和求解。此外，模型還需進(jìn)一步突破材質(zhì)紋理、摩擦系數(shù)、熱導(dǎo)系數(shù)等感知執(zhí)行邊界的限制。物理模型參數(shù)的快速優(yōu)化計(jì)算和輕量化是實(shí)現(xiàn)復(fù)雜物理交互，適應(yīng)更廣泛應(yīng)用場(chǎng)景和任務(wù)需求的重要前提；

二是觸覺模態(tài)和多模態(tài)模型構(gòu)建和調(diào)優(yōu)，主要挑戰(zhàn)在于整合多模態(tài)數(shù)據(jù)提供的特征集，增強(qiáng)機(jī)器人任務(wù)執(zhí)行時(shí)對(duì)環(huán)境上下文的理解，并在此基礎(chǔ)上實(shí)現(xiàn)高效的規(guī)劃、決策和執(zhí)行，從而指導(dǎo)機(jī)器人完成復(fù)雜的閉環(huán)任務(wù)。這需要處理包括圖像、三維視覺、觸覺和文字標(biāo)注在內(nèi)的高維度異構(gòu)數(shù)據(jù)，涉及跨模態(tài)表示學(xué)習(xí)、融合網(wǎng)絡(luò)設(shè)計(jì)以及聯(lián)合訓(xùn)練與優(yōu)化等算法策略。這些策略通常依賴于具備高吞吐量的算力支持，以實(shí)現(xiàn)并行計(jì)算任務(wù)的高效調(diào)度與執(zhí)行，提高模型的訓(xùn)練和推理效率，從而提升任務(wù)執(zhí)行的智能化水平；

三是人形機(jī)器人學(xué)習(xí)技能訓(xùn)練與應(yīng)用，主要挑戰(zhàn)在于實(shí)現(xiàn)虛擬數(shù)據(jù)采集和真實(shí)數(shù)據(jù)精調(diào)。訓(xùn)練數(shù)據(jù)和訓(xùn)練場(chǎng)地的局限使得難以低成本、系統(tǒng)化地?cái)U(kuò)展機(jī)器人的數(shù)據(jù)集，當(dāng)前的數(shù)據(jù)集仍難以滿足產(chǎn)業(yè)化需求中的泛化能力要求。這涉及到如何高效地收集、整合和利用來自虛擬仿真環(huán)境和真實(shí)物理世界的海量數(shù)據(jù)，以及如何實(shí)現(xiàn)不同機(jī)器人本體之間的數(shù)據(jù)共享和協(xié)同，從而為模型訓(xùn)練和優(yōu)化提供充足且多樣化的數(shù)據(jù)支持。

NVIDIA 生態(tài)賦能帕西尼觸覺感知全鏈路突破

基于以上挑戰(zhàn)，帕西尼感知科技選擇采用 NVIDIA GPU 作為硬件基礎(chǔ)，結(jié)合NVIDIA Omniverse生態(tài)系統(tǒng)提供支持，為產(chǎn)品矩陣和業(yè)務(wù)能力帶來提升和優(yōu)化。

帕西尼感知科技選擇采用 Isaac Sim 仿真開發(fā)平臺(tái)，實(shí)現(xiàn)自研高效多物理系統(tǒng)的模擬和參數(shù)辨識(shí)。Isaac Sim 集成的統(tǒng)一剛體求解器，結(jié)合 NVIDIA Warp 框架支持下的柔性體快速求解器，在仿真過程中對(duì)剛體和柔性體進(jìn)行協(xié)調(diào)優(yōu)化，從而高效處理模擬傳感器與不同材質(zhì)物體接觸時(shí)的復(fù)雜動(dòng)力學(xué)行為。同時(shí)，帕西尼利用 CUDA 加速了自研快速超彈性材料的參數(shù)辨識(shí)和有限元正算仿真和接觸計(jì)算。這不僅減少了對(duì)真實(shí)物理環(huán)境和硬件升級(jí)的依賴，還大幅縮短了解耦算法的調(diào)試和優(yōu)化周期，將開發(fā)周期從數(shù)月縮減至幾周，成本效益顯著提升約 40% 以上。

帕西尼感知科技選擇采用 NVIDIA GPU，其高性能架構(gòu)和特性高度契合多模態(tài)大模型訓(xùn)練所需的并行計(jì)算能力。NVIDIA GPU 的高顯存容量和帶寬，能夠滿足訓(xùn)練與優(yōu)化過程中大量存儲(chǔ)模型參數(shù)、中間計(jì)算結(jié)果和數(shù)據(jù)集的需求。在高數(shù)據(jù)吞吐量下，能夠?qū)崿F(xiàn)低延遲，通過 CUDA 工具充分調(diào)用與執(zhí)行 NVIDIA GPU 的計(jì)算資源，將圖像特征提取、文本編碼和模態(tài)融合等任務(wù)并行化執(zhí)行。借助 GPU 并行優(yōu)勢(shì)，進(jìn)一步加速深度學(xué)習(xí)算法的執(zhí)行效率，在成本僅增加約 50% 的情況下，模型訓(xùn)練提速近 100 倍。

帕西尼感知科技選擇采用 Isaac Lab 支持大規(guī)模機(jī)器人仿真。采用 Isaac Lab 仿真開發(fā)平臺(tái)，高效構(gòu)建人形機(jī)器人的數(shù)字孿生，通過 GPU 加速高度逼真的物理模擬、實(shí)時(shí)渲染、深度強(qiáng)化學(xué)習(xí)（RL）模仿學(xué)習(xí)（IL）集成等先進(jìn)技術(shù)，在虛擬環(huán)境中復(fù)現(xiàn)真實(shí)機(jī)器人的運(yùn)動(dòng)、感知和交互過程等，實(shí)現(xiàn)虛實(shí)融合與多本體融合數(shù)據(jù)共享和協(xié)同，從而提高模型的泛化能力和適應(yīng)性。避免物理硬件的損壞和高昂的實(shí)驗(yàn)成本局限。在數(shù)據(jù)方面，Isaac Lab 支持?jǐn)?shù)據(jù)增擴(kuò)，能有效生成和收集機(jī)器人在虛擬環(huán)境中的各類數(shù)據(jù)。同時(shí)，它還可通過連接外設(shè)進(jìn)行虛擬遙操作，豐富訓(xùn)練數(shù)據(jù)，進(jìn)一步提升機(jī)器人在不同場(chǎng)景下的泛化能力。在 Isaac Lab 的加持下，提高訓(xùn)練效率約至 100 倍，為機(jī)器人學(xué)習(xí)技能訓(xùn)練與應(yīng)用提供了強(qiáng)有力的支持，快速打開并擴(kuò)展應(yīng)用場(chǎng)景。

在 NVIDIA GPU 和 SDK 生態(tài)的共同支持下，帕西尼得以迅速完成從傳感計(jì)算、觸覺多模態(tài)數(shù)據(jù)集到具身智能模型的全鏈路落地，觸覺傳感器、靈巧手、機(jī)器人和算法方案得以快速服務(wù)到眾多客戶。目前，帕西尼感知科技已經(jīng)成為國(guó)內(nèi)知名的高精度多維觸覺傳感器研發(fā)企業(yè)，依托 NVIDIA 開發(fā)平臺(tái)和算力的全棧式軟硬件生態(tài)體系，為人形機(jī)器人提供“大腦”，形成人形機(jī)器人訓(xùn)練提升的良性循環(huán)，實(shí)現(xiàn)智能化水平的快速升級(jí)。

NVIDIA 算力驅(qū)動(dòng)帕西尼觸覺感知

引領(lǐng)人形機(jī)器人多模態(tài)升級(jí)

帕西尼感知科技依托 NVIDIA 軟硬件解決方案，特別是高性能 AI 加速集群算力技術(shù)，實(shí)現(xiàn)了海量觸覺數(shù)據(jù)的高速運(yùn)算與算法優(yōu)化。這一技術(shù)支撐使帕西尼感知科技在觸覺傳感技術(shù)領(lǐng)域處于行業(yè)領(lǐng)先地位。

帕西尼感知科技 CEO 許晉誠(chéng)博士表示：在具身智能的發(fā)展進(jìn)程中，人形機(jī)器人正快速進(jìn)入“多模態(tài)感知 2.0”時(shí)代。精細(xì)觸覺感知能力作為實(shí)現(xiàn)高級(jí)交互與自主行動(dòng)的關(guān)鍵要素，成為行業(yè)競(jìng)爭(zhēng)焦點(diǎn)。帕西尼感知科技在“多維度多陣列觸覺感知”領(lǐng)域大幅提升了觸覺傳感器的靈敏度與精度。NVIDIA 憑借強(qiáng)大的 GPU 矩陣和 AI 加速解決方案，構(gòu)建起從芯片到算法的全棧生態(tài)體系，為帕西尼感知科技提供了底層算力支持。在此基礎(chǔ)上，帕西尼的觸覺傳感器能夠在毫秒級(jí)時(shí)間內(nèi)完成數(shù)據(jù)的捕捉、解析與反饋，為算法模型的持續(xù)迭代優(yōu)化提供動(dòng)力，有力推動(dòng)了人形機(jī)器人觸覺技術(shù)的發(fā)展。

機(jī)器人及自動(dòng)化設(shè)備一直以來缺乏完善的觸覺感知能力，只有依靠多維度觸覺傳感器，才能更大程度提升機(jī)器人及設(shè)備對(duì)環(huán)境的感知能力，從而能夠更好與物理世界進(jìn)行交互，協(xié)助人類執(zhí)行更多重要的任務(wù)。

許晉誠(chéng)博士表示：“我們帕西尼作為觸覺傳感領(lǐng)域的佼佼者，深知與頂尖技術(shù)伙伴攜手共進(jìn)的重要性。NVIDIA 作為全球領(lǐng)先的 AI 計(jì)算平臺(tái)提供商，為我們提供了高性能的 AI 加速集群算力，將‘多維陣列觸覺傳感算法’和‘觸覺模態(tài)模型’發(fā)揮到極致。”

NVIDIA 初創(chuàng)加速計(jì)劃

NVIDIA 初創(chuàng)加速計(jì)劃 (NVIDIA Inception)為免費(fèi)會(huì)員制，旨在培養(yǎng)顛覆行業(yè)格局的優(yōu)秀創(chuàng)業(yè)公司。該計(jì)劃聯(lián)合國(guó)內(nèi)外知名的風(fēng)投機(jī)構(gòu)、創(chuàng)業(yè)孵化器、創(chuàng)業(yè)加速器、行業(yè)合作伙伴以及科技創(chuàng)業(yè)媒體等，打造創(chuàng)業(yè)加速生態(tài)系統(tǒng)。能夠提供產(chǎn)品折扣、技術(shù)支持、市場(chǎng)宣傳、融資對(duì)接、業(yè)務(wù)推薦等一系列服務(wù)，加速創(chuàng)業(yè)公司的發(fā)展。