當前位置:
首頁 > 科技 > AI黑科技!單鏡頭即時重建雙手3D互動場景,連隱藏物件都能完整還原

AI黑科技!單鏡頭即時重建雙手3D互動場景,連隱藏物件都能完整還原

韓國蔚山國立科技大學(UNIST)人工智慧團隊開發出突破性技術,僅需普通RGB攝影機拍攝的影片,就能精準重建雙手持物互動的3D場景。這項名為BIGS(Bimanual Interaction 3D Gaussian Splatting)的AI模型,連手術器械與雙手交錯的複雜情境都能完美呈現,為擴增實境(AR)應用開創全新可能。

傳統技術最大瓶頸在於僅能識別單手動作,或需預先掃描物件輪廓。但BIGS系統完全突破這些限制,即使面對從未見過的物品,或是部分被遮擋的狀況,依然能即時推演出完整的3D模型。研究團隊負責人白承律教授強調,這項突破不需要昂貴的深度感測器或多鏡頭配置,普通單鏡頭攝影機就足以勝任。

技術核心採用創新的3D高斯潑濺演算法,有別於傳統點雲技術產生的生硬邊界,透過高斯分布呈現的物件表面更為自然流暢。特別在處理接觸面互動時,能精準重建手指與物體間的細微交互作用。針對遮擋難題,系統會將多幀手部影像對齊至標準高斯結構,並結合預訓練的擴散模型進行分數蒸餾採樣,連物體背面等不可見區域都能完美補完。

研究團隊使用ARCTIC、HO3Dv3等國際標準數據集進行驗證,結果顯示BIGS在手勢識別準確度、物件重建完整度、接觸互動擬真度等關鍵指標均大幅領先現有技術。這項成果已發表於arXiv預印本平台,主要研發成員包括安正煥、郭景煥、姜建榮等學者。

白教授指出:「從虛擬實境操作、機器人遠端控制到外科手術模擬訓練,這項技術將徹底改變人機互動模式。」隨著技術成熟,未來可望應用在醫療教學、工業設計等多元領域,打造更直覺的沉浸式體驗。

[end]