從視頻孿生到空間語義,我們沒有變換賽道,更不是蹭熱度。當數字世界學會"格物致知",從空間鏡像到空間認知的躍遷便自然發生。
十字路口的寓言:從“目擊”到“心證”
從我們最熟悉的城市十字路口場景說起。
在視頻孿生的世界里,3D建筑模型構建起了城市的主體格局和相對精確的位置關系。安裝在建筑上方的多路攝像機,將實時監控畫面像"魔法玻璃"一樣,貼合在3D模型對應的位置上,讓靜態的模型瞬間擁有了實時變化的真實畫面。
于是,坐在監控中心的工作人員,通過視頻孿生大屏,可以清晰、直觀地看到道路上的車水馬龍,看到兩側顯示當前車流量的統計圖表,也能及時處理系統檢測到的各種報警事件。

在上面這個視頻孿生的場景里,工作人員“看到”畫面中有一輛白色轎車的速度似乎比其他車輛更快,它可能是想搶在紅燈前闖過路口,不知道它是否超速。所有的分析和判斷,其實都發生在工作人員的大腦里。
而在空間語義的世界里,同樣是這個十字路口,系統似乎已經“懂得”了場景,并能做出精準地分析和預測:
車輛ID2025022501:白色奧迪A4L,車牌京A·XXXXX,當前位置(116.397, 39.916, 12.3),航向87°(正東偏南3°),速度32km/h,軌跡預測:5秒后到達路口中心,與南北向行人綠燈存在沖突風險,建議提前干預。
從"看見"白色轎車,到"懂得"這輛車正以32km/h的速度從西向東經過十字路口,這不僅是功能的升級,更是哲學意義上的躍遷——數字世界從被動的"鏡像空間"進化為主動的"認知主體"。
技術蟲洞:視空映射鏈接2D與3D世界
“視頻”和“孿生”這兩個本不在同一維度的事物,因為一項關鍵技術的存在而被牢牢“鏈接”在了一起。它像科幻電影里的蟲洞,打通了不同的技術文明,我們把它叫做視空映射技術。

長久以來,2D視頻與3D空間就像兩個互不相通的平行宇宙。視頻AI能識別出“畫面中有一輛車”,卻不知道“車在哪里,車輛行駛的方向、速度”;基于3D GIS的孿生引擎知道每一個精準的坐標,卻看不懂視頻畫面,不知道什么是車。
視空映射技術打破了這層壁壘。它通過將視頻的每一個像素,與三維GIS場景基于經緯度、海拔進行像素級融合,賦予每個像素以精確的空間坐標。于是,視頻畫面中的車輛不再是屏幕上的一堆RGB顏色值,而是一個個可以被換算為(X, Y, Z, 航向, 速度)的空間對象。這不僅是幾何變換,更是維度的躍遷:
對2D AI而言:視空映射提供了一個"像素→世界坐標"的反饋通道,讓2D感知結果能在3D空間中被驗證、關聯、追蹤。
對3D場景而言:視頻流不再是可視化的紋理貼圖,而變成了實時更新的空間數據源。
這正是智匯云舟技術路線的精髓——以視空映射作為核心樞紐,讓成熟的2D AI基礎模型(如SAM、Depth Anything、YOLO)得以在3D空間中發揮威力。這些算法分割出的物體、估算出的深度、檢測出的邊界框,全部通過視空映射注入統一的空間坐標系,最終實現了對物理世界的跨維度理解。
萬物皆可“微”:3DGS的語義覺醒
視空映射技術其實是智匯云舟長期以來一直在沉淀的技術,但直到今天,它的價值才被真正放大,這要歸功于3D高斯潑濺(3DGS)的出現。當視空映射遇見3DGS,魔法才真正開始。
3DGS是由N個高斯橢球構成的,每個高斯橢球都攜帶(位置、形狀、顏色、不透明度)參數,這種數據結構堪稱神來之筆,它同時完美支持了“視頻屬性”和“孿生屬性”,可以說是為視頻孿生量身定做的3D數據結構。
不同于傳統手工建模用的三角網格,3DGS的最小單元不是一個“面”,而是一個“點”。數學上,這意味著3DGS是連續可微分的。這種特性加上視空映射技術,讓3DGS的自動語義化成為可能。
簡單來說,我們可以將AI在2D圖像上識別出的物體輪廓(比如一輛車),以像素級的精度反向投影到這些3D高斯球上。那么,被投影到的所有高斯球,就自動具備了“這是一輛車”的語義信息。通過多輪學習和訓練,同一語義標簽下的高斯球會自動聚類成一個獨立的數字對象(比如“車輛-001”)。每個高斯球都新增了語義通道,包含了類別ID、實例ID等屬性。隨著新視頻幀的持續輸入,物體邊界的描繪也會越來越精準。整個系統就這樣自動地完成空間語義的提取、注入和優化。

如果說傳統的基于MESH網格的模型是“給人看”的,那么3DGS可以說是第一個“為AI看懂”而生的模型格式。智匯云舟正在對3DGS進行格式擴展,使其具備豐富的語義信息。當整個3D場景不再是一個靜態的模型,而是一個充滿了語義信息的“數據場”時,AI將第一次真正理解我們的物理世界。
當3D場景的每個幾何單元都可被AI理解、可被算法優化、可被語義標注時,智能就不再是附加功能,而是一種與生俱來的屬性。所以,智匯云舟并不是在思考如何給視頻孿生加上AI,而是在將視頻孿生變成一種AI,一種面向空間智能的AI,我們稱之為空間語義大模型。
當數字世界學會"格物致知",人們認識和管理物理世界的方式,便永遠改變了。
行業資訊、企業動態、峰會活動可發送郵件至news#citmt.cn(把#換成@)。
海報生成中...