翁仲毅博士（Chung-Yi Weng）及其在 Google Research 中，將靜態或單鏡頭影像轉化為可互動 3D 體驗的技術與應用
翁仲毅博士（Chung-Yi Weng）及其在 Google Research 中，將靜態或單鏡頭影像轉化為可互動 3D 體驗的技術與應用 翁仲毅博士（Chung-Yi Weng）現於 Google Research 擔任研究科學家（Research Scientist），隸屬於 Augmented Perception（擴增感知）團隊。他的核心技術專長為「將靜態或單鏡頭影像轉化為可互動的 3D 體驗」。這項專長在 Google 生態系中，與 Google 地圖（Google Maps）的「沉浸式實景（Immersive View）」、AR 導航功能及相關 AR 產品的結合，主要體現在以下幾個尖端技術層面。 1. 助力「沉浸式實景（Immersive View）」：數十億影像的 3D 智慧縫合 Google 地圖近年推出的「沉浸式實景」和「沉浸式導航」，背後是將數十億張平面的街景照片、衛星空拍影像與 AI 建模融合，生成出擬真的 3D 世界。 · 神經渲染（Neural Rendering）的應用：翁博士深耕的神經渲染技術，能讓系統在缺乏完整 3D 掃描資料的情況下，單憑不同角度的平面街景照片，去「推算」並生成出平滑、逼真的連續 3D 視角。 · 智能補洞與光影預測：當使用者在沉浸式實景中切換時間、查看不同天氣下的街景人潮時，翁博士在 Photo Wake-Up 中展現的「背景智能填補」與 3D 深度推算邏輯，正好可以協助 AI 演算法預測並修補被車輛、行人擋住的建築物死角，讓 3D 街景在旋轉時不會穿幫。 2. 驅動 AR 實景導航（Live View）：地理空間的「語義辨識」 當使用者開啟 Google 地圖的實景導航（Live View）時，手機鏡頭會利用影像定位系統（Visual Positioning System, VPS）來辨識周遭環境，進而在現實世界中疊加 AR 箭頭與路標。 · 靜態物件的 3D 感知：翁博士團隊的關鍵任務，在於突破「擴增實境與感知的邊界」。他們的演算法能幫助手機即時辨識街道上的 2D 地標、店家招牌，並在瞬間理解它們的 3D 幾何結構與深度，確保 AR 導航標籤能精準、穩固地「貼」在正確的建築物畫面上，而不會隨鏡頭晃動而飄移。 3. 未來 AR 產品與「平民化 3D 數位分身」的結合 除了地圖與導航，翁仲毅博士在 3D 人物建模（...