研究領域

HYPER-REALISTIC VIDEO

概述

隨著科技浪潮的來臨,傳統單一視角影視直播服務已無法滿足收視族群的胃口,已朝向低時延化、4K高畫質之多視角、寬視角、自由視角、以及全息視訊串流直播發展,高盛預估至2025年,直播市場規模可達41億美元。本院研發之超臨場感影視技術結合5G寬頻網路,遠端觀眾透過自有行動終端裝置可近乎無時差觀看到多個不同角度拍攝之高畫質現場影像,彷彿置身球賽或演唱會第一排座位,達到超臨場感的觀賞體驗。
HYPER-REALISTIC VIDEO

核心技術

  • 低時延影音編解碼與傳輸技術
  • 多相機協同運作技術
  • UHD超寬視角影像處理技術
  • 自由視角影視技術
  • 全息視訊展演技術

超臨場感影視應用

HYPER-REALISTIC VIDEO

應用現況

低時延多視角影音傳輸技術 :結合5G及MEC邊緣運算大頻寬、低時延特性,提供現場觀眾以自有行動終端同步收看多角度之高畫質、無延遲感現場影像。具備可即時切換回看、時間點隨你拉、錯過鏡頭隨時補看、接取現場第一排視野精彩畫面、即使後排觀眾也可清楚收視等特色。研發成果已應用於台北小巨蛋2020 KKBOX風雲榜、中華電信5G開台青埔球場樂天桃猿多視角直播、WirHouse 2020現場羅馬競技生死鬥擂台賽直播、中華電信智慧遠距影音學堂產品等。
UHD超寬視角影像處理技術 : 鑒於16K UHD超高畫質影片的拍攝(攝影機)與顯示設備尚不普及,本院自主研發 12K UHD超寬螢幕Live即時縫合直播服務 (將多台4K相機進行協同運作,同步取像資料縫合成 11520*2160 解析度影像)。縫合影像可傳送至遠端300吋以上之大螢幕投影,可提供政府智慧文化專標超臨場感式觀賞體驗應用。
自由視角影視技術 : 多相機環形架設並拍攝同一目標物,使用者可透過行動裝置、個人電腦,以網頁瀏覽器觀看,自由切換欲觀看之視角視訊(如駭客任務的子彈時間),提供個人化的觀賞體驗。研發成果已於國家兩廳院展示,可應用於多種表演活動,如運動賽事、舞蹈表演、健身教練…等情境。
全息視訊展演技術 : 多使用者可透過行動裝置、個人電腦、或VR頭盔共同加入一虛擬展演廳自由移動觀賞720度的4D模型視訊並進行互動(肢體及語音),提供高沉浸感之觀賞體驗。研發成果已於中華電信全光網路環境展示,體現低延遲、高頻寬之網路特性。
累計申請及獲證專利達8件。