日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 科技  > 軟件

淺析VR視頻傳輸方案

來源: 責編: 時間:2023-11-28 09:37:01 226觀看
導讀Labs 導讀VR視頻屬于一種弱交互、輕交互業務,這類視頻一般經過預先編排、規劃后,用戶在VR終端以任意自由度視點觀看。用戶與視頻的交互主要發生在用戶轉頭改變當前視點上。VR視頻在分辨率、幀率、色深等多維度指標上相

zxA28資訊網——每日最新資訊28at.com

Labs 導讀

VR視頻屬于一種弱交互、輕交互業務,這類視頻一般經過預先編排、規劃后,用戶在VR終端以任意自由度視點觀看。用戶與視頻的交互主要發生在用戶轉頭改變當前視點上。VR視頻在分辨率、幀率、色深等多維度指標上相較于傳統視頻要求更高。zxA28資訊網——每日最新資訊28at.com

Part 01、  VR視頻業務流程  

VR視頻從引入、發布到在VR終端設備播放經歷了哪些流程呢?如下圖所示,流程中一般涉及內容提供方(Content Provider,CP)、運營管理方、運營商業務平臺、承載網絡和終端廠商等多家機構。zxA28資訊網——每日最新資訊28at.com

圖片zxA28資訊網——每日最新資訊28at.com

Part 02、  VR視頻指標  

VR視頻傳輸除了和上述業務流程相關外,也和用戶體驗質量(Quality of Experience,QoE)密切相關。一般地,用戶主要關注視頻畫面質量、初緩時長、卡頓情況等,具體指標參數如下表所示。zxA28資訊網——每日最新資訊28at.com

圖片zxA28資訊網——每日最新資訊28at.com

Part 03、VR視頻傳輸方案  

終端每個角度可見的像素數量(Pixels Per Degree,PPD)用來表示VR視頻像素的密度。視場內像素密度越高,清晰度越高、觀看體驗越好。人的單眼水平視場角約為160°,垂直視場角約為150°,以PPD為20進行換算,要求視頻內容的全視角分辨率達到8K(7680×4320)。若考慮幀率、色深和立體感等其他維度的指標,視頻流數據量更大,碼率要求更高。因此,VR視頻傳輸技術重點解決上述問題。zxA28資訊網——每日最新資訊28at.com

3.1 高質量全視角傳輸方案

高質量全視角傳輸方案對全視角的VR視頻源內容進行投影、切片、編碼后,平面媒體格式的內容由運營商網絡以同等質量傳輸至終端,終端對全視角的內容進行全部或部分切片解碼、渲染,如下圖所示。zxA28資訊網——每日最新資訊28at.com

圖片圖片zxA28資訊網——每日最新資訊28at.com

方案優勢:用戶在進行視角(File of View,fov)切換時,終端完成包括碼流解析、視頻解碼和畫面渲染等處理,用戶能即時 (Just-in-time) 看到同等質量的內容。zxA28資訊網——每日最新資訊28at.com

方案不足:1)受限于人眼水平、垂直視場角和現有終端支持視角(可支持的視角為90°~110°),一般能看到的360°球面信號約為整個全景的19%,以同等質量傳輸全視角內容造成網絡資源浪費。2)全視角內容要求終端側具備與內容同等分辨率的解碼能力。3)等距柱狀投影借鑒地圖經緯線投影的思想,將球面展開為平面矩形,依靠增大面積變形保持角度不變(空間球體畫面在赤道部分投影展開后失真小,而越向兩極,畫面失真越大),改方式投影引入過多無效冗余像素,文件壓縮效率較低。zxA28資訊網——每日最新資訊28at.com

3.2 基于投影優化的全視角傳輸方案

基于投影優化的全視角傳輸方案使用多面體投影(Platonic Solid Projection,PSP),選擇部分經緯線作為邊界將空間球體面分割成多個部分,再將各部分的局部球面投影到某個多面體(包括四面體、六面體、金字塔、立方體等)的不同面上。多面體投影將球面的不同區域投影到多面體不同面積大小的面,由于每個區域單獨投影,相較于等距柱狀投影極大程度降低了畫面失真。基于投影優化的全視角傳輸技術,雖然減少網絡傳輸的數據量,但仍會傳輸大量未呈現給用戶的內容。zxA28資訊網——每日最新資訊28at.com

3.3 分片傳輸方案

分片傳輸方案對用戶fov區域使用高質量畫面保障視場內畫質,對非FoV區域使用低質量畫面,使得用戶在切換視角時能看到畫面,保障用戶切換體驗。如下圖所示,分片傳輸方案將高質量的全視角畫面劃分成多個分片,分別對每個高質量分片進行編碼。通過降質處理高質量分片獲取對應的低質量分片。終端根據用戶當前視角姿態向內容側請求對應FoV內高質量分片和非FoV區域的低質量分片,再對獲取的分片進行解碼、拼接成完整畫面。為減少傳輸數據量,非FoV區域的低質量分片也可選擇不全部傳輸,僅傳輸部分角度(比FoV大)區域內的低質量分片。zxA28資訊網——每日最新資訊28at.com

圖片圖片zxA28資訊網——每日最新資訊28at.com

方案優勢:1)只分片傳輸fov和部分非fov的方式降低網絡傳輸需求,在終端側復用部分重疊區域視頻分片,能進一步減少內容側向終端側推送數據量。2)非fov區域低質量分片和fov區域高質量分片組合傳輸極大提升了視角切換體驗。zxA28資訊網——每日最新資訊28at.com

方案不足:1)分片傳輸方案需要在終端對分片進行實時拼接,終端側引入更多計算,對終端計算能力要求更高。2)拼接算法效率或有效性不足,會帶來畫面拼接錯位、高低質量分片拼接明顯等問題。zxA28資訊網——每日最新資訊28at.com

3.4 基于全視角的分片傳輸方案

基于全視角的分片傳輸方案在內容側提供了低質量的全視角視頻流和高質量的分片視頻流。終端側根據當前的視角信息,向內容側獲取低質量的全視角視頻流以及視角區域范圍內的高質量分片視頻流并進行融合呈現。基于視頻分片的自適應視頻傳輸(Tile Wise Streaming,TWS)方案典型代表,TWS傳輸方案被動態圖像專家組織(Moving Picture Experts Group,MPEG)的全景視頻格式(Omnidirectional Media Format,OMAF)工作組所采納,并被寫入了最新的標準ISO/IEC 23090-2。如下圖所示,TWS方案在內容側準備了具備基本質量要求的全視角視頻流和高質量的Tile(分塊,即按照矩形劃分的分片)視頻流,內容側依據終端視角信息推送全視角視頻流和視角范圍內的多份Tile視頻流,再由終端進行解碼、拼接和呈現等。zxA28資訊網——每日最新資訊28at.com

圖片圖片zxA28資訊網——每日最新資訊28at.com

方案優勢:1)全視角低質量畫面不受網絡傳輸和終端解碼能力制約,全視角低質量畫面是確定的,無需終端按需獲取再進行實時拼接,降低了終端的拼接計算壓力。2)在網絡較差場景下,視頻能以基本質量播放,保障了播放流暢度。3)更適用于大屏電視等性能相對較低的終端。zxA28資訊網——每日最新資訊28at.com

Part 04、  總結  

分片傳輸技術方案在fov切換時體驗更佳,目前在該方案上出現大量fov預測相關研究。基于多自由度的視覺慣性測距、眼部追蹤等技術,借助AI模型預測用戶視角規律,并將預測內容文件緩存至移動邊緣網絡,借助邊緣緩存和計算能力,提前完成流行內容緩存、近場渲染、GPU云渲染,讓用戶獲得更流暢VR體驗。zxA28資訊網——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-26-34673-0.html淺析VR視頻傳輸方案

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 【運營思維】美團面試題:如何把梳子賣給寺廟和尚?

下一篇: 站點可靠性工程SRE最佳實踐 -- 黃金監控信號

標簽:
  • 熱門焦點
  • 6月安卓手機好評榜:魅族20 Pro蟬聯冠軍

    性能榜和性價比榜之后,我們來看最后的安卓手機好評榜,數據來源安兔兔評測,收集時間2023年6月1日至6月30日,僅限國內市場。第一名:魅族20 Pro好評率:95%5月份的時候魅族20 Pro就是
  • Automa-通過連接塊來自動化你的瀏覽器

    1、前言通過瀏覽器插件可實現自動化腳本的錄制與編寫,具有代表性的工具就是:Selenium IDE、Katalon Recorder,對于簡單的業務來說可快速實現自動化的上手工作。Selenium IDEKat
  • 一文看懂為蘋果Vision Pro開發應用程序

    譯者 | 布加迪審校 | 重樓蘋果的Vision Pro是一款混合現實(MR)頭戴設備。Vision Pro結合了虛擬現實(VR)和增強現實(AR)的沉浸感。其高分辨率顯示屏、先進的傳感器和強大的處理能力
  • 從 Pulsar Client 的原理到它的監控面板

    背景前段時間業務團隊偶爾會碰到一些 Pulsar 使用的問題,比如消息阻塞不消費了、生產者消息發送緩慢等各種問題。雖然我們有個監控頁面可以根據 topic 維度查看他的發送狀態,
  • 一篇聊聊Go錯誤封裝機制

    %w 是用于錯誤包裝(Error Wrapping)的格式化動詞。它是用于 fmt.Errorf 和 fmt.Sprintf 函數中的一個特殊格式化動詞,用于將一個錯誤(或其他可打印的值)包裝在一個新的錯誤中。使
  • 一個注解實現接口冪等,這樣才優雅!

    場景碼猿慢病云管理系統中其實高并發的場景不是很多,沒有必要每個接口都去考慮并發高的場景,比如添加住院患者的這個接口,具體的業務代碼就不貼了,業務偽代碼如下:圖片上述代碼有
  • OPPO K11評測:旗艦級IMX890加持 2000元檔最強影像手機

    【Techweb評測】中端機型用戶群體巨大,占了中國目前手機市場的大頭,一直以來都是各手機品牌的“必爭之地”,其中OPPO K系列機型一直以來都以高品質、
  • 與兆芯合作 聯想推出全新旗艦版筆記本電腦開天N7系列

    聯想與兆芯合作推出全新聯想旗艦版筆記本電腦開天 N7系列。這個系列采用兆芯KX-6640MA處理器平臺,KX-6640MA 處理器是采用了陸家嘴架構,16nm 工藝,4 核 4 線
  • 上海舉辦人工智能大會活動,建設人工智能新高地

    人工智能大會在上海浦江兩岸隆重拉開帷幕,人工智能新技術、新產品、新應用、新理念集中亮相。8月30日晚,作為大會的特色活動之一的上海人工智能發展盛典人工
Top 主站蜘蛛池模板: 永新县| 万安县| 拜城县| 稻城县| 铅山县| 黄平县| 上杭县| 汝州市| 凌源市| 天峻县| 祁东县| 汉川市| 南澳县| 溧阳市| 郁南县| 昌图县| 招远市| 南涧| 周宁县| 湾仔区| 赤峰市| 顺昌县| 新化县| 南涧| 兴仁县| 广河县| 黄龙县| 吉木乃县| 浑源县| 阿拉善左旗| 邢台县| 湾仔区| 罗山县| 福鼎市| 贵南县| 友谊县| 前郭尔| 六枝特区| 岚皋县| 郧西县| 马公市|