日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 科技  > 軟件

淺析VR視頻傳輸方案

來源: 責編: 時間:2023-11-28 09:37:01 227觀看
導讀Labs 導讀VR視頻屬于一種弱交互、輕交互業(yè)務,這類視頻一般經(jīng)過預先編排、規(guī)劃后,用戶在VR終端以任意自由度視點觀看。用戶與視頻的交互主要發(fā)生在用戶轉頭改變當前視點上。VR視頻在分辨率、幀率、色深等多維度指標上相

WhU28資訊網(wǎng)——每日最新資訊28at.com

Labs 導讀

VR視頻屬于一種弱交互、輕交互業(yè)務,這類視頻一般經(jīng)過預先編排、規(guī)劃后,用戶在VR終端以任意自由度視點觀看。用戶與視頻的交互主要發(fā)生在用戶轉頭改變當前視點上。VR視頻在分辨率、幀率、色深等多維度指標上相較于傳統(tǒng)視頻要求更高。WhU28資訊網(wǎng)——每日最新資訊28at.com

Part 01、  VR視頻業(yè)務流程  

VR視頻從引入、發(fā)布到在VR終端設備播放經(jīng)歷了哪些流程呢?如下圖所示,流程中一般涉及內(nèi)容提供方(Content Provider,CP)、運營管理方、運營商業(yè)務平臺、承載網(wǎng)絡和終端廠商等多家機構。WhU28資訊網(wǎng)——每日最新資訊28at.com

圖片WhU28資訊網(wǎng)——每日最新資訊28at.com

Part 02、  VR視頻指標  

VR視頻傳輸除了和上述業(yè)務流程相關外,也和用戶體驗質(zhì)量(Quality of Experience,QoE)密切相關。一般地,用戶主要關注視頻畫面質(zhì)量、初緩時長、卡頓情況等,具體指標參數(shù)如下表所示。WhU28資訊網(wǎng)——每日最新資訊28at.com

圖片WhU28資訊網(wǎng)——每日最新資訊28at.com

Part 03、VR視頻傳輸方案  

終端每個角度可見的像素數(shù)量(Pixels Per Degree,PPD)用來表示VR視頻像素的密度。視場內(nèi)像素密度越高,清晰度越高、觀看體驗越好。人的單眼水平視場角約為160°,垂直視場角約為150°,以PPD為20進行換算,要求視頻內(nèi)容的全視角分辨率達到8K(7680×4320)。若考慮幀率、色深和立體感等其他維度的指標,視頻流數(shù)據(jù)量更大,碼率要求更高。因此,VR視頻傳輸技術重點解決上述問題。WhU28資訊網(wǎng)——每日最新資訊28at.com

3.1 高質(zhì)量全視角傳輸方案

高質(zhì)量全視角傳輸方案對全視角的VR視頻源內(nèi)容進行投影、切片、編碼后,平面媒體格式的內(nèi)容由運營商網(wǎng)絡以同等質(zhì)量傳輸至終端,終端對全視角的內(nèi)容進行全部或部分切片解碼、渲染,如下圖所示。WhU28資訊網(wǎng)——每日最新資訊28at.com

圖片圖片WhU28資訊網(wǎng)——每日最新資訊28at.com

方案優(yōu)勢:用戶在進行視角(File of View,fov)切換時,終端完成包括碼流解析、視頻解碼和畫面渲染等處理,用戶能即時 (Just-in-time) 看到同等質(zhì)量的內(nèi)容。WhU28資訊網(wǎng)——每日最新資訊28at.com

方案不足:1)受限于人眼水平、垂直視場角和現(xiàn)有終端支持視角(可支持的視角為90°~110°),一般能看到的360°球面信號約為整個全景的19%,以同等質(zhì)量傳輸全視角內(nèi)容造成網(wǎng)絡資源浪費。2)全視角內(nèi)容要求終端側具備與內(nèi)容同等分辨率的解碼能力。3)等距柱狀投影借鑒地圖經(jīng)緯線投影的思想,將球面展開為平面矩形,依靠增大面積變形保持角度不變(空間球體畫面在赤道部分投影展開后失真小,而越向兩極,畫面失真越大),改方式投影引入過多無效冗余像素,文件壓縮效率較低。WhU28資訊網(wǎng)——每日最新資訊28at.com

3.2 基于投影優(yōu)化的全視角傳輸方案

基于投影優(yōu)化的全視角傳輸方案使用多面體投影(Platonic Solid Projection,PSP),選擇部分經(jīng)緯線作為邊界將空間球體面分割成多個部分,再將各部分的局部球面投影到某個多面體(包括四面體、六面體、金字塔、立方體等)的不同面上。多面體投影將球面的不同區(qū)域投影到多面體不同面積大小的面,由于每個區(qū)域單獨投影,相較于等距柱狀投影極大程度降低了畫面失真。基于投影優(yōu)化的全視角傳輸技術,雖然減少網(wǎng)絡傳輸?shù)臄?shù)據(jù)量,但仍會傳輸大量未呈現(xiàn)給用戶的內(nèi)容。WhU28資訊網(wǎng)——每日最新資訊28at.com

3.3 分片傳輸方案

分片傳輸方案對用戶fov區(qū)域使用高質(zhì)量畫面保障視場內(nèi)畫質(zhì),對非FoV區(qū)域使用低質(zhì)量畫面,使得用戶在切換視角時能看到畫面,保障用戶切換體驗。如下圖所示,分片傳輸方案將高質(zhì)量的全視角畫面劃分成多個分片,分別對每個高質(zhì)量分片進行編碼。通過降質(zhì)處理高質(zhì)量分片獲取對應的低質(zhì)量分片。終端根據(jù)用戶當前視角姿態(tài)向內(nèi)容側請求對應FoV內(nèi)高質(zhì)量分片和非FoV區(qū)域的低質(zhì)量分片,再對獲取的分片進行解碼、拼接成完整畫面。為減少傳輸數(shù)據(jù)量,非FoV區(qū)域的低質(zhì)量分片也可選擇不全部傳輸,僅傳輸部分角度(比FoV大)區(qū)域內(nèi)的低質(zhì)量分片。WhU28資訊網(wǎng)——每日最新資訊28at.com

圖片圖片WhU28資訊網(wǎng)——每日最新資訊28at.com

方案優(yōu)勢:1)只分片傳輸fov和部分非fov的方式降低網(wǎng)絡傳輸需求,在終端側復用部分重疊區(qū)域視頻分片,能進一步減少內(nèi)容側向終端側推送數(shù)據(jù)量。2)非fov區(qū)域低質(zhì)量分片和fov區(qū)域高質(zhì)量分片組合傳輸極大提升了視角切換體驗。WhU28資訊網(wǎng)——每日最新資訊28at.com

方案不足:1)分片傳輸方案需要在終端對分片進行實時拼接,終端側引入更多計算,對終端計算能力要求更高。2)拼接算法效率或有效性不足,會帶來畫面拼接錯位、高低質(zhì)量分片拼接明顯等問題。WhU28資訊網(wǎng)——每日最新資訊28at.com

3.4 基于全視角的分片傳輸方案

基于全視角的分片傳輸方案在內(nèi)容側提供了低質(zhì)量的全視角視頻流和高質(zhì)量的分片視頻流。終端側根據(jù)當前的視角信息,向內(nèi)容側獲取低質(zhì)量的全視角視頻流以及視角區(qū)域范圍內(nèi)的高質(zhì)量分片視頻流并進行融合呈現(xiàn)。基于視頻分片的自適應視頻傳輸(Tile Wise Streaming,TWS)方案典型代表,TWS傳輸方案被動態(tài)圖像專家組織(Moving Picture Experts Group,MPEG)的全景視頻格式(Omnidirectional Media Format,OMAF)工作組所采納,并被寫入了最新的標準ISO/IEC 23090-2。如下圖所示,TWS方案在內(nèi)容側準備了具備基本質(zhì)量要求的全視角視頻流和高質(zhì)量的Tile(分塊,即按照矩形劃分的分片)視頻流,內(nèi)容側依據(jù)終端視角信息推送全視角視頻流和視角范圍內(nèi)的多份Tile視頻流,再由終端進行解碼、拼接和呈現(xiàn)等。WhU28資訊網(wǎng)——每日最新資訊28at.com

圖片圖片WhU28資訊網(wǎng)——每日最新資訊28at.com

方案優(yōu)勢:1)全視角低質(zhì)量畫面不受網(wǎng)絡傳輸和終端解碼能力制約,全視角低質(zhì)量畫面是確定的,無需終端按需獲取再進行實時拼接,降低了終端的拼接計算壓力。2)在網(wǎng)絡較差場景下,視頻能以基本質(zhì)量播放,保障了播放流暢度。3)更適用于大屏電視等性能相對較低的終端。WhU28資訊網(wǎng)——每日最新資訊28at.com

Part 04、  總結  

分片傳輸技術方案在fov切換時體驗更佳,目前在該方案上出現(xiàn)大量fov預測相關研究。基于多自由度的視覺慣性測距、眼部追蹤等技術,借助AI模型預測用戶視角規(guī)律,并將預測內(nèi)容文件緩存至移動邊緣網(wǎng)絡,借助邊緣緩存和計算能力,提前完成流行內(nèi)容緩存、近場渲染、GPU云渲染,讓用戶獲得更流暢VR體驗。WhU28資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-26-34673-0.html淺析VR視頻傳輸方案

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 【運營思維】美團面試題:如何把梳子賣給寺廟和尚?

下一篇: 站點可靠性工程SRE最佳實踐 -- 黃金監(jiān)控信號

標簽:
  • 熱門焦點
  • Find N3入網(wǎng):最高支持16+1TB

    OPPO將于近期登場的Find N3折疊屏目前已經(jīng)正式入網(wǎng),型號為PHN110。本次Find N3在外觀方面相比前兩代有很大的變化,不再是小號的橫向折疊屏,而是跟別的廠商一樣采用了較為常見的
  • 7月安卓手機性能榜:紅魔8S Pro再奪榜首

    7月份的手機市場風平浪靜,除了紅魔和努比亞帶來了兩款搭載驍龍8Gen2領先版處理器的新機之外,別的也想不到有什么新品了,這也正常,通常6月7月都是手機廠商修整的時間,進入8月份之
  • JavaScript 混淆及反混淆代碼工具

    介紹在我們開始學習反混淆之前,我們首先要了解一下代碼混淆。如果不了解代碼是如何混淆的,我們可能無法成功對代碼進行反混淆,尤其是使用自定義混淆器對其進行混淆時。什么是混
  • 多線程開發(fā)帶來的問題與解決方法

    使用多線程主要會帶來以下幾個問題:(一)線程安全問題  線程安全問題指的是在某一線程從開始訪問到結束訪問某一數(shù)據(jù)期間,該數(shù)據(jù)被其他的線程所修改,那么對于當前線程而言,該線程
  • 當家的盒馬,加速謀生

    來源 | 價值星球Planet作者 | 歸去來自己“當家”的盒馬,開始加速謀生了。據(jù)盒馬官微消息,盒馬計劃今年開放生鮮供應鏈,將其生鮮商品送往食堂。目前,盒馬在上海已經(jīng)與
  • 年輕人的“職場羞恥感”,無處不在

    作者:馮曉亭 陶 淘 李 欣 張 琳 馬舒葉來源:燃次元“人在職場,應該選擇什么樣的著裝?”近日,在網(wǎng)絡上,一個與著裝相關的帖子引發(fā)關注,在該帖子里,一位在高級寫字樓亞洲金
  • 微博大門常打開,迎接海外畫師漂洋東渡

    作者:互聯(lián)網(wǎng)那些事“起猛了,我能看得懂日語了”。“為什么日本人說話我能聽懂?”“中文不像中文,日語不像日語,但是我竟然看懂了”…&hell
  • iQOO Neo8 Pro搶先上架:首發(fā)天璣9200+ 安卓性能之王

    經(jīng)過了一段時間的密集爆料,昨日iQOO官方如期對外宣布:將于5月23日推出全新的iQOO Neo8系列新品,官方稱這是一款擁有旗艦級性能調(diào)校的作品。隨著發(fā)布時
  • DRAM存儲器10月價格下跌,NAND閃存本月價格與上月持平

    10月30日,據(jù)韓國媒體消息,自今年年初以來一直在上漲的 DRAM 存儲器的交易價格僅在本月就下跌了近 10%,此次是全年首次降價,而NAND 閃存本月價格與上月持平。市
Top 主站蜘蛛池模板: 化德县| 延寿县| 湘潭县| 桂平市| 时尚| 咸阳市| 灵丘县| 新巴尔虎右旗| 林周县| 西华县| 孟津县| 松桃| 桐城市| 嫩江县| 镇沅| 武乡县| 博客| 浦江县| 六盘水市| 房山区| 涿鹿县| 雅安市| 甘谷县| 翼城县| 凤城市| 克什克腾旗| 河间市| 金秀| 宁陕县| 上思县| 太谷县| 蕉岭县| 福贡县| 高碑店市| 五大连池市| 青阳县| 盖州市| 南昌市| 通辽市| 柞水县| 巨鹿县|