8月22日,火山引擎視頻云&AIGC大會以“視象新生”為主題,發布了自研的視頻編解碼芯片,并攜手英偉達發布多媒體處理框架BMF(Babit Multi-Media Framework),與行業伙伴共同探討視頻技術的發展將如何助力不同行業實現業務創新與增長。
01.視頻化時代,火山引擎奠定抖音“霸主”地位
根據QuestMobile的數據,截至2023年5月,中國移動視頻行業的用戶規模達到10.76億人,月均觀看時長為64.2小時?!吨袊W絡視聽發展研究報告(2023)》統計顯示,短視頻的人均單日使用時長已超過2.5小時。
僅僅幾年的時間里,視頻在中國迅猛發展,已經無處不在地融入了我們的生活和工作。從2018年起,用手機看抖音時,我們難以想象視頻會如此迅速的發展。中國短視頻用戶數量在短短5年內從6.48億增長至10.12億。而到2022年,中國視頻直播帶貨規模約為3.5萬億,占網上零售額的25.4%。
視頻化的時代的到來催生了用戶和平臺對視頻轉型的需求,也帶動了對視頻云服務的需求。據艾瑞咨詢的數據顯示,到2024年,中國視頻云服務的整體市場規模將達到924億元。這是一個千億級的市場,吸引了眾多企業的加入,也加快了視頻云的發展。而在其中,火山引擎視頻云備受業內關注,它為實現"抖音現象"奠定了堅實基礎。
作為字節跳動旗下的云服務平臺,火山引擎最初主要為字節跳動內部產品提供服務。隨著內部產品的覆蓋范圍擴大和影響力的增加,火山引擎的技術也日益成熟。近兩年來,火山引擎的技術逐漸拓展到B端市場,惠及各行各業。
02.2022卡塔爾世界杯,火山引擎“出圈”異常亮眼
火山引擎在2022卡塔爾世界杯直播中可謂“圈錢又圈粉”。在本屆世界杯直播中,抖音免費開放了超高清模式,并且完全沒有片頭廣告,社交媒體上出現了許多對其“良心”、“靠譜”和“超高清”等的評價。因此,大批用戶紛紛涌入抖音,在世界杯期間共計支持了106億人次的直播觀看,決賽的觀看人數更是達到了2.3億。
在比賽場上,當一記射門發生的那一瞬間,現場畫面通過衛星傳輸至中國,抖音需要在瞬間對畫面進行壓縮和美化,并傳輸給數以億計的設備,使其在手機上以720p、1080p或者4K的清晰度呈現出來。
這1秒鐘內,如果采用4K50幀的畫質,視頻大小將接近50M,如果同時傳輸給數以億計的用戶,網絡線路將無法承受。因此,抖音將視頻進行編碼壓縮,將其控制在10M左右,并在用戶手機上再進行解碼,以避免被高峰流量沖垮網絡。
在這1秒的時間內,工程師們需要將HDR信號轉換為SDR,對畫面上800萬個像素的色彩、亮度和對比度進行優化,達到更好的觀賞效果。
此外,他們還采用了自研的RTM直播技術,將直播的延遲降低到半秒,以確保所有用戶能夠同步觀看比賽結果。
梅西的第1000場比賽進球,全中國抖音觀看的用戶同時為其喝彩,全民狂歡的背后離不開火山引擎的自研視頻芯片。
03.臺上一秒鐘,臺下十年功——火山引擎自研視頻芯片
在火山引擎發布的自研視頻芯片中,轉碼扮演著至關重要的角色。視頻轉碼實質上是先解碼再編碼的過程,解碼將壓縮后的視頻包重新還原為逐幀畫面,而編碼則將每幀畫面重新壓縮并打包,以便傳輸給不同終端的用戶,以提供相同高清畫質的視頻。
火山引擎自研的視頻編解碼芯片在大會中發布,并經驗證,在壓縮效率方面超過了行業主流的硬件編碼器,提升了30%以上。這種芯片可應用于視頻點播、直播、圖像壓縮、XR等多個業務場景。相較于通用計算能力的CPU芯片,火山引擎的自研芯片只專注于視頻編解碼任務,從而在視頻處理場景中具備更高的計算密度。因此,一臺搭載火山引擎芯片的服務器在轉碼能力上相當于一百臺搭載CPU的服務器。
簡而言之,在4K/8K超高清、高幀率的場景中,相比軟件編碼,火山引擎的視頻編解碼芯片能夠實現低延遲且高質量的轉碼,對于觀眾規模較小的中小型直播來說,可以節省大量的算力成本。對于用戶而言,他們能夠體驗到更高質量的畫面和更低的延遲。
此前,火山引擎在世界編碼器大賽MSU中贏得了多個第一名,并達到了行業領先水平。而發布自研視頻編解碼芯片有望大幅提升4K超高清應用場景的編碼速度,保證視頻的高質量以及主客觀質量,顯著降低4K編碼的計算成本,推動更廣泛的4K應用普及化。
隨著視頻成為應用的標配,視頻處理框架面臨著越來越多樣化和復雜化的場景和需求。這同時對計算性能和異構計算資源的運用提出了更多要求。為了滿足這些要求,火山引擎與英偉達合作,共同推出了基于億級DAU實踐的下一代視頻處理架構BMF,以幫助用戶充分發揮各種能力和方案優勢的互補和協同作用,并快速實現落地。
04.下一代視頻處理架構——BMF
BMF框架提供了簡潔易用的跨語言接口、靈活的調度和擴展性,可以以模塊化的方式動態擴展、管理和復用視頻處理的原子能力。用戶可以通過構建高性能的多媒體處理鏈路,或者直接調用單獨的處理能力來實現工程集成。這使得多媒體用戶能夠方便、高效地將項目落地于生產環境。
在業務落地的過程中,BMF框架經過充分打磨,擁有多樣性、易用性、兼容性、穩定性和高性能。它可以支持從生產到消費的全鏈路視頻場景,包括點播/直播轉碼、云編輯、移動端后處理等。尤其值得一提的是,它還支持大量視頻AI應用,如視頻增強、視頻質量分析等。
NVIDIA英偉達亞太區開發與技術部門總經理李曦鵬表示,NVIDIA和火山引擎將致力于將BMF打造成下一代視頻處理的基礎平臺。他們將繼續與火山引擎合作,聽取社區和用戶的意見,在NVIDIA的最新軟硬件平臺上不斷進行迭代,進一步完善BMF框架。
火山引擎也一直在探索AI與視頻云的融合,通過大型模型實踐積累,提出了一些創新的技術方案。例如,“極致超清”技術,基于人眼感知最佳為基準的AI前處理方案,通過降低播放碼率實現整體帶寬降低,單路流量可降低15-35%。這項技術適用于大型活動直播、電商直播等場景,提升了畫質體驗。另外還有“AI修復”技術,利用強大的AIGC大模型生成能力,對受損或老舊影片進行修復,全面提升畫質。
BMF目前已經全面開源,包括整個BMF框架層的開源、9個開箱即用的示例案例和20多個API調用范例,幫助開發者以低成本構建視頻應用。火山引擎視頻云架構技術總監王悅表示,開源后,他們計劃持續開源更多核心能力,完善解決方案,包括支持更多異構硬件、提供更多原子能力和移動端支持等。他們希望實現他們的愿景,加速全球的視頻化進程,共建視頻開發生態。
05.OFweek維科網·電子工程 總結
開放互聯是火山引擎云服務的重要發展理念之一。通過更多人的參與,技術革新將加速推進,這將為未來的商業發展提供更大的想象空間。數字技術不僅是云計算的基石,也是未來社會生活場景的基石。
隨著技術的飛速發展,物理世界與虛擬世界之間的界限不斷被打破。從人工到智能,我們正面臨著技術的巨大變革。在這一背景下,視頻云不斷升級具有重要的意義。它能夠連接更多想要進入視頻時代的伙伴,共同探索確定的未來。
在未來,視頻云將繼續發展,不斷推動行業向前發展。通過開放、合作和共享的理念,我們能夠共同探索和開拓一個更加繁榮、多樣化的視頻時代。
本文鏈接:http://www.www897cc.com/showinfo-27-6430-0.html千萬人直播掙錢“幕后功臣”——火山引擎自研視頻芯片
聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com
上一篇: 康芯威探索存儲芯片新機遇交流沙龍紀實