日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 科技  > 網絡

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換

來源: 責編: 時間:2024-01-18 09:37:45 236觀看
導讀 人形機器人跳舞復刻杰克遜,竟一點不遜色??這究竟是怎么回事?原來啊,阿里又整出新活兒——MotionShop,能將視頻中的人物角色替換成3D形象,同時又不改變其他場景和人物。看到這有人已經迫不及待了。目前已

人形機器人跳舞復刻杰克遜,竟一點不遜色??gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

這究竟是怎么回事?gSU28資訊網——每日最新資訊28at.com

原來啊,阿里又整出新活兒——gSU28資訊網——每日最新資訊28at.com

MotionShop,能將視頻中的人物角色替換成3D形象,同時又不改變其他場景和人物。gSU28資訊網——每日最新資訊28at.com

看到這有人已經迫不及待了。目前已在ModelScope社區開放試玩。gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

還有人建議說在HuggingFace也安排一下,不然不懂中文的人怎么辦啊~gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

不過確實承認,近阿里的花活好多。gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

可免費試玩gSU28資訊網——每日最新資訊28at.com

目前MotionShop可以免費試玩,只需三步即可完成:gSU28資訊網——每日最新資訊28at.com

上傳視頻——確定目標對象——選擇要替換的虛擬對象。gSU28資訊網——每日最新資訊28at.com

不過實測的時候發現,需要注意幾點。gSU28資訊網——每日最新資訊28at.com

首先上傳這個視頻,不能超過15秒,好保證人物完整,而且也不能是剪輯而成。gSU28資訊網——每日最新資訊28at.com

換句話說,需要一鏡到底,切換鏡頭就不行。gSU28資訊網——每日最新資訊28at.com

隨后選擇替換人物時,它會自動選擇一個對象,然后看是否符合你的目標對象。gSU28資訊網——每日最新資訊28at.com

目前可替換的虛擬形象只有四個。gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

后就是比較漫長的排隊等待時間……試用的人太多了吧。gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

如何實現?gSU28資訊網——每日最新資訊28at.com

來自阿里的研究團隊提出了用3D人物替換視頻中角色的框架。gSU28資訊網——每日最新資訊28at.com

整個框架由兩部分組成:gSU28資訊網——每日最新資訊28at.com

1、用于提取修復背景視頻序列的視頻處理管線;gSU28資訊網——每日最新資訊28at.com

2、用于生成3D人物視頻的序列的姿態估計和渲染管線。gSU28資訊網——每日最新資訊28at.com

通過并行兩條管線并使用高性能的光線追蹤渲染器TIDE,整個過程能在gSU28資訊網——每日最新資訊28at.com

杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換gSU28資訊網——每日最新資訊28at.com

具體分為七個步驟。gSU28資訊網——每日最新資訊28at.com

第一步,角色檢測。使用基于Transformer融合文本信息與現有封閉集檢測器,實現零樣本對象檢測。通過優勢選擇方法確定終目標區域。gSU28資訊網——每日最新資訊28at.com

第二步,分割與追蹤。成功檢測到目標后,通過視頻對象分割跟蹤方法來像素級跟蹤目標區域,這一方法是基于SAM模型的細化升級。gSU28資訊網——每日最新資訊28at.com

第三步,修補。視頻剩下區域進行修補繪制。包括采用了遞歸流完成法來恢復損壞的流場,在圖像域和特征域都采用了雙域傳播法來增強全局和局部的時間一致性。gSU28資訊網——每日最新資訊28at.com

第四步,姿態估計。采用姿態估計方法 CVFFS 來估計穩定的人體姿態。使用 SMPL 人體模型來表示三維人體。gSU28資訊網——每日最新資訊28at.com

第五步,3D人物生成。將估算出的形狀和姿勢重新映射到選定的三維模型上。gSU28資訊網——每日最新資訊28at.com

第六步,為了更自然真實的視覺效果,做進一步光線處理和渲染,讓3D模型與原視頻更融入。比如使用TIDE引擎來渲染新的 3D 模型。它與精確的材質系統相結合,并輔以運動模糊、時間抗鋸齒和時間去噪等算法。gSU28資訊網——每日最新資訊28at.com

后,將渲染圖像與原始視頻合成,生成終視頻。gSU28資訊網——每日最新資訊28at.com


文章出處:量子位

本文鏈接:http://www.www897cc.com/showinfo-17-63997-0.html杰克遜跳舞秒變3D機器人!阿里又出新活兒 視頻任何人可替換

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 日本去年破產企業超8000家 增幅為31年來新高:造假公司越來越多...

下一篇: 唯品會:沒錢做百億補貼 居然沒被卷死 還挺滋潤

標簽:
  • 熱門焦點
  • 鴻蒙OS 4.0公測機型公布:甚至連nova6都支持

    華為全新的HarmonyOS 4.0操作系統將于今天下午正式登場,官方在發布會之前也已經正式給出了可升級的機型產品,這意味著這些機型會率先支持升級享用。這次的HarmonyOS 4.0支持
  • K60 Pro官方停產 第三方瞬間漲價

    雖然沒有官方宣布,但Redmi的一些高管也已經透露了,Redmi K60 Pro已經停產且不會補貨,這一切都是為了即將到來的K60 Ultra鋪路,屬于廠家的正常操作。但有意思的是該機在停產之后
  • 6月iOS設備好評榜:第一蟬聯榜首近一年

    作為安兔兔各種榜單里變化最小的那個,2023年6月的iOS好評榜和上個月相比沒有任何排名上的變化,僅僅是部分設備好評率的下降,長年累月的用戶評價和逐漸退出市場的老款機器讓這
  • 多線程開發帶來的問題與解決方法

    使用多線程主要會帶來以下幾個問題:(一)線程安全問題  線程安全問題指的是在某一線程從開始訪問到結束訪問某一數據期間,該數據被其他的線程所修改,那么對于當前線程而言,該線程
  • 只需五步,使用start.spring.io快速入門Spring編程

    步驟1打開https://start.spring.io/,按照屏幕截圖中的內容創建項目,添加 Spring Web 依賴項,并單擊“生成”按鈕下載 .zip 文件,為下一步做準備。請在進入步驟2之前進行解壓。圖
  • 小紅書1周漲粉49W+,我總結了小白可以用的N條漲粉筆記

    作者:黃河懂運營一條性教育視頻,被54萬人“珍藏”是什么體驗?最近,情感博主@公主是用鮮花做的,火了!僅僅憑借一條視頻,光小紅書就有超過128萬人,為她瘋狂點贊!更瘋狂的是,這
  • 新電商三兄弟,“抖快紅”成團!

    來源:價值研究所作 者:Hernanderz 隨著內容電商的概念興起,抖音、快手、小紅書組成的“新電商三兄弟”成為業內一股不可忽視的勢力,給阿里、京東、拼多多帶去了巨大壓
  • 親歷馬斯克血洗Twitter,硅谷的苦日子在后頭

    文/劉哲銘  編輯/李薇  馬斯克再次揮下裁員大刀。  美國時間11月14日,Twitter約4400名外包員工遭解雇,此次被解雇的員工的主要工作為內容審核等。此前,T
  • 中關村論壇11月25日開幕,15位諾獎級大咖將發表演講

    11月18日,記者從2022中關村論壇新聞發布會上獲悉,中關村論壇將于11月25至30日在京舉行。本屆中關村論壇由科學技術部、國家發展改革委、工業和信息化部、國務
Top 主站蜘蛛池模板: 新宾| 新龙县| 疏附县| 济宁市| 许昌市| 白河县| 陵水| 苏尼特右旗| 永胜县| 宜黄县| 江华| 鞍山市| 安西县| 随州市| 阿拉尔市| 腾冲县| 清丰县| 红河县| 罗源县| 城口县| 康乐县| 仲巴县| 化隆| 伊金霍洛旗| 安西县| 武胜县| 白银市| 山东| 秀山| 佛冈县| 寿光市| 江阴市| 车致| 从化市| 高青县| 忻州市| 同德县| 阳原县| 北碚区| 朝阳市| 建始县|