新智元報道

編輯：定慧 KingHZ

【新智元導讀】把創(chuàng)作玩成了魔法，SkyReels新版重構(gòu)AI創(chuàng)作生態(tài)：無限畫布融合圖片、音頻、視頻，一鍵啃下多主體互動的硬骨頭，讓創(chuàng)意無限延展。

如果年老的喬布斯碰到年輕的喬布斯，他們會說什么？

這就是爆火的AI數(shù)字人視頻制作～

不管是制作商業(yè)視頻，還是影視級制作，或者二創(chuàng)視頻，AI已經(jīng)徹底顛覆了過去的生產(chǎn)體系。

上面視頻效果令人驚訝，角色的口型和發(fā)音完美同步，毫無違和感。

而下面這種電影級別的多人多輪對話已經(jīng)幾乎看不出AI的痕跡，太自然了！

以上就是我們用SkyReels最新版制作的多人多輪對話視頻。

2024年7月上線后，SkyReels曾迅速風靡海外，這次發(fā)布的是最新版本，使用后的感受只有兩個字：強大。

作為業(yè)內(nèi)首個支持單鏡頭多人多輪對話的數(shù)字人模型，SkyReels在識別主體人物、角色一致性等能力都來到新的高度。

你甚至可以直接用SkyReels「拍一部」MV。

就在不到一個月前的國慶期間，OpenAI發(fā)布了他們最新的AI視頻生成產(chǎn)品Sora 2，著實讓AI視頻又火了一把。

AI視頻生成，已經(jīng)不是什么新鮮事。

但是如何在最真實、最高頻的場景需求中，讓普通人輕松創(chuàng)作出高質(zhì)量內(nèi)容，才是核心競爭力。

這次SkyReels新版本重構(gòu)了用戶——AI——作品三者之間的關(guān)系，讓每個人都能更好地塑造和表現(xiàn)自我。

一句話簡單說就是：這次SkyReels打通「圖片—音頻—視頻」全棧，把多主體、多人對話、電影運鏡這三個「硬骨頭」同時啃到行業(yè)第一。

一張畫布，無限可能

本次SkyReels更新后，全部的AI功能和多個全球頂尖AI模型都集成于同一個創(chuàng)作空間。

一張畫布即是所有工具，一張畫布融合圖片、視頻、音樂等多模態(tài)。

在無限畫布上，你看到的每一個內(nèi)容，都是一個活的、可交互的積木——

所見即所得，效果實時呈現(xiàn)。

SkyReels的這種全新的交互模式，讓創(chuàng)作告別線性步驟，用戶直接進行網(wǎng)狀探索。

比如，你只需在同一張畫布內(nèi)，就可以完成上述喬布斯跨時空對話視頻的制作。

一站式創(chuàng)作體驗

如何將AI創(chuàng)作體驗集成到一起，融為一體，而不是割裂的AI生成內(nèi)容、生成圖片、生成視頻？

SkyReels在一張畫布中集成了靈感、模板、圖片、視頻和音頻所有功能。

先對話碰撞靈感，再出圖，然后直接把圖片傳入Avatar中實現(xiàn)最終效果。

SkyReels會自動上傳圖片中的人物，準確定位角色位置。

然后就可以給每個角色分配他們「要說的話」，在分配前，你還可以選擇角色的配音音色。

值得一提的是，SkyReels數(shù)字人的強大之處在于，你可以選擇13個國家的語言，包括了：

漢語、英語、法語、德語、意大利語、日語、葡萄牙語等。

還可以選擇性別、年齡和語言風格，比如：

冷淡的/高傲疏離的、親切的/友善的、迷人的/富有魅力的、優(yōu)雅的/高雅的、幽默的/詼諧等。

通過頭像、對話提示詞和配音三管齊下，SkyReels可以精確控制每個角色的說話時機與節(jié)奏，讓多角色互動自然流暢，具備真實的對話感。

在這種精確控制下，不管是影視級對話場景、電商雙人口播或者二創(chuàng)影視和游戲素材，都變得簡單，普通人也可以打造出作品。

除了選擇配音，還可以選擇錄音等自制音頻文件，這樣生成的視頻更具個性化及真實感。

除了可以用Avatar讓角色進行對話。

SkyReels也可以讓靜態(tài)的梵高的名畫《星月夜》動起來:

看到別人的新創(chuàng)意，但苦于自己沒有靈感，不知如何創(chuàng)作出類似的視頻？

對話「Chat」功能內(nèi)置超級智能體「SuperAgent」，用AI激發(fā)新靈感。

支持圖像、視頻等多模態(tài)輸入，比如輸入《星月夜》原圖和已有視頻：

智能體從主題、設定、構(gòu)圖、色彩等多角度思考，生成了另一個版本的《星月夜》：

事實上，與其他AI視頻工具定位不同，SkyReels更聚焦工作場景、更加簡單易用。

多種方式，真AI生成力工具

針對自媒體、市場營銷、電商推廣、教育宣傳等工作場景，SkyReels集多模態(tài)于一身、以AI為先。

他們背后有哪些考量？他們認為，

視覺/音頻等GenAI工具還會保持高速發(fā)展，而創(chuàng)意永遠是連接人與AI的橋梁。

與此同時，創(chuàng)意工具產(chǎn)品復雜度會進一步降低，自然語言與編輯工具會更加無縫融合。

他們希望用戶無需學習AI，而只需要使用AI。

SkyReels將復雜的模型調(diào)用、參數(shù)設置都裝入了簡單的操作，甚至只需點擊，就能完成創(chuàng)作。

除了圖像變視頻、讓圖中人物開口說話外，在畫布中還可以音樂轉(zhuǎn)畫面、圖像風格遷移、給視頻中人物配音。

而且整個工作流是流動的，多種素材、多種需求，一張畫布，全部滿足。

比如，想做一個「游戲世界觀預告」，但現(xiàn)在只有一張概念圖：

直接和AI對話，讓SkyReels給出建議：

這是一張游戲概念圖，如何基于這張圖制作「游戲世界觀預告」？

在SkyReels的引導下，幾乎只要確認一下是否滿足需求，就能生成預告：

此外，還可以生成環(huán)境音。

音效+視頻一結(jié)合，效果一下出來了：

圖像生成、音頻生成、視頻生成……一張畫布集成了多種功能，使用體驗對小白來說相當絲滑：

Web端功能更加豐富易用

除了對模型底層能力的升級，這次SkyReels的全面升級帶來了全新的Web端UI設計，使用更加方便和快捷。

上面提到的無限畫布就是其中一項，SkyReels還提供了豐富的模板和智能體。

專業(yè)的事，交給專業(yè)的智能體

創(chuàng)作沒有思路，怎么辦？

針對28個應用場景，SkyReels推出了專家智能體（Expert Agent），只要根據(jù)智能體的提示，輸入自己的需求，就能得到最終的創(chuàng)意結(jié)果。

比如，新店開業(yè)，需要一套宣傳物料，直接使用「創(chuàng)意活動」（Campaign Creatives），即可快速設計營銷活動宣傳材料。

比如，下列3種類型的海報：

28位專家Agent，精準聚焦高價值的市場營銷 、電子商務、創(chuàng)意故事、虛擬形象等領(lǐng)域。

比如，電子商務智能體，直出可商用的廣告：

生成故事情節(jié)也不在話下：

每個Agent內(nèi)置專業(yè)領(lǐng)域知識庫和成熟工作流程，能深度理解行業(yè)術(shù)語，提供可執(zhí)行的專業(yè)方案。

無需學習復雜提示詞，你只需補充關(guān)鍵信息、設定限定條件，如目標受眾、視頻比例、風格偏好等。

在每個專家場景中，Agent可自動執(zhí)行多步驟任務，一鍵生成可直接交付的完整成果，告別零散半成品。

每個Agent都經(jīng)過深度優(yōu)化，專注高價值領(lǐng)域，讓你：

? 無需浪費時間調(diào)試通用工具

? 開箱即用，精準高效

? 顯著提升任務效率與質(zhì)量

專業(yè)的事，交給專業(yè)的Agent。

如果需求較為明確，SkyReels讓內(nèi)容生產(chǎn)更簡單——

得益于AI驅(qū)動的視覺內(nèi)容引擎，無論是智能海報、商品B-Roll，還是音畫同出的廣告大片，在SkyReels模板中都可一鍵生成。

海報、服裝圖、視頻廣告 ， AI一鍵直出

針對功能海報設計、電商服裝圖制作、商品演示視頻以及數(shù)字人口播講解等主流應用場景，SkyReels模板庫提供了近10個大類、150余種模板，支持圖片與視頻的快速生成。

SkyReels橫跨圖片與視頻，專為提升產(chǎn)品的營銷轉(zhuǎn)化率與品牌表現(xiàn)力而設計。

圖片功能主要為一鍵「AI海報」和「AI試穿」。

「AI商品海報」可直接復用流行的、高轉(zhuǎn)化的爆款海報，一鍵套用。

而且和常見的其他模型不同，SkyReels可修改文字——

標題、賣點、價格等文字，均可編輯，完美貼合新需求，靈活調(diào)整營銷節(jié)點。

而「AI試穿」功能，不變形、不失真。不僅效果行業(yè)頂尖， 而且支持多件服飾同時試穿——

AI自動推薦「套裝」，買家遠程即可體驗穿衣效果，有效提升客單價。

AI數(shù)字人、動態(tài)展示視頻、電影級創(chuàng)意廣告等商業(yè)需求，SkyReels一站全搞定。

此外，SkyReels還提供輔助創(chuàng)意工具箱，讓創(chuàng)意不受限制。

一些常用的PS功能，比如商品換背景（智能摳圖）、圖片風格轉(zhuǎn)換等直接可用。

不止是PS，利用AI還能自動生成特寫、環(huán)繞鏡頭、視頻特效（添加濾鏡、轉(zhuǎn)場）。

SkyReels一站式制作商業(yè)廣告

由于可以對角色視頻和音頻的精確控制，這給很多商業(yè)場景帶來無限想象力，比如廣告制作。

想象一個場景，讓擎天柱為我們推銷一款汽油。

首先，使用SkyReels的生圖功能生成一系列素材圖片。

在畫布中，你可以設置圖片比例，還能設置圖片風格。

值得一提的是，在全新的SkyReels上，集成了全球頂尖的AI模型，比如在文生圖上就可以調(diào)用谷歌最新的Nano Banana模型。

在視頻生成模塊就可以直接調(diào)用Sora 2，還能調(diào)用Sora 2 Pro；還有谷歌最新的Veo 3.1等等。

然后，就可以直接在數(shù)字人制作Avatar中直接在生成素材中選擇合適的圖片，無需脫離當前工作流，操作非常方便。

這就是SkyReels全新升級的無限畫布功能，之前已介紹過。

最終，只需要通過兩段提示詞+幾次鼠標點擊，就可以制作一個非常像樣的商業(yè)化廣告。

以上只是一個快速的流程演示，還可以根據(jù)需求，在畫布上繼續(xù)微調(diào)。

除了多人多輪對話，針對單人的視頻也做到極致的控制。

更夸張的是，SkyReels提供了32個運鏡組合與鏡頭運動選項。

一鍵延長視頻和風格化轉(zhuǎn)換

SkyReels這次更新充分考慮了創(chuàng)作者的諸多創(chuàng)作痛點。

無限畫布讓我們無需開啟多個對話打斷思路，而且點擊圖片和視頻結(jié)果時，頂部都會出現(xiàn)不同的快捷功能欄。

可以一步直達所需功能，比如圖片可以擴充、移除背景等，下面就是一鍵將1:1的照片擴充為16:9的照片。

SkyReels會主動理解圖片內(nèi)容，并進行補全。

而視頻則可以繼續(xù)延長，或者換一個風格，也就是風格化。

此次SkyReels模型不再局限于「單鏡頭」的拉長模式，而是基于視頻語義和用戶 Prompt，智能預測下一個鏡頭的合理延續(xù)與場景內(nèi)容。

比如原視頻為1秒的視頻，使用提示詞「固定鏡頭，聚焦女人的面部，抬頭面無表情地看著鏡頭」來進行視頻延長。

經(jīng)過導出后的視頻，就具備了電影級別的運鏡效果。

風格化功能，則可以一鍵將視頻的風格轉(zhuǎn)化為辛普森風格、動森風格、樂高風格或者剪紙風格等，滿足多樣化創(chuàng)作需求。

比如先制作一個身穿粉色披風的蝙蝠俠騎機車的鏡頭。

一鍵就可以把他轉(zhuǎn)變?yōu)闃犯唢L格。

還可以轉(zhuǎn)變?yōu)殍蟾唢L格。

或者是剪紙風格。

還能轉(zhuǎn)化為辛普森風格。

創(chuàng)作體驗非常亦可賽艇，絲般順滑～

昆侖萬維的愿景

當最后一幀畫面渲染完成，當普通人也能用自然語言導演「大片」，當創(chuàng)意不再被技術(shù)門檻束縛。

這一刻，昆侖萬維的愿景已悄然照進現(xiàn)實：未來，無論是個體創(chuàng)作者，還是千行百業(yè)，只需輕點鼠標，就能調(diào)用AI的無窮算力，讓靈感即刻成片，讓故事全球同步。

SkyReels認為每個人都能更好地塑造自我，表達自我。

這也是昆侖萬維的使命，在All in AGI與AIGC去實現(xiàn)通用人工智能的同時，依然不忘記讓每個人更好地塑造和表現(xiàn)自我。

參考資料：

https://www.skyreels.ai/home