【原】剪映新AI體驗：圖片生成滿分，替代Sora為時尚早！

雷科技 2024-05-10 發(fā)布于廣東

展開全文

說起剪映，相信大部分人對它的第一印象都是視頻剪輯，憑借操作簡單、使用方便等特點，剪映深受視頻小白、剪輯愛好者，乃至視頻工作者喜愛。

今年年初，Sora文生視頻給行業(yè)帶來了不小的震撼，作為一款時刻處于潮流尖端的軟件，剪映自然不會錯過AI浪潮，將產(chǎn)品與生成式AI相融合，或許是視頻剪輯軟件的未來方向之一。

近日，剪映Dreamina官宣其品牌正式更名為中文“即夢”，同時全量上線AI作圖和AI視頻生成功能。即夢核心功能包括圖片生成、智能畫布、視頻生成以及故事創(chuàng)作，其中圖片生成和視頻生成功能為大家熟知的文字、圖片描述生成，借助AI技術(shù)降低用戶創(chuàng)作門檻；而智能畫布功能則是即夢的一大亮點，通過交互式設計，讓用戶對圖片或AI生成圖片進行二次創(chuàng)作。

而故事創(chuàng)作功能即AI生成連續(xù)性更強、更具故事性的視頻，小雷對這個功能十分期待，這意味著用戶對AI視頻的把控性會越來越強，假以時日，未必不能借助AI生成人物一致、內(nèi)容一致的長篇連載視頻。不過目前該功能還在測試中，正式上線還需等待一段時間。

最近小雷也體驗了不少AI生成產(chǎn)品，有驚喜，也有失望，即夢的生成式AI水平屬于什么水平，讓小雷帶你一探究竟。

文生圖片表現(xiàn)穩(wěn)定，

產(chǎn)品本土化需重視

即夢首頁布局比較簡潔，重點突出AI作圖和AI視頻兩大功能模塊，模塊下方羅列著其他用戶創(chuàng)作的作品，包含動漫、寫實、科幻、水墨等風格。

小雷大致看了一圈，感覺作品質(zhì)量還挺高的，并且作品生成關(guān)鍵詞絕大多數(shù)為中文，僅有少部分是英文。作為國內(nèi)廠商開發(fā)的軟件，即夢AI對中文的理解能力應該比國外產(chǎn)品更好。

圖源：即夢

圖片生成的具體步驟與市面其他AI生成產(chǎn)品一致，用戶通過輸入描述關(guān)鍵詞來生成AI圖片。為了讓AI更好理解關(guān)鍵詞，即夢支持導入?yún)⒖紙D以及選擇生圖模型，生成出符合用戶需求的圖片。

圖片質(zhì)量和尺寸方面，用戶可以決定圖片精細度（1-50范圍），數(shù)值越大生成的效果質(zhì)量越好，耗時會更久。同時，即夢支持7種尺寸的圖片比例，方便用戶使用AI圖片。

圖源：即夢

小雷參考其他作品的關(guān)鍵詞，以關(guān)鍵詞“紅色長發(fā)女人肖像，黑色長裙，寫真風格，精致的審美情感，逼真的圖像”生成了一張寫真風格的圖片。不知道是網(wǎng)絡問題還是精細度拉的太高，第一次生成就失敗了，第二次生成過程還算順利，耗時大約30s就出現(xiàn)了4張不同的AI圖片。

圖源：即夢

大家覺得四張AI圖片的質(zhì)量怎么樣？小雷個人挺滿意的，人像面部、身體特征清晰。在小雷這個外行人眼中，樣張質(zhì)量已經(jīng)和雜志相差無幾了，唯獨歐美風模特讓人有點摸不著頭腦。小雷輸入的關(guān)鍵詞只提及了性別，但AI似乎默認了人種。

后續(xù)小雷在不改變其他關(guān)鍵詞的情況下，新增了“亞洲”定語，AI也能順利識別。面向國內(nèi)市場，即夢AI大模型或許要在優(yōu)先度方面調(diào)整，才能更符合國內(nèi)用戶的使用習慣。

圖源：即夢

除了人像圖片外，即夢其他風格的生成圖片也有不俗表現(xiàn)。從仿真人的攝影寫真，到風格迥異的手繪插畫，小雷生成了不同風格的圖片，AI表現(xiàn)比較穩(wěn)定，基本能精準生成，但在手指細節(jié)等生成式AI通病上還是偶爾會出現(xiàn)瑕疵。

圖源：即夢

智能畫布：

無限擴圖是個好東西

智能畫布是即夢AI的一大特色功能，支持擴圖、局部重繪、消除摳圖、高清放大等功能。該功能不僅可以對普通圖片進行編輯和AI重繪，還能二次創(chuàng)作用戶生成的AI圖片，修改區(qū)域和風格由用戶自行決定。

圖源：Pexels

小雷首先對普通圖片（地球）進行了圖生圖AI重繪，關(guān)鍵詞為“魔幻地球”。原本普通的地球圖片經(jīng)過AI重繪后，變得科幻感滿滿，新增的光影和色彩效果讓圖片變得更立體。不過因為原圖布局的原因，導致地球四周環(huán)境不夠明顯，這時候就需要擴圖功能了。

圖源：即夢

經(jīng)測試，小雷發(fā)現(xiàn)即夢AI的擴圖功能理論上是無上限的，也就是用戶可以一直擴圖下去。擴圖時用戶可以輸入本次擴圖的關(guān)鍵詞，如果關(guān)鍵詞為空，那么AI將按照原圖的AI風格擴圖。

小雷還是得提醒下想要體驗智能畫布的朋友，雖然智能畫布的生成效果和效率確實不錯，但局部重繪功能還是存在不小的缺陷，以普通地球圖片為例，如果你手動選擇了重繪范圍，那么很可能會獲得各種奇葩風格的地球照片，小雷就親眼見證地球變成了一鍋餃子。

小雷猜測這可能是局部重繪沒有輸入關(guān)鍵詞選項的緣故，AI會自行判斷重繪風格，并且判斷正確率不高，或許即夢后續(xù)會繼續(xù)優(yōu)化該功能，給用戶更好的使用體驗。

圖源：即夢

AI視頻：

效果不及預期

接下來是即夢AI的重頭戲——AI視頻生成，與AI圖片相比，AI視頻興起的時間較短，并且有Sora這樣的前輩作為參考，也能更好的觀察即夢的視頻生成能力。

與圖片生成一樣，視頻生成也有文本生視頻和圖片生視頻兩種模式。小雷先體驗了文本生視頻模式，關(guān)鍵詞為“一個中國古風小女孩，在長城上跑步跳躍，表情開心，笑容甜美”。值得一提的是，非會員用戶目前只能免費生成3s的視頻，想增加時長就只能充值了。

視頻一出來，小雷是又驚又喜。喜的是關(guān)鍵詞幾乎都識別到了，驚的則是視頻質(zhì)量差的有點離譜，尤其是小女孩的表情，小雷差點以為自己點開了B站鬼畜，五官移位就不提了，這表情多少有些猙獰了。而關(guān)鍵詞“跑步跳躍”也升級成了御空飛行，說到底還是AI沒能徹底理解關(guān)鍵詞的邏輯。

圖源：即夢

小雷發(fā)現(xiàn)首頁展示的精美作品，大多是采取圖片生視頻模式，并且許多用戶只是直接上傳圖片沒有添加關(guān)鍵詞，但還是能實現(xiàn)不錯的效果。為此，小雷繼續(xù)嘗試圖片生成視頻，這次我選取了剛剛AI生成的圖片作為藍圖。

用圖片生視頻模式，相當于給AI框定了方向，因此視頻質(zhì)量沒有出現(xiàn)大的紕漏，但還是同樣的問題，遠處兩個人物的動作不太符合物理定律，看上去十分違和。可能是沒有太多動作的緣故，近處人物和背景的情況相對好很多。

圖源：即夢

總的來說，兩種生成模式視頻的質(zhì)量還不錯，大家看到的效果是經(jīng)過視頻轉(zhuǎn)動圖的壓縮，視頻質(zhì)量有一定影響。其次，文本生視頻比圖片生視頻的效果差太多了，人物與背景透露著不真實感。同樣的，圖片生視頻也存在許多問題，人物動作以及環(huán)境可以改進的地方還有很多。

目前受限于3s時長，小雷無法窺見即夢AI視頻的全貌。按照目前的體驗，小雷認為與其說是視頻，倒不如說是動圖。當然，這是針對非會員，會員解鎖視頻時長后能取得什么樣的成果，還需等待其他用戶的分享。

寫在最后

體驗AI圖片生成有多驚喜，體驗AI視頻生成就有多失望，這是小雷一通體驗下來的真實感受。起初，風格各異但又能保持穩(wěn)定高質(zhì)量的生成圖片，讓我產(chǎn)生了國產(chǎn)生成式AI崛起的感覺，但很快生成視頻的各種情況又讓我打消了這個念頭。

其實這也能理解，畢竟視頻生成興起的時間并不長，即夢又是剛剛推出的新產(chǎn)品，用戶需要給多點耐心支持國產(chǎn)大模型發(fā)展，畢竟最讓人感興趣的故事創(chuàng)作功能還沒正式上線。現(xiàn)階段，即夢視頻生成還存在很大的改進空間，其中3s時長的限制或許是即夢在C端傳播的最大問題。

不難理解品牌需要創(chuàng)造盈利點，但3s充其量只是個動圖時長，如果能稍微放寬點時長限制，用戶也能更好的感受即夢AI帶來的創(chuàng)造力。

目前即夢圖片生成功能限時免費，視頻生成功能每個視頻消耗12積分，新用戶每天領取60積分，也就是支持生成5個視頻，感興趣的朋友可以自行體驗。

End