我認為AI繪畫的用處還沒有被徹底發掘,AI繪畫還有很大的發展空間,尤其是後續的AI影片是很大的套用方向。
我用Runway制作的影片 https://www.zhihu.com/video/1717298359570853888AI繪畫用處方向挖掘
隨著人工智能的飛速發展,AI繪畫已經不斷呈現多種套用形式,其中,動畫制作領域更是取得了顯著的成果。
以中國傳媒大學動畫與數碼藝術學院為例,近期他們利用AIGC(人工智能生成內容)技術打造的水墨動畫短片【龍門】,入圍第三屆巴西Tietê國際電影獎實驗短片單元。這無疑讓我們看到了AI繪畫未來的方向。
但是,AI繪畫和AI影片的能力,還遠遠超出我們的想象。
AI繪畫和影片的結合還可以將動畫故事在不同的媒體平台之間進行無縫銜接,為使用者提供統一且連貫的敘事體驗;為教育和培訓領域提供客製化的動畫和影片教程,幫助使用者更有效地學習和掌握知識。
AI影片平台
最近一個多月來,AI影片迎來了眾多新聞,讓人更加期待AI影片領域的革命性成果。以下我按照最近釋出的時間順序來介紹各個AI影片平台的成果
1. Runway
11月3日,Runway的Gen-2釋出了支持4K超逼真清晰度的裏程碑式更新。
我當時嘗試了下這個提示詞,可以看到動態效果還是十分震撼的:
The dark sky saw the meteor shower falling, and huge fireballs fell into the forest, burning fiercely中文轉譯為:漆黑的天空看到流星雨落下,巨大的火球落在森林裏面,火焰熊熊燃燒 我用Runway文生影片的生成內容 https://www.zhihu.com/video/1717294469622419456
11月21日,Gen-2又上線了運動筆重新整理功能。
我采用Fooocus生成圖片,然後試用了下運動筆刷改變天上的背景:
11月21日,Gen-2又上線了運動筆 https://www.zhihu.com/video/1717298439933501440Runway的網址:
2. Meta
11月16日,Meta釋出了Emu Video,據稱在使用者評估中擊敗了Gen-2、Pika等競爭對手。
Emu Video 官網影片 https://www.zhihu.com/video/1717304233781702657我也進入網站,但是沒有找到執行的界面,只截取了部份網站上展示的動畫效果
Emu Video 官網影片 https://www.zhihu.com/video/1717304264274288640Meta Emu Video 網址:
3.字節跳動
11月18日,字節跳動在釋出了PixelDance,其作品具有前所未有的動態性。
在官網中,PixelDance 給出了兩種不同的影片生成模式。
第一種是基礎模式 (Basic Mode) ,使用者只需要提供一張指導圖片+文本描述,PixelDance 就可以生成有高度一致性且有豐富動態性的影片,其中指導圖片可以是真實圖片,也可以利用現有的文生圖模型生成。
PixelDance官網影片 https://www.zhihu.com/video/1717306871801769984第二種是高級魔法模式 (Magic Mode) ,給了使用者更多發揮想象力和創造力的空間。
在這種模式下,使用者需要提供兩張指導圖片+文本描述,可以更好地生成更有難度的影片內容。網站中展示了用魔法模式做出的各種炫酷特效鏡頭。
PixelDance官網影片 https://www.zhihu.com/video/1717307370290659329PixelDance的網址:
4.Stable AI
11月21日,AIGC領域的佼佼者Stable AI,在開源了AI繪圖大模型(大名鼎鼎的Stable Diffusion)和AI文本大模型(Stable LM)之後,如今終於完善了自己的多模態集合,推出了全新的開源AI影片大模型——Stable Video Diffusion。
這一系列的創新成果,標誌著他們在人工智能領域的研究已經覆蓋了影像、文本和影片等多個模態。
Stable Video的網址:
5.PIKA
11月29日,創業公司Pika釋出了正式版1.0網頁版,引起了全網爆火。
Pika的具體效果如何呢?我參照知名博主 @數碼生命卡茲克 公眾號上的一個影片來給大家看下效果,他也是PIKA的超級合作者,全網首批獲得1.0測試資格的博主。
Prompt:Cinematic, happy laughing girl in office, Pixar style而圖生圖的效果也十分驚艷
Pika的網址是:
6.美圖秀秀
12月5日,美圖秀秀在「美圖創造力大會」上釋出自研AI視覺大模型MiracleVision(奇想智能)4.0版本,並公布了美圖WHEE的影片功能。
在釋出會上釋出了WHEE具備文生影片、圖生影片、影片運鏡和影片生影片四大功能
在文生影片方面,輸入提示詞,就能生成一段影片。
花叢中的兔子搖頭晃腦,汽車行駛揚起的塵土,戀人在森林中旋轉,每個場景的動作、光影、細節都恰到好處。圖生影片讓圖片也動起來。
從景深變化到細節動作捕捉,MiracleVision可以輕松生成。非常的自然流暢,就像專業攝影機拍出來的。在圖生影片的基礎上,MiracleVision支持影片運鏡。
提供了推、拉、搖、移等八種電影級運鏡模式,讓使用者能夠輕松模擬專業的鏡頭運動,演繹更加豐富的鏡頭語言。影片生影片方面,匯入如「男生開車兜風「的影片,再加上不同的提示詞,就能獲得卡通、科幻、像素風,羊毛氈等不同的藝術風格,非常的酷。
而在電商和廣告領域的影片運用也十分驚艷
美圖秀秀的MV4.0版本據稱將於2024年1月進入各產品套用。美圖WHEE的網址:
結語
我一直覺得AI繪畫的用處還沒有被徹底發掘,AI繪畫的進一步延展就是AI影片,影片讓圖片動起來,讓AI繪畫套用更加多元化。
現在,如此多的AI影片特色產品紛紛亮相,讓人不禁要問:AI影片是否已經迎來了爆發期,人工智能的新一輪高潮又要來臨了嗎?
我是戴歷文,一個對AI繪畫,人工智能有強烈興趣,從業多年的室內設計師!如果對我的文章內容感興趣,請幫忙關註點贊收藏,謝謝!