作者 | 阿虎

編輯 | 張潔

無人在意的角落，Runway上線了視頻界的“Kontext模型”Aleph。
簡單來說，文生圖領(lǐng)域的Kontext模型無需復(fù)雜的提示詞，就能實(shí)現(xiàn)多種編輯任務(wù)，比如風(fēng)格轉(zhuǎn)換、背景替換、角色修改等等。
Runway將這一核心能力成功復(fù)刻到了視頻生成領(lǐng)域。更重要的是，在提供成熟、便捷產(chǎn)品級的視頻編輯能力方面，Runway處于近乎獨(dú)占的市場地位。
據(jù)我們不完全統(tǒng)計(jì)，在AI視頻生成領(lǐng)域，具備視頻到視頻（Video To Video）編輯能力的公司相對稀缺。放眼全球，也僅有國內(nèi)的通義萬相和海外的Runway。這和圖生視頻、文生視頻技術(shù)相比，顯得尤為小眾。
雖然阿里通義萬相此前開源的VACE模型也支持視頻編輯能力，但其滿血版對本地硬件配置要求較高，一定程度上限制了普通用戶的使用門檻。
Runway在這一核心能力上的技術(shù)壁壘，也成為其吸引投資的重要籌碼。上周，據(jù)The Information報(bào)道，Runway正與投資者洽談新一輪融資，目標(biāo)金額約為5億美元。此輪融資前估值預(yù)計(jì)至少為50億美元，較一年前上一輪融資時(shí)的估值漲幅高達(dá)約67%。
Aleph發(fā)布后，迅速在AI創(chuàng)作圈引起熱議。X上的網(wǎng)友盛贊視頻中的人物一致性、角色替換相當(dāng)驚艷，直言“傳統(tǒng)視覺特效不存在了”。

博主“Linus Ekenstam”利用Aleph功能制作了《低俗小說》的主角跨時(shí)空共舞視頻，在X上獲得了超34萬播放。

背后的制作流程也很簡單，他先將視頻拆分成不同的小片段，通過提示詞讓AI進(jìn)行場景、鏡頭角度、背景的切換。
就算你沒有專業(yè)影視制作背景和能力，也能用AI做出以前做不到的視覺效果。比如，AI生成紐約時(shí)代廣場的延時(shí)攝影片段：

毫無手繪基礎(chǔ)的網(wǎng)友也可以將二次元角色放置在不同的季節(jié)中：

甚至可以用Runway Aleph對上世紀(jì)90年代的視頻片段進(jìn)行重制，提升畫面質(zhì)量：

自定義的風(fēng)終究還是吹到了AI視頻。創(chuàng)作者們能夠更自由地對爆款視頻內(nèi)容進(jìn)行玩梗、編輯和二創(chuàng)。
但與此同時(shí)，Reddit網(wǎng)友開了討論區(qū)吐槽“Aleph并沒有想象中穩(wěn)定，Runway太會(huì)營銷”。此前，Runway上線了Video to Video的視頻轉(zhuǎn)繪功能，就有部分網(wǎng)友認(rèn)為Aleph像上一版的“功能升級”。

Reddit截圖
Aleph生成效果到底如何？新功能究竟能創(chuàng)作出什么樣的新內(nèi)容？我們進(jìn)行了一番詳細(xì)探究，發(fā)現(xiàn)原來這一功能可以這么玩。

Aleph視頻刷屏X，“瞬息全宇宙”被玩瘋了
Aleph正式發(fā)布兩周以來，TikTok、X、小紅書等主流內(nèi)容平臺(tái)上，已經(jīng)涌現(xiàn)了不少其生成的熱門創(chuàng)作內(nèi)容。
其中，最受歡迎的的玩法當(dāng)屬對經(jīng)典電影進(jìn)行“瞬息全宇宙”風(fēng)格的二創(chuàng)——通過AI快速切換角色造型、場景元素，來達(dá)到復(fù)刻影片標(biāo)志性內(nèi)容的效果。
要知道，Runway的早期知名度很大程度上便源于其為奧斯卡獲獎(jiǎng)影片《瞬息全宇宙》提供技術(shù)支持。如今借助Aleph，普通玩家也能輕松“手搓”類似風(fēng)格的電影特效。
Runway聯(lián)合創(chuàng)始人兼CEO Cristobal Valenzuela于8月2日發(fā)布的典型案例，就是用Runway Aleph實(shí)現(xiàn)逐幀“穿越”宇宙：

還記得之前流行的爆款視頻嗎？Viggle生成的一條將小丑“變身”說唱歌手Lil Yachty的畫面一度刷屏。
X博主“Blaine Brown”將這一創(chuàng)意進(jìn)行發(fā)揮，運(yùn)用Aleph技術(shù)讓這位“說唱小丑”出現(xiàn)在海邊、落日余暉等不同場景，實(shí)現(xiàn)“隨時(shí)隨地開唱”的效果。

類似的創(chuàng)意風(fēng)潮也吹到了國內(nèi)。8月8日，小紅書博主“別罵了別罵了”制作了一條音樂MV，別出心裁地將視頻中的主角都進(jìn)行了“動(dòng)物塑”處理。該視頻在小紅書上獲贊超2500。

縱觀X平臺(tái)上流行的Aleph爆款視頻，流暢酷炫的畫面切換是主要亮點(diǎn)，這種絲滑的轉(zhuǎn)場效果本身就極具吸引力，也給視頻帶來了更多流量。
有些博主不滿足于簡單的Aleph生成效果，使用了更高階專業(yè)的玩法。他們將Aleph和其他創(chuàng)作應(yīng)用協(xié)同使用，頗有將線稿一鍵變實(shí)景的生成效果。
例如，博主“imagecreation”就結(jié)合Aleph和3D建模軟件Blender，將模型一鍵放置于電影畫面中，再利用AI進(jìn)行深度處理和優(yōu)化，提升了成片的真實(shí)感和質(zhì)感。

無獨(dú)有偶，還有博主指出，Midjourney加上Aleph，產(chǎn)出的視頻效果已經(jīng)Next Level。

從呈現(xiàn)效果來看，當(dāng)前優(yōu)質(zhì)的Aleph視頻，很大程度上得益于和其他創(chuàng)作工具（如Blender、Veo 3）協(xié)同創(chuàng)作。這種多工具集成的模式，不僅拓展了創(chuàng)意邊界，也讓最終的畫面視覺呈現(xiàn)效果變得高度可控且精細(xì)。
正因?yàn)檫@種AI視頻的創(chuàng)作潛力，Aleph模型一經(jīng)上線，Runway的C端使用也有了一定的增長。在AI新榜發(fā)布的中，Runway發(fā)布Aleph模型后，海外榜排名上升了5位，周訪問量同比增長了20%。

實(shí)測Aleph：每秒視頻7.5元，打造“老頭宇宙”？
我們也對Aleph進(jìn)行了實(shí)測，發(fā)現(xiàn)這些高端的特效大片，往往只要最簡單的語句。
在Runway官網(wǎng)Chat Mode（對話模式）下，上傳視頻并輸入提示詞，默認(rèn)調(diào)用的就是Aleph模型，直觀呈現(xiàn)了“簡單指令驅(qū)動(dòng)復(fù)雜創(chuàng)作”的能力。
“AI新榜”曾盤點(diǎn)過視頻轉(zhuǎn)繪的不同玩法。彼時(shí)，創(chuàng)作者面臨的主要困境是，修改一段視頻往往需要依靠工具預(yù)設(shè)的提示詞，不支持文字輸入和修改，所以用戶沒有辦法“用嘴”指揮AI修改不同的細(xì)節(jié)。
例如，想要環(huán)境燈光變成暖光、或是讓人物瞬間蒼老十歲，如果沒有預(yù)設(shè)樣式，就很難僅憑文字描述的形式實(shí)現(xiàn)。這種技術(shù)局限很大程度上限制了創(chuàng)意的發(fā)揮。
相比之下，Aleph的可玩性大大提高了，用戶可以通過自然語言的方式直接修改視頻。

我們在對話模式下嘗試了官方介紹的Aleph核心功能。比如，改變主角的外貌，將成年角色重新塑造成童年角色、老年角色，甚至是動(dòng)物角色。

比如，我把這個(gè)直播片段變成了AI寶寶播客的形式。

make the woman young, like a baby

將貓貓帶貨廣告變成狗狗的：

change the cat to a dog

令人驚喜的是，Aleph都成功實(shí)現(xiàn)了。如果再搭配一些有梗且適合二創(chuàng)的視頻素材，一個(gè)“低脂小視頻”就能輕松誕生了。

同樣，我們還可以改變環(huán)境或者場景，無論是涉及飄雪、水池等具體場景的元素，還是調(diào)整黃昏、黎明等時(shí)間信息，都可以借助提示詞實(shí)現(xiàn)。

添加黃昏時(shí)分的光影效果

盡管Aleph在畫面整體風(fēng)格上保持了一致性，但一旦涉及到多個(gè)提示詞，比如“角色替換成老年，并且腳下有有積水”時(shí)，Aleph無法保證在多個(gè)指令后，畫面維持穩(wěn)定性。

使用兩個(gè)提示指令時(shí)，人臉開始出現(xiàn)變形

實(shí)測下來，相比替換對象或主題功能，在調(diào)整光照、陰影以及季節(jié)天氣變化的功能上，Aleph的生成效果會(huì)更穩(wěn)定一些。

另外，Aleph目前只抓取上傳視頻的前5秒片段進(jìn)行生成。因此，如果要做強(qiáng)敘事、多人物的視頻整活，那么想要兼得人物一致性和穩(wěn)定性，就是一件有難度的事情了。

比如，《美國精神病人》的名場面，被我拆成了不同的視頻片段。其中，生成的動(dòng)作倒是挺流暢的，遵循指令也沒有什么問題，但這人物形象，仿佛一部電影中切換了好幾位“精神病人”，儼然是一個(gè)“老頭宇宙”。

這樣的生成效果，時(shí)長為短短25秒的視頻，究竟花了我多少錢？這筆賬不算不知道，一算我真破防了。

以上述電影名場面的25秒視頻為例，我總共生成了15個(gè)5秒片段，最終可用片段數(shù)量為5個(gè)，累計(jì)消耗積分1125。

按目前Runway的積分收費(fèi)制來看，1積分價(jià)值約0.2元。也就是說，制作一個(gè)25秒的AI視頻二創(chuàng)，保守估算成本至少190元（平均一秒七塊五）。如果運(yùn)氣不好，再加上“抽卡”的概率因素，成本還可能更高。

這性價(jià)比也被不少網(wǎng)友詬病，“貴”成為了Runway視頻評論區(qū)最高頻的字眼。據(jù)投資研究平臺(tái)Sacra官方數(shù)據(jù)顯示，盡管2024年Runway官網(wǎng)訪問量不到可靈的1/2，但ARR（年化經(jīng)常性收入）約9000萬美元（折合人民幣7億），是可靈的6倍。

更關(guān)鍵的是，即使定價(jià)偏高，專業(yè)視頻團(tuán)隊(duì)目前很難完全脫離對Runway的習(xí)慣性使用，就像文生圖領(lǐng)域的Midjourney一樣，他們的功能效果、特定風(fēng)格對創(chuàng)作者來說有一定的依賴性。

這種領(lǐng)先的產(chǎn)品能力，直接轉(zhuǎn)化為Runway的商業(yè)價(jià)值和用戶粘性。另一方面，相比一個(gè)動(dòng)輒上萬元的傳統(tǒng)視效鏡頭來說，AI生成的特效鏡頭確實(shí)能實(shí)現(xiàn)成本驟減。

對于創(chuàng)作者而言，技術(shù)的價(jià)值最終在于落地應(yīng)用。只有當(dāng)此類模型能力被深度集成到易用的產(chǎn)品中，讓用戶通過簡單的方式（例如“用嘴”），就能實(shí)現(xiàn)視頻“改頭換面”的效果，才能拓展個(gè)人的創(chuàng)作空間。

而這一技術(shù)的應(yīng)用前景也遠(yuǎn)不止于此。如果說生成視頻是AI視頻的第一次突破，能夠從無到有憑空創(chuàng)造內(nèi)容，那么視頻編輯能力就像解決了創(chuàng)意落地的“最后一公里”問題。

問題是，為了體驗(yàn)這種突破性的創(chuàng)作自由和效率提升，你愿意為制作AI視頻投入多少真金白銀？

「AI新榜交流群」進(jìn)群方式：添加微信“banggebangmei”并備注姓名+職業(yè)/公司+進(jìn)群，歡迎玩家們來群里交流，一起探索見證AI的進(jìn)化。

歡迎分享、點(diǎn)贊、推薦

一起研究AI