口型，口型，還是口型！

之前AI視頻的對(duì)口型技術(shù)，最大的瓶頸就是多人場(chǎng)景，你很難讓兩個(gè)或三個(gè)人同時(shí)出現(xiàn)在一個(gè)畫面里，并且各自的嘴型都能跟上自己的臺(tái)詞。

現(xiàn)在，Seko 帶來(lái)了商湯新鮮升級(jí)的對(duì)口型SekoTalk，

我直接做了一段蒙娜麗莎和帶珍珠耳環(huán)的少女和大衛(wèi)雕像坐在一起吐槽的長(zhǎng)鏡頭畫面，

三個(gè)人物可以互相交談，口型與配音可以很精準(zhǔn)的同步，人物動(dòng)作也比較自然，還有眼神互動(dòng)，整體完成度很高。

seko還同時(shí)上線了畫布修改功能，我也玩了一通完成了一段這樣的絲滑走路變裝秀，

畫面構(gòu)圖不發(fā)生變化，同時(shí)還能保持人物的高度一致。放在以前，我要一張張圖做局部重繪，然后導(dǎo)給其他的工具再完成視頻生成，最后再放到剪輯工具里拼起來(lái)，才能完成這樣一段。

現(xiàn)在放在Seko里，就是一個(gè)頁(yè)面就能搞定的事。

所以我們要如何把這些功能融入到一個(gè)完整的影片制作中捏。

之前測(cè)評(píng)Seko的話，它最突出的能力就是可以一站式完成視頻的全流程創(chuàng)作，

在seko里，我可以完成腳本文案的創(chuàng)意，還能直接生成高一致性的分鏡圖片和視頻，完成配樂(lè)和旁白配音，甚至還能對(duì)口型、增刪鏡頭、剪輯鏡頭時(shí)長(zhǎng)等等等等操作，靈活性非常高。

seko升級(jí)了這兩個(gè)能力之后，我們又能做到什么呢？

就比方之前做一個(gè)視頻，只能做到一個(gè)畫面中只有一個(gè)人物在說(shuō)話，如果畫面中有兩個(gè)人物的話，不說(shuō)話的人物要么就是傻愣著，要么就是能做出一些微小的反應(yīng)，要么就是兩個(gè)人一起嘴動(dòng)，簡(jiǎn)單來(lái)說(shuō)就是沒有辦法做到多人對(duì)話回應(yīng)，我直接和現(xiàn)在的Seko做個(gè)對(duì)比，

測(cè)下來(lái)從人臉、動(dòng)作、口型同步上看，Seko做的效果又好了不少。

我拿一個(gè)短片舉栗，有在追更喜人的朋友嗎？

我做了一段技能五子棋的雙人唱跳視頻，上傳制作好的卡通版人物主體，并讓seko生成一個(gè)包含五子棋元素的無(wú)厘頭唱跳視頻創(chuàng)意，

操作步驟基本一樣，調(diào)整好整個(gè)視頻的創(chuàng)意腳本后就可以直接進(jìn)入到分鏡的部分進(jìn)行刪減調(diào)整，留下自己想要的畫面，在分鏡這里就可以用到我們剛剛提到的，Seko新上的畫布編輯功能，對(duì)單張圖片進(jìn)行針對(duì)性修改，

比如說(shuō)這圖中里多出來(lái)的兩個(gè)三角形我不喜歡，我就可以使用消除功能在保持原圖不變的情況下刪掉不想要的元素，

或者也可以給畫面中自然的融入新元素，

也可以直接用局部重繪功能針對(duì)性修改圖中的內(nèi)容，

如果想保持一致性的情況下對(duì)整張圖進(jìn)行修改，還還還可以直接點(diǎn)擊分鏡然后在直接對(duì)話提需求，改個(gè)場(chǎng)景、改個(gè)天氣、改個(gè)圖片風(fēng)格，都是可以的。

調(diào)整好所有分鏡后，就可以開始對(duì)口型了，這里可以一個(gè)鏡頭一個(gè)鏡頭來(lái)操作，

Seko會(huì)自動(dòng)分析圖片中有幾個(gè)人物，敲重點(diǎn)了，

這時(shí)候想用自己的音頻的話，需要分離好每個(gè)人說(shuō)話的音頻，然后選擇對(duì)應(yīng)的角色、上傳音頻、可以適當(dāng)填寫畫面描述之后再添加音頻，

也可以直接用Seko內(nèi)置的音色，調(diào)整音色情緒，

添加好音頻后會(huì)在左側(cè)直接看到音頻軌道，我們可以控制人物在第幾秒說(shuō)這段話，音頻匹配好后，點(diǎn)擊生成視頻就可以了。

照葫蘆畫瓢，把每個(gè)分鏡的配音都調(diào)整好，我們就可以得到一個(gè)完整的技能五子棋了！三二一，傳統(tǒng)的五子棋，

乍一看這口型對(duì)的還挺準(zhǔn)，細(xì)一看人物一致性保持更好，舞蹈動(dòng)作也夠抽象的，感覺我已經(jīng)能看到第一（劃掉）吐槽役張呈了。

同樣的方法我們還可以出做超長(zhǎng)鏡頭的貓咪脫口秀片段，

也可以做一個(gè)汽水產(chǎn)品的雙人廣告，馬上給我上架棒棒小賣部（不要再玩內(nèi)部梗了）

我現(xiàn)在就期待音頻能支持站內(nèi)剪輯、人物動(dòng)作幅度可控性能再提升一個(gè)臺(tái)階，這樣就無(wú)敵了?。煽啃〉老?，馬上就要上線了?。?/p>

其實(shí)SEKO的每次升級(jí)，除了模型能力的提升外，給我?guī)?lái)最大的意義就倆字：省事！

以前做個(gè)多人的、復(fù)雜的視頻，從頭到尾得用好幾個(gè)工具，

素材一多時(shí)間一長(zhǎng)各種軟件間傳來(lái)傳去就懵了，

現(xiàn)在，Seko把多人對(duì)口型給你了，單鏡頭畫布編輯也給了，視頻編輯、多種圖片模型視頻模型自由選擇也都掏出來(lái)了。

AI界的萬(wàn)能鑰匙是吧，

什么都配全后，腦洞，就是我們唯一需要的了。

AI創(chuàng)作的邊界又又又又一次被擴(kuò)大了，

卷點(diǎn)好啊。

@ 作者 / 阿湯 & 卡爾

最后，感謝你看到這里如果喜歡這篇文章，不妨順手給我們點(diǎn)贊｜在看｜轉(zhuǎn)發(fā)｜評(píng)論

如果想要第一時(shí)間收到推送，不妨給我個(gè)星標(biāo)

更多的內(nèi)容正在不斷填坑中……