本期導(dǎo)讀

編者按

2025年初，國產(chǎn)AI大模型DeepSeek在世界人工智能領(lǐng)域產(chǎn)生了極其重要和十分深遠的影響，其綜合運用模型架構(gòu)創(chuàng)新、算法創(chuàng)新、算力優(yōu)化和開源開放，產(chǎn)生了卓越的性能表現(xiàn)和顯著的成本降低。與此同時，國產(chǎn)動畫電影《哪吒之魔童鬧?！吩趦?nèi)容創(chuàng)作、制作生產(chǎn)、技術(shù)品質(zhì)、視聽體驗、票房收入等方面的卓越表現(xiàn)實現(xiàn)了中國電影的諸多重大歷史性突破。上述智能科技與電影文化領(lǐng)域的兩大事件，時間相近，不謀而合，意義深遠，相輔相成，必將引領(lǐng)現(xiàn)代智能科技與中華優(yōu)秀文化在自主創(chuàng)新、自立自信、融合并進、自強不息的道路上不斷取得新的重大進展和實現(xiàn)新的重大突破。DeepSeek和《哪吒之魔童鬧海》所展現(xiàn)出的中國自主科技的強大創(chuàng)新能力和中國電影文化的巨大發(fā)展?jié)摿?，將持續(xù)激勵中國電影人以科技自立自強和文化自信自強為目標，不斷創(chuàng)作生產(chǎn)出更多兼具卓越科技品質(zhì)、優(yōu)秀創(chuàng)作水準和深厚文化底蘊的精品力作。本期特設(shè)聲音采集與控制專題，組約了高階聲場記錄與重放、配音表演驅(qū)動角色塑造、演員提示通訊系統(tǒng)搭建等文章，探討用聲音營造沉浸式體驗和引發(fā)情感共鳴的技術(shù)路徑，同時遴選攝影機定位追蹤、VR電影空間映射、數(shù)字資產(chǎn)3D建模、數(shù)字人三維面部動畫生成、視效工程發(fā)展、影視內(nèi)容標識化管理等論文，歡迎廣大讀者關(guān)注。

——本期責編

專家點評

在習近平文化思想和黨的二十大及系列全會精神的科學指引與系統(tǒng)部署下，電影領(lǐng)域改革發(fā)展持續(xù)深化，電影科技能力顯著增強，電影產(chǎn)業(yè)加快提質(zhì)升級。伴隨觀眾對高品質(zhì)沉浸式視聽體驗的需求日益增長，高新技術(shù)格式電影攝制播映技術(shù)與工藝流程不斷優(yōu)化，虛擬現(xiàn)實（VR）、增強現(xiàn)實（AR）、擴展現(xiàn)實（XR）等技術(shù)的發(fā)展與應(yīng)用為電影產(chǎn)業(yè)注入了新活力與新動能，并成為推動電影產(chǎn)業(yè)創(chuàng)新升級的重要力量。高階高保真立體聲（HOA）作為一種先進的沉浸式音頻錄制與還音技術(shù)，其核心優(yōu)勢在于能夠精準捕捉和重現(xiàn)三維空間中的聲場信息，通過球面?zhèn)髀暺麝嚵胁杉晥鲂盘?，并靈活適配多種還音環(huán)境。HOA技術(shù)能夠提供更為豐富的空間聲學線索，顯著提升音頻沉浸感，未來其與人工智能（AI）技術(shù)相結(jié)合，勢必進一步優(yōu)化和提高電影音頻制作的效率和質(zhì)量，推動聲場記錄與重放技術(shù)的智能化演進?！痘谇螓溈孙L陣列的高階聲場記錄與重放在電影音頻制作中的應(yīng)用》作為本期“聲音采集與控制”專題的開篇之作，聚焦三維聲場采集與雙耳重放環(huán)節(jié)，針對傳統(tǒng)電影音頻采集技術(shù)在三維聲場捕捉中的局限性，提出基于球麥克風陣列的HOA分析采集技術(shù)，并采用球諧域結(jié)合虛擬揚聲器的方式將HOA信號準確還原為雙耳聲。通過優(yōu)化球麥克風陣列設(shè)計和頭相關(guān)傳遞函數(shù)（HRTF）合成算法，減少采集過程中的低頻噪聲干擾和高頻空間混疊現(xiàn)象，提升音頻采集與重放的質(zhì)量與精確度，為HOA技術(shù)在電影音頻制作與重放領(lǐng)域的應(yīng)用提供了技術(shù)支撐與應(yīng)用指南，對于推動電影沉浸式音頻制作與還音技術(shù)的發(fā)展具有較高的理論指導(dǎo)意義和實踐應(yīng)用價值。

——徐濤

正高級工程師

中國電影科學技術(shù)研究所（中央宣傳部電影技術(shù)質(zhì)量檢測所）副所長

當前，虛擬攝制是影視制作領(lǐng)域的熱點研究方向之一，其后期前置化、所見即所得、虛實融合的制作模式顯著提升了影視制作的靈活性與效率。此外，虛擬攝制的應(yīng)用亦展現(xiàn)出跨領(lǐng)域的拓展趨勢，在短視頻制作、網(wǎng)絡(luò)直播、游戲制作、廣告拍攝、動漫、沉浸式文旅體驗等領(lǐng)域也獲得了大量推廣應(yīng)用，展現(xiàn)出巨大發(fā)展?jié)摿?。虛擬攝制的技術(shù)組成可大致分為虛擬場景渲染、攝影機定位追蹤、燈光控制、人機交互、LED顯示等，而攝影機定位追蹤技術(shù)一直是電影虛擬攝制的關(guān)鍵，其技術(shù)水平的高低，在很大程度上決定了虛擬攝制整體質(zhì)量的優(yōu)劣。從十余年前基于綠幕的虛擬攝影開始，到今天的基于LED背景墻的虛擬攝制，電影人不斷探索實踐新方法和新工藝，改進和優(yōu)化這一技術(shù)，利用最新科技成果，實現(xiàn)更為精準和穩(wěn)定的攝影機內(nèi)外參數(shù)追蹤。《虛擬攝制中鏡頭和位姿元數(shù)據(jù)聚合技術(shù)應(yīng)用研究》一文針對虛擬攝制中攝影機定位追蹤相關(guān)設(shè)備穩(wěn)定性差、易被干擾等問題，提出了一項創(chuàng)新的聚合技術(shù)方案，為虛擬攝制現(xiàn)場創(chuàng)制的靈活性與穩(wěn)定性提供了可靠保障。文章詳細論述了攝影機內(nèi)外參聚合的實現(xiàn)流程，并進行了相關(guān)實驗與測試，實驗結(jié)果也直觀地展示了該方案在數(shù)據(jù)穩(wěn)定性方面的顯著提升，展現(xiàn)了其未來的實用價值與創(chuàng)新性。

——陳軍

研究員

北京電影學院影視技術(shù)系主任

人工智能（AI）的第三次浪潮正以空間智能（Spatial Intelligence）為核心掀起新一輪變革?？臻g智能即AI在三維空間中感知、推理和行動的能力，其核心在于賦予機器理解物理世界的深度、距離、方位及動態(tài)關(guān)系，從而在復(fù)雜環(huán)境中實現(xiàn)自主決策。VR電影作為空間智能技術(shù)的重要應(yīng)用場景，其借助計算機系統(tǒng)及傳感器技術(shù)生成三維環(huán)境，創(chuàng)造出一種嶄新的人機交互方式，模擬人的視覺、聽覺、觸覺等感官功能，使觀眾沉浸在虛擬境界中。VR電影的全景式立體成像、環(huán)繞音響和人景交互，徹底沖破了傳統(tǒng)影院的維度，使觀眾在視覺和聽覺上完全浸潤于影片內(nèi)容，為觀眾帶來嶄新的沉浸式交互式觀影體驗。隨著空間智能技術(shù)的發(fā)展與應(yīng)用，AI技術(shù)與VR技術(shù)的耦合程度越來越深，未來VR電影將通過復(fù)雜運動模擬、多模態(tài)數(shù)據(jù)融合和智能體動態(tài)敘事等技術(shù)的綜合應(yīng)用，推動其走向更加交互、更加沉浸和更富個性化的影像體驗，并持續(xù)推動敘事方式和交互模式的革新?！犊臻g智能技術(shù)在VR電影空間映射中的應(yīng)用探索》一文針對VR電影創(chuàng)制中面臨的如何在虛擬空間中實現(xiàn)對現(xiàn)實空間的動態(tài)映射這一困境，基于空間定位、空間認知和空間涌現(xiàn)的邏輯層級，從實時追蹤、多模態(tài)映射、三維生成和空間推理等維度，構(gòu)建VR電影的空間智能技術(shù)路徑，為VR電影中虛擬空間與現(xiàn)實空間的復(fù)雜交互問題提供了解決思路，對相關(guān)研究人員具有較高的參考價值。

——潘志庚

教授

南京信息工程大學人工智能學院院長

本期目錄

聲音采集與控制專題

◎ 基于球麥克風陣列的高階聲場記錄與重放在電影音頻制作 中的應(yīng)用

—— 曲天書　吳璽宏

◎ 以配音表演驅(qū)動角色設(shè)計：動畫電影《哪吒之魔童鬧?！方巧茉斓乃囆g(shù)真實與制作流程

—— 劉　麗

◎ 電影同期錄音中演員提示通訊系統(tǒng)的搭建與應(yīng)用研究

—— 張金巖　王　玨

研究與開發(fā)

◎ 虛擬攝制中鏡頭和位姿元數(shù)據(jù)聚合技術(shù)應(yīng)用研究

—— 解　沛　周令非　王木旺

技術(shù)應(yīng)用

◎ 空間智能技術(shù)在VR電影空間映射中的應(yīng)用探索

—— 陳焱松　蔡若彤

◎ 人工智能技術(shù)在數(shù)字資產(chǎn)3D建模和場景生成領(lǐng)域的應(yīng)用研究

—— 方捷新

視聽科技教研

◎ 基于Omniverse Audio2Face的語音驅(qū)動數(shù)字人三維面部動畫生成技術(shù)應(yīng)用研究

—— 蘇文吉　魯夢河

產(chǎn)業(yè)發(fā)展

◎ 人工智能應(yīng)用于科幻電影視效工程的系統(tǒng)研究

—— 黃鳴奮　張艾弓　劉曉春

◎ 基于數(shù)字水印技術(shù)的人工智能生成影視內(nèi)容標識化管理研究

—— 嚴　馳

文章概要

基于球麥克風陣列的高階聲場記錄與重放在電影音頻制作中的應(yīng)用

【摘要】 隨著電影對極致沉浸式視聽體驗的發(fā)展需求，沉浸式聲場記錄和重放技術(shù)日顯重要。本文圍繞電影音頻制作技術(shù)中的聲場記錄和重放問題，介紹了基于球麥克風陣列的高階高保真立體聲（Higher Order Ambisonics, HOA）分析技術(shù)，并針對球麥克風陣列球諧分解中的低頻噪聲與高頻混疊問題，以及雙耳重放技術(shù)中的階數(shù)受限問題，給出了相應(yīng)解決方案，研究表明所提方案可為觀眾提供更真實、更具沉浸感的聲場重放效果，提升了觀影體驗，在電影音頻制作中具有廣闊的應(yīng)用前景。

以配音表演驅(qū)動角色設(shè)計：動畫電影《哪吒之魔童鬧海》角色塑造的藝術(shù)真實與制作流程

【摘要】 近年來，國產(chǎn)動畫電影在內(nèi)容創(chuàng)作、制作技術(shù)以及工業(yè)化流程等方面取得了顯著進步，逐漸崛起為全球動畫電影產(chǎn)業(yè)的重要力量。為深入探討配音表演在動畫電影角色塑造中的作用機制與工作流程，為國產(chǎn)動畫電影的進一步發(fā)展提供有益借鑒與參考，本文結(jié)合媒體對國產(chǎn)動畫電影《哪吒之魔童鬧海》導(dǎo)演、配音導(dǎo)演和配音演員的采訪內(nèi)容，系統(tǒng)分析了該片如何以配音表演驅(qū)動角色塑造，詳細剖析了其背后的藝術(shù)創(chuàng)作理念與制作流程。研究表明，《哪吒之魔童鬧?！凡捎谩跋扰湟艉髣赢嫛绷鞒蹋瑢⑴湟舡h(huán)節(jié)從傳統(tǒng)后期制作流程前置為角色塑造的核心，有力推動了國產(chǎn)動畫電影在角色制作與配音表演方面的革新，重構(gòu)了角色生命力的生成邏輯，為中國動畫電影工業(yè)化進程樹立了新的標桿。

電影同期錄音中演員提示通訊系統(tǒng)的搭建與應(yīng)用研究

【摘要】 為避免給演員的提示聲、音樂聲等聲音在電影拍攝時對同期錄音的干擾，解決特殊拍攝場景下的同期錄音和通訊問題，本文分析了不同拍攝場景下演員對提示信號的需求，結(jié)合相關(guān)實際案例提出用于語音或音樂提示，現(xiàn)場音樂還放與監(jiān)聽、返聽，特殊場景錄音和通訊三種拍攝現(xiàn)場演員提示通訊系統(tǒng)搭建方案，并進行了應(yīng)用分析。研究表明，設(shè)計科學合理的演員提示通訊系統(tǒng)能顯著優(yōu)化同期錄音工藝，減少現(xiàn)場干擾，促進演員表演的自然發(fā)揮，為獲得優(yōu)質(zhì)同期聲奠定良好基礎(chǔ)。

虛擬攝制中鏡頭和位姿元數(shù)據(jù)聚合技術(shù)應(yīng)用研究

【摘要】 近年來，影視制作技術(shù)出現(xiàn)巨大的變革與更新，虛擬攝制技術(shù)被廣泛應(yīng)用于電影制作?；谀壳坝耙曁摂M攝制中存在無法有效整合鏡頭與位姿元數(shù)據(jù)，相關(guān)設(shè)備穩(wěn)定性差、易被干擾等問題，本文通過對現(xiàn)有攝影機追蹤與跟焦設(shè)備進行分析，針對不同場景，提出一種虛擬攝制中鏡頭和位姿元數(shù)據(jù)聚合技術(shù)方案，搭建相關(guān)系統(tǒng)并進行了實驗與測試。結(jié)果表明，本文提出的鏡頭和位姿元數(shù)據(jù)聚合技術(shù)能夠有效聚合輸出穩(wěn)定且平滑的鏡頭和位姿元數(shù)據(jù)，為虛擬攝制現(xiàn)場創(chuàng)制的靈活性與穩(wěn)定性提供可靠保障。

空間智能技術(shù)在VR電影空間映射中的應(yīng)用探索

【摘要】 伴隨人工智能技術(shù)的持續(xù)發(fā)展迭代，以空間智能為核心的技術(shù)集群逐漸改變虛擬現(xiàn)實（VR）電影中對于現(xiàn)實空間和虛擬空間的雙重認知方式，使VR電影創(chuàng)制進入全新階段。為解決VR電影創(chuàng)制面臨的運動映射、身體映射、動態(tài)交互映射等空間困境，本文通過對空間智能技術(shù)與VR電影間的關(guān)系梳理，基于空間定位技術(shù)、空間認知技術(shù)與空間涌現(xiàn)技術(shù)的邏輯層級，從實時追蹤技術(shù)、多模態(tài)映射技術(shù)、三維生成技術(shù)、空間推理技術(shù)等維度，初步構(gòu)建VR電影的空間智能技術(shù)路徑，一定程度上解決了VR電影中虛擬空間與現(xiàn)實空間的復(fù)雜交互問題，有助于持續(xù)推動VR電影創(chuàng)制技術(shù)在空間映射中的革新，構(gòu)筑一個更富沉浸性的虛擬空間環(huán)境。

人工智能技術(shù)在數(shù)字資產(chǎn)3D建模和場景生成領(lǐng)域的應(yīng)用研究

【摘要】 近年來，在人工智能（AI）技術(shù)的發(fā)展推動下，3D建模、數(shù)字資產(chǎn)構(gòu)建、地形編輯、場景搭建等工作已積極引入人工智能生成內(nèi)容（AIGC）工具。本文概述了3D建模和場景生成解決方案，深入研究并對比了AIGC技術(shù)在3D建模領(lǐng)域的應(yīng)用，簡述了相關(guān)領(lǐng)域開放大模型推出情況，提出了數(shù)字資產(chǎn)3D建模和場景生成未來的發(fā)展方向。研究表明，當前數(shù)字資產(chǎn)3D建模和場景生成已呈現(xiàn)智能化發(fā)展趨勢，隨著相關(guān)技術(shù)和產(chǎn)品演進升級，AIGC 3D生成大模型將進一步服務(wù)3D建模和場景生成相關(guān)工作，同時相應(yīng)數(shù)字資產(chǎn)庫構(gòu)建的持續(xù)完善，將幫助影視行業(yè)利用行業(yè)整體優(yōu)勢，解決高質(zhì)量3D建模和場景生成需求瓶頸。

基于Omniverse Audio2Face的語音驅(qū)動數(shù)字人三維面部動畫生成技術(shù)應(yīng)用研究

【摘要】 為提升數(shù)字人三維面部動畫的真實感與數(shù)字人交互體驗，并探索傳統(tǒng)高成本面部捕捉技術(shù)的替代方案，本文對語音驅(qū)動數(shù)字人面部動畫方法展開研究，基于Omniverse Audio2Face工具，通過語音輸入實現(xiàn)對虛幻引擎MetaHuman數(shù)字人面部動畫的驅(qū)動流程。實驗評估表明，該方法在精確性和效率上具有一定優(yōu)勢。本文總結(jié)了相關(guān)使用優(yōu)化建議，以期為數(shù)字人面部動畫技術(shù)的應(yīng)用與發(fā)展提供參考。

人工智能應(yīng)用于科幻電影視效工程的系統(tǒng)研究

【摘要】 為開展視效工程科學理論研究，本文運用傳播九要素原理，將科幻電影視效工程視為由社會層面、產(chǎn)品層面、運營層面構(gòu)成的系統(tǒng)，考察當下人工智能技術(shù)為繁榮科幻電影發(fā)揮的作用，提出人工智能可從九個方面助力視效工程發(fā)展。研究表明，科幻電影憑借視效工程突破現(xiàn)實限制，視效工程則通過技術(shù)創(chuàng)新推動電影行業(yè)變革，二者相輔相成，共同拓展藝術(shù)邊界，創(chuàng)造震撼體驗，并有望在人工智能助力下實現(xiàn)更高效的創(chuàng)作與更個性化的內(nèi)容呈現(xiàn)。

基于數(shù)字水印技術(shù)的人工智能生成影視內(nèi)容標識化管理研究

【摘要】生成式人工智能技術(shù)正深刻改變?nèi)蛴耙曅袠I(yè)現(xiàn)有格局，其生成的內(nèi)容在理論和實踐層面存在爭議。本文從人工智能生成影視內(nèi)容的版權(quán)風險切入，通過對人工智能生成內(nèi)容（AIGC）標識化管理源起、意義、發(fā)展現(xiàn)狀及相關(guān)規(guī)則的梳理，提出借助數(shù)字水印技術(shù)實現(xiàn)人工智能生成影視內(nèi)容的標識化管理，并在此基礎(chǔ)上進一步探討了今后加強AIGC標識化管理的可行方案。

文章全文詳見《現(xiàn)代電影技術(shù)》期刊

2025年第2期