本期導(dǎo)讀

編者按

當(dāng)前，媒體融合進程持續(xù)深化，視聽文化發(fā)展格局重構(gòu)優(yōu)化，高品質(zhì)、智能化、沉浸式、多元化、融合化已成為影視技術(shù)發(fā)展的共性特征。智能經(jīng)濟與智能社會是經(jīng)濟與社會發(fā)展演進的基本趨勢和必然要求，伴隨大語言模型、多模態(tài)模型、深度學(xué)習(xí)、具身智能等現(xiàn)代智能科技的發(fā)展演進及廣泛應(yīng)用，人類社會加快步入智能計算時代。適應(yīng)媒體深度融合趨勢和智能計算時代特征，電影產(chǎn)業(yè)應(yīng)積極融合應(yīng)用新一代信息通信技術(shù)、現(xiàn)代智能科技和新興視聽技術(shù)，將全產(chǎn)業(yè)鏈信息化云化智能化升級作為戰(zhàn)略支撐，創(chuàng)新升級電影攝制手段和播映方式，大力推進電影科技自主創(chuàng)新和自立自強，為觀眾提供更具高品質(zhì)、科技感和沉浸感的電影作品和觀影體驗，努力構(gòu)建新型視聽文化業(yè)態(tài)和產(chǎn)業(yè)發(fā)展新賽道，推動電影全產(chǎn)業(yè)鏈全價值鏈提質(zhì)優(yōu)化升級。本期專欄特別刊登《智能計算時代深化電影科技創(chuàng)新和推進電影強國建設(shè)的思考與啟示》一文，立足進一步全面深化改革、推進中國式現(xiàn)代化國家戰(zhàn)略，提出了兼具思想高度、理論深度和創(chuàng)新思維的思考啟示與發(fā)展建議；同時遴選有意義人類控制與AI影視創(chuàng)作、基于人工智能的音樂生成、數(shù)字人技術(shù)與大模型的融合創(chuàng)新、基于色彩遷移的數(shù)字調(diào)色方法、基于AI的影視版權(quán)保護等技術(shù)論文，從行業(yè)技術(shù)整體發(fā)展升級、音視頻智能制作、模型生成和數(shù)字調(diào)色、安全與版權(quán)保護等角度論述了當(dāng)前人工智能技術(shù)在電影行業(yè)的深度應(yīng)用要點；另有縮微膠片技術(shù)、電影公益放映內(nèi)容“中央廚房”等科技論文探討了傳統(tǒng)技術(shù)與新興技術(shù)的融合發(fā)展，歡迎廣大讀者予以關(guān)注。

——本期責(zé)編

專家點評

當(dāng)前，我們正處于第三次技術(shù)革命浪潮中，人工智能應(yīng)用前景日趨清晰，人工智能應(yīng)用場景日益廣泛。特別是在電影文化領(lǐng)域，生成式人工智能更是具有大規(guī)模提高生產(chǎn)效率的潛能。在此背景下，中國電影科學(xué)技術(shù)研究所（中央宣傳部電影技術(shù)質(zhì)量檢測所）總工程師劉達率團參加了人工智能領(lǐng)域國際頂級學(xué)術(shù)會議，并開展了技術(shù)調(diào)研和考察交流，在此基礎(chǔ)上撰寫完成《智能計算時代深化電影科技創(chuàng)新和推進電影強國建設(shè)的思考與啟示》一文。文章在簡明扼要介紹歐洲高新技術(shù)格式電影制作播映發(fā)展與應(yīng)用最新成果的基礎(chǔ)上，針對電影產(chǎn)業(yè)、現(xiàn)代影院和沉浸式視聽技術(shù)的發(fā)展與應(yīng)用，提出把電影級主動發(fā)光顯示技術(shù)和沉浸式視聽技術(shù)作為重要抓手，以有效提升影院視聽品質(zhì)和觀影體驗。此外，適應(yīng)智能計算時代發(fā)展特征和生成式人工智能演進趨勢，提出了電影行業(yè)要統(tǒng)籌推進模型自主研發(fā)與行業(yè)定制改造的技術(shù)思路，同時探討了電影行業(yè)在積極探索人工智能應(yīng)用中強化人工智能安全治理和版權(quán)保護的方式。文中提出我國要加快構(gòu)建完善以“文生電影”為核心的電影智能化創(chuàng)作生產(chǎn)技術(shù)體系，發(fā)展完善以現(xiàn)代智能科技為核心支撐的電影新質(zhì)生產(chǎn)力，推進電影攝制播映向高品質(zhì)沉浸式多元化升級，構(gòu)建發(fā)展新型視聽文化業(yè)態(tài)，優(yōu)化升級視聽文化服務(wù)，為新時代新征程推進我國電影科技創(chuàng)新升級和高水平自立自強提供了富有前瞻性、建設(shè)性和可實施性的思考啟示與發(fā)展建議。

——徐進

中央廣播電視總臺技術(shù)局局長

中國電影電視技術(shù)學(xué)會理事長

過去一年，生成式人工智能（Generative AI, GenAI）在音視頻領(lǐng)域的應(yīng)用呈現(xiàn)井噴發(fā)展態(tài)勢，特別是今年2月Sora的發(fā)布，讓人們對GenAI的表現(xiàn)有了極大的信心。當(dāng)影視人致力于將這一技術(shù)應(yīng)用于專業(yè)制作領(lǐng)域時，卻發(fā)現(xiàn)還存在諸多問題，除了畫面細節(jié)少、連續(xù)性差、角色動作受限等，最大的問題是生成的內(nèi)容可控性差。如何讓GenAI生成的結(jié)果能夠為創(chuàng)作者所控制，能夠聽從人的指揮，是GenAI技術(shù)必須要解決的問題?！队幸饬x人類控制（MHC）在AI 影視創(chuàng)作中的探索與應(yīng)用》通過總結(jié)團隊AI視頻生成的經(jīng)驗，結(jié)合有意義人類控制（Meaningful Human Control, MHC）概念，對比了三種不同的自動化工具設(shè)計思路，選擇了人在回路中(Human?in?the?Loop, HITL)的設(shè)計模式來解決可控性問題，總結(jié)了目前AI影視創(chuàng)作中模型微調(diào)、提示詞生成、生成要素控制等幾種控制方法，并預(yù)期未來會采取多模態(tài)控制技術(shù)對模型進行精細控制。本文對當(dāng)前熱點的GenAI可控性問題進行了理論分析，并在實踐基礎(chǔ)上提出了切實可行的解決方案，對于推動AI技術(shù)在影視行業(yè)進一步落地應(yīng)用具有很高的參考價值。

——陳軍

研究員

北京電影學(xué)院影視技術(shù)系主任

近年來，人工智能生成內(nèi)容（AIGC）技術(shù)迅猛發(fā)展，其主流模型框架以深度神經(jīng)網(wǎng)絡(luò)為基礎(chǔ)，由早期的GAN、VAE向Transformer、Diffusion與DiT（Diffusion Transformer）發(fā)展演進。其中，大語言模型（LLM）文本生成技術(shù)日漸成熟，引領(lǐng)推動圖像與聲音生成技術(shù)的發(fā)展，并通過不斷增強可控性以滿足日益增長的個性化創(chuàng)作需求。音樂作為電影不可或缺的表達元素，順應(yīng)AIGC技術(shù)的發(fā)展與應(yīng)用，AI音樂生成正逐步成為電影配樂創(chuàng)作的革新力量，迄今已分化出符號生成與音頻生成兩種技術(shù)路線，但現(xiàn)有方法對音樂流派等控制條件關(guān)注不足，一定程度上影響了音樂生成質(zhì)量和多樣性的提升?！痘诙嗔６茸⒁饬ransformer的電影音樂生成研究》一文以編碼后的流派信息作為條件輸入從零生成符號音樂，結(jié)合音樂重復(fù)周期的結(jié)構(gòu)特點，采用多粒度注意力機制Transformer架構(gòu)捕獲音樂結(jié)構(gòu)和上下文信息，并引入流派分類判別器，輸出流派分類概率用于識別判斷，為音樂生成提供風(fēng)格控制。本方法在流派控制效果、音樂質(zhì)量結(jié)構(gòu)等方面較同類方法有較大提升，但在實用性上仍有改進空間，有待進一步研究探索。

——王萃

正高級工程師

中國電影科學(xué)技術(shù)研究所（中央宣傳部電影技術(shù)質(zhì)量檢測所）高新技術(shù)研究處副處長

本期目錄

專欄：全面深化電影科技自主創(chuàng)新

積極推進高水平科技自立自強

◎ 智能計算時代深化電影科技創(chuàng)新和推進電影強國建設(shè)的思考與啟示

—— 劉　達　王　萃　高　峰

馬鴻悅　張海悅　王　健

前沿技術(shù)

◎ 有意義人類控制（MHC）在AI影視創(chuàng)作中的探索與應(yīng)用

——王　雷

研究與開發(fā)

◎ 基于多粒度注意力Transformer的電影音樂生成研究

——熊曉鈺　謝志峰　黃登云　朱永華

◎ 基于K近鄰色彩遷移算法的數(shù)字調(diào)色方法研究

—— 楊嵐彬　姚正安

視聽科技教研

◎ 數(shù)字人技術(shù)在電影與數(shù)字內(nèi)容領(lǐng)域的創(chuàng)新應(yīng)用

——劉笑微　肖婧瀾　宋　震

◎ 全球化視域下數(shù)字媒體技術(shù)賦能中國神話IP電影創(chuàng)作

—— 國天依　孫立軍

版權(quán)保護

◎ 基于AI的影視版權(quán)保護技術(shù)研究

——龐勝楠　李建亮　馬國棟

技術(shù)應(yīng)用

◎ 電影公益放映內(nèi)容“中央廚房”設(shè)計與實現(xiàn)

——李聿為

◎ 縮微膠片技術(shù)在電影文圖檔案保存中的應(yīng)用綜述

——李　英　王　瑤

文章概要

智能計算時代深化電影科技創(chuàng)新和推進電影強國建設(shè)的思考與啟示

【摘要】 人類社會正加快步入智能計算時代，現(xiàn)代智能科技對電影產(chǎn)業(yè)的影響持續(xù)深化和不斷泛化，機器學(xué)習(xí)、深度學(xué)習(xí)、人工智能生成內(nèi)容（AIGC）、大語言模型（LLM）、多模態(tài)模型等技術(shù)正在深刻影響和重構(gòu)優(yōu)化電影全產(chǎn)業(yè)鏈全價值鏈。伴隨電影科技創(chuàng)新進入攻堅期和深水區(qū)，電影產(chǎn)業(yè)發(fā)展面臨新形勢新要求，我們要深化電影科技自主創(chuàng)新，積極推進電影行業(yè)的智能化升級，推進生成式人工智能、人工智能大模型、沉浸式視聽等技術(shù)在我國電影行業(yè)的定制設(shè)計、自主研制與科學(xué)應(yīng)用，有力支撐和服務(wù)社會主義電影強國建設(shè)。

有意義人類控制（MHC）在AI影視創(chuàng)作中的探索與應(yīng)用

【摘要】 當(dāng)前AI工具存在自動化程度過高、人類控制不足造成生成結(jié)果可控性差的問題，成為其應(yīng)用于專業(yè)影視創(chuàng)作的主要壁壘。本文通過總結(jié)自主視頻生成流程“墨池”（Inkstone）設(shè)計與應(yīng)用中的經(jīng)驗，結(jié)合人工智能（AI）與自動化領(lǐng)域的有意義人類控制（Meaningful Human Control, MHC）概念，對比了三種不同的自動化工具設(shè)計思路，分析了基于MHC的AI影視創(chuàng)作流程和工具開發(fā)具體方式，以及目前加強人類控制的若干可行技術(shù)路徑。研究表明，加強AI訓(xùn)練和生成過程中的MHC，有望在發(fā)揮AI工具優(yōu)勢的前提下，對生成內(nèi)容進行準確控制，從而使創(chuàng)作能夠體現(xiàn)藝術(shù)家意圖，適應(yīng)專業(yè)影視創(chuàng)作需求。

基于多粒度注意力Transformer的電影音樂生成研究

【摘要】 電影音樂自動生成是當(dāng)前人工智能領(lǐng)域的研究熱點之一，不少深度學(xué)習(xí)音樂生成算法可實現(xiàn)動聽的電影配樂生成，但這些算法在生成過程中往往忽略了流派等風(fēng)格控制。針對這一情況，本文提出了一種基于多粒度注意力Transformer的電影音樂生成方法，可根據(jù)目標流派從零生成音樂。本方法在引入多粒度注意力Transformer建模音樂結(jié)構(gòu)的基礎(chǔ)上，引入了對抗學(xué)習(xí)機制，通過具有流派分類損失和生成對抗損失的流派輔助分類判別器，加強模型對流派信息的控制。在所構(gòu)建的包含流派信息的符號音樂數(shù)據(jù)集上進行的主客觀實驗表明，本文方法在生成音樂質(zhì)量和流派控制方面均優(yōu)于以往方法，有助于基于目標流派自動生成電影配樂。

基于K近鄰色彩遷移算法的數(shù)字調(diào)色方法研究

【摘要】 色彩是電影中必不可少的元素，其能給予觀眾視覺沖擊力，是凸顯人物性格特征、表達電影主題、營造電影氛圍、增強電影故事感的重要手段。在數(shù)字電影時代，圖像色彩遷移技術(shù)為數(shù)字電影調(diào)色提供了更為便捷的方法。本文提出一種基于 K 近鄰（K?Nearest Neighbor, KNN）回歸模型的圖像色彩遷移算法KNN?1，同時基于目標圖像的全局統(tǒng)計量特征與局部像素特征，提出了先采用該算法后采用經(jīng)典Reinhard色彩遷移算法的KNN?2算法與先采用Reinhard算法再采用該算法的KNN?3算法。結(jié)果表明，基于K近鄰回歸模型的色彩遷移算法所得到結(jié)果圖顏色與目標圖像相似，但是整體顏色偏淺，亮度較亮。KNN?2、KNN?3算法得到的遷移結(jié)果圖的效果都較K 近鄰、Reinhard兩種算法單獨使用有明顯提升，遷移結(jié)果圖整體色彩基調(diào)與目標圖像更為相似。

數(shù)字人技術(shù)在電影與數(shù)字內(nèi)容領(lǐng)域的創(chuàng)新應(yīng)用

【摘要】 為探討數(shù)字人技術(shù)在電影、數(shù)字內(nèi)容領(lǐng)域的創(chuàng)新應(yīng)用，本文通過對數(shù)字人技術(shù)的發(fā)展及應(yīng)用，利用涵蓋多學(xué)科領(lǐng)域技術(shù)的數(shù)字人技術(shù)以及人工智能（AI）為數(shù)字人創(chuàng)作提供的解決方案，提出未來數(shù)字人技術(shù)在電影產(chǎn)業(yè)及數(shù)字內(nèi)容領(lǐng)域的發(fā)展方向。數(shù)字人技術(shù)將基于原有技術(shù)底座，逐步接軌人工智能賦能各細分技術(shù)領(lǐng)域，通過大量混合路徑嘗試和多方位技術(shù)實踐完成“數(shù)字”到“數(shù)智”的創(chuàng)新之旅。本文還對數(shù)字人與大模型的關(guān)系進行了深入研究，認為數(shù)字人的獨特性對大模型提出了創(chuàng)新性需求，未來數(shù)字人技術(shù)與大模型能力高度融合，將真正完成在虛擬世界實現(xiàn)復(fù)刻的終極目標。

全球化視域下數(shù)字媒體技術(shù)賦能中國神話IP電影創(chuàng)作

【摘要】 傳統(tǒng)文化IP創(chuàng)作是娛樂行業(yè)中的富礦與必爭之地。中國擁有悠久而深厚的燦爛文明，積累的數(shù)千年奇幻神話構(gòu)成了我國特有的東方浪漫。運用數(shù)字媒體技術(shù)與設(shè)計思維結(jié)合中國優(yōu)秀傳統(tǒng)文化進行創(chuàng)造性轉(zhuǎn)化，不僅對于樹立文化自信、提升中國文化軟實力意義重大，而且對于提升中國傳統(tǒng)文化和文化軟實力的認同度也將起到不可忽視的作用。本文將以中國神話IP作為切入點，重點闡述數(shù)字媒體及其相關(guān)衍生技術(shù)在助力中國神話IP視覺表現(xiàn)，論述中國傳統(tǒng)文化“活化”過程中技術(shù)賦能的主要特征及具體實施路徑，提出“道”“術(shù)”兼修，利用技術(shù)手段表達想象力和創(chuàng)造力，書寫具有東方魅力的“中國故事”。

基于AI的影視版權(quán)保護技術(shù)研究

【摘要】 隨著技術(shù)革新，影視版權(quán)保護正面臨前所未有的挑戰(zhàn)。盜版泛濫嚴重沖擊影視產(chǎn)業(yè)，影視侵權(quán)行為呈現(xiàn)多樣性、隱蔽性、跨境性等特征。本文基于對影視版權(quán)保護現(xiàn)狀的深入分析，探討AI技術(shù)在解決這些問題中的潛力和挑戰(zhàn)。通過引入AI技術(shù)，期望降低版權(quán)保護成本、提高版權(quán)交易透明度、加強版權(quán)保護效率和準確性。然而，AI技術(shù)的應(yīng)用也面臨數(shù)據(jù)隱私保護、技術(shù)更新等挑戰(zhàn)。本文旨在為影視版權(quán)保護提供新的思路和方法，推動影視行業(yè)健康有序發(fā)展。

電影公益放映內(nèi)容“中央廚房”設(shè)計與實現(xiàn)

【摘要】 隨著電影公益放映觀影人群對于電影內(nèi)容需求的不斷增長，原有“庫房式”內(nèi)容供給模式已不能滿足發(fā)展需要，亟待轉(zhuǎn)型升級為以“一次采集、多種應(yīng)用”為核心技術(shù)特征的電影公益放映內(nèi)容“中央廚房”式供給模式。本文從電影公益放映內(nèi)容供給需求分析入手，詳細闡釋電影公益放映內(nèi)容“中央廚房”的總體設(shè)計技術(shù)架構(gòu)及其細分技術(shù)構(gòu)成要素，著重分析了電影公益放映內(nèi)容“中央廚房”構(gòu)建過程中的能力集群架構(gòu)設(shè)計、關(guān)鍵技術(shù)難點突破等核心要點環(huán)節(jié)，提出一套模組模塊化能力集群架構(gòu)設(shè)計解決方案，經(jīng)初步試用，該方案已可實現(xiàn)為觀影群眾提供智能匹配、快速制作、精準推送等定制化、廚房式的內(nèi)容供給服務(wù)，充分發(fā)揮內(nèi)容庫核心價值，為行業(yè)內(nèi)相關(guān)單位媒體資源庫轉(zhuǎn)型升級提供參考與借鑒。

縮微膠片技術(shù)在電影文圖檔案保存中的應(yīng)用綜述

【摘要】 本文旨在研究縮微膠片技術(shù)在電影文圖檔案保存中的應(yīng)用現(xiàn)狀及面臨的挑戰(zhàn)，尤其關(guān)注人工智能在縮微技術(shù)中的應(yīng)用方法。通過對縮微膠片技術(shù)的發(fā)展歷程、電影文圖檔案的保存需求以及縮微膠片三級保護體系實踐的梳理，對技術(shù)挑戰(zhàn)、管理和操作問題、政策和標準及未來發(fā)展等關(guān)鍵問題進行探討，提供面向未來的檔案保存策略和理念建議，以促進電影檔案保存的長期穩(wěn)定性和安全性，為保護和傳承電影文化遺產(chǎn)提供科學(xué)和系統(tǒng)的支持，特別是利用AI優(yōu)化縮微技術(shù)的應(yīng)用，增強檔案智能檢索和分析能力。

文章全文詳見《現(xiàn)代電影技術(shù)》期刊

2024年第9期

主管單位：國家電影局

主辦單位：電影技術(shù)質(zhì)量檢測所

標準國際刊號：ISSN 1673-3215

國內(nèi)統(tǒng)一刊號：CN 11-5336/TB

投稿系統(tǒng)：ampt.crifst.ac.cn

官方網(wǎng)站：www.crifst.ac.cn

期刊發(fā)行：010-63245081