剛剛過去的除夕夜,各路機器人爭奇鬥豔,從仿生陪伴到打拳舞劍,從洗衣服講笑話到盤核桃遞水瓶,中央廣播電視總台馬年春晚讓人類看到了具身智能的無限可能,也讓全球觀眾看到了百家爭鳴的中國科創產業。多年來,當春晚逐漸成為前沿科技與藝術美學融合創新的平台,越來越多的人已經開始期待從這方舞台看到更多智與韻的完美結合。
細數起來,「活人感」十足的機器人只是馬年春晚眾多「科技狠活」的其中之一。中央廣播電視總台編務會議成員姜文波表示,近年來總台以「思想+藝術+技術」為主線,牢牢把握科技賦能文化傳播的時代機遇,春晚的視音頻質量和全媒體融合傳播不斷提升,已成為媒體科技大舞台。
今年,總台除了在超高清、菁彩聲等傳統優勢技術上繼續開拓創新,在節目創作方面更是練成了屬於自己的「獨家秘笈」——人工智能、跨屏聯動、虛實融合等被巧妙地搬進演播廳、融入節目裏。總台技術局局長劉朝暉表示,利用AI大模型和雲計算等技術,馬年春晚在訓練中融入大量中國風語料,將國風美學、真人實景和AR、XR充分融合,既展現中國AI的快速發展,又為觀眾打造出一台科技感十足的視聽盛宴。
人工智能化意成真
當人工智能的每一次迭代都會成為全社會熱議的話題,總台春晚自然要記錄下AI發展的足跡。今年,生成式AI在春晚舞台迎來大爆發,最引人矚目的應用就是幾乎一力承擔了歌詠創意秀《賀花神》的視覺製作,且畫質高達4K,用最前沿的科技完成了一次對中華優秀傳統文化的創意詮釋。
短短几分鐘的時間裏,楊玉環、王昭君、陶淵明、張騫等代表農曆十二月令的司花之神輪番翩然而出,用屬於自己的故事為大家呈現了四季流轉、生生不息的中華思想文化。
十二種花開花月份不同、十二花神故事背景也不同,短時間內完成十二重時空轉場難度不小——採用傳統綠幕摳像合成的CG製作耗時耗力,想讓節目「在演播廳內完成」還需對演播室進行三維建模;AR則更擅長在鏡頭前「貼片」,將視效覆蓋於真實場景之上。於是,創作團隊創新採用AI實景拓展技術,讓演播廳裏真正實現漫天繽紛。
雪地、岩石、樹木等均為AI製作
由AI製作的馬的毛髮質感順滑
AI實景拓展技術,顧名思義就是以AI為手段對舞台實景結構進行拓展,使之成為一個既能實現創作團隊想像、又可以實現與觀眾交互的動態空間。
舞台上,無論是活靈活現的動物,還是飛花落雪、池塘大漠,甚至是在小朋友互動時才會盛開的杏花,都由AI製作而成,甚至運鏡軌跡都由AI模擬,可以說除了演員和觀眾,「所見皆AI」。
杏花交到小朋友手上的同時盛開,對於傳統CG製作的難度極高,但AI僅需一條指令
AI在學習真實運鏡後,根據運鏡軌跡生成與之匹配的視效,與實景舞台完美融合一體
創作團隊依託總台央視聽媒體大模型,以工作流的形式進行內容生成。比如在一個移動鏡頭中要完成小貓跳躍、杏花開花等動作,只需要對能夠控制動作、形象、風格等不同模塊下達指令,然後將不同工作節點進行串聯,就可以形成一段完整的視頻了。
再比如荷花一節中,採用AI製作的場景相比其他特效包裝而言,融合度和真實感都會更好。因為AI可以讓荷花在屏幕中的任意位置精準生長,同時在移動鏡頭中保證物理結構和透視關係的一致性,真正達到人在景中、層次錯落有致的效果。
移動鏡頭下,亭子的透視關係始終保持正確
採用AI製作的荷花可以生長在觀眾前後。傳統AR只能將荷花置於觀眾前,造成遮擋
衣袂翻飛間,AI將人類腦海中的想像化為現實,不僅細節逼真、製作周期和成本更大幅降低。除了絕美的花神,《馭風歌》一開場,AI便讓徐悲鴻《六駿圖》中栩栩如生的馬兒奔跑如飛;《快樂小馬》背景大屏幕上憨萌的小馬也來自AI……未來,生成式AI一定將會給春晚帶來更多電影級的精彩節目。
跨屏聯動如影隨形
「也都是追夢離家的孩童,行走在滿是年輪的旅程……」當《人間共鳴》的旋律響起,舞台上的演員向光而行,地屏上隨腳步擴散的漣漪讓觀眾看清他來時的路。這段人與光影跨屏聯動的「年輪足跡」,來自另一種AI技術的應用——判定式AI。
演播廳內,一套高精度AI視覺追蹤系統在時刻識別追蹤演員佩戴的智能信標裝置,通過採集演員位置和姿態數據,與播控系統聯動,讓AI即時生成匹配的視覺反饋,讓演員與舞台同頻共振。
除了判定演員在舞台上的位置,這項技術還能判別物體在鏡頭中的位置,從而更精準地完成節目的特效製作。在歌曲《媽媽有座電影院》中,隨着扮演媽媽的演員打開放映機,膠片帶緩緩轉動,媽媽的記憶便以光的形式「投映」到大屏幕上。這道光束由AR技術製作展現,但光從哪裏打出、又投向哪裏,則需要判定式AI識別放映機這一節目道具的位置後給出指令。這樣,即使在動態鏡頭中,光束位置和軌跡依然可以保持精準,完美呈現節目意境。
同樣需要對節目道具進行位置捕捉的,還有雜技節目《繪新春》。這個由奧地利與中國兩家雜技團攜手演繹、融合現代科技與傳統雜技的視覺表演,將眼花繚亂的動作化為行雲流水的光影,在除夕夜繪就了一幅春俗意象圖。
節目中,西方捷克棒和中國空竹閃轉騰挪,它們的軌跡以不足0.5秒的延時出現在舞台大屏幕上,並根據不同道具特點,以不同筆觸作畫。
以翻轉動作居多的捷克棒,在大屏幕上顯示的筆觸也以翻轉為主
走位更飄逸的空竹,顯示的筆觸多以點狀軌跡為主
那麼,舞台大屏幕上的光影是如何而來的呢?許多人以為這是提前錄製好的背景視效,由演員配合視頻完成演繹。其實恰恰相反:大屏幕上的光影軌跡是根據道具的實際位置生成的,而道具的位置則由紅外光定位識別——在捷克棒和空竹上,都安裝了紅外LED燈珠,持續發出人眼看不到的紅外光。
演播廳中布置的紅外攝像機則通過捕捉這些紅外光,同時以AI技術對紅外光定位區域進行圖像視覺理解,分析光點的角度、距離變化,確定每一個LED燈珠位置,並實時計算出目標道具的具體方位和移動軌跡,從而實現持續跟蹤。
無論是上下翻飛的捷克棒打造的波浪,還是輕巧靈動的空竹變幻的繡球,科技創新不僅讓人看到了科技本身,也讓更多人以全新方式,再次認識更多的巔峰技藝。
虛實融合如夢似蝶
你還記得曾經的那個人嗎?或許,你們只在夢裏再次相遇。當穿越了名為夢的那道門,TA依然在那裏靜靜地等待。而夢醒之後,TA在哪裏?似幻似真的歌曲《夢底》,正如莊周夢蝶,為大家講述了一個難以分清、或者說不想分清現實與夢境的愛情故事。
節目中,舞蹈演員在主舞台翩然起舞。而每一道光門的背後又都是同一個她玉步輕隨,這樣的效果在一場直播節目中是怎樣做到的呢?答案就是首次在春晚舞台應用的超寫實數字人:通過70個4K攝像機對真人演員進行360°全方位光場採集,形成可以完美復刻演員形象與肢體表演的高精度動態三維模型,再通過AR技術的包裝,就能讓演員和她的「數字分身」同屏共舞了。
除舞台中央的歌唱和舞蹈演員為真人外,圖片兩側和遠端位置的「演員」均為超寫實數字人
真人舞蹈演員(中)和她的「數字分身」(右)同屏共舞
超寫實數字人最顯著的兩個特點是製作周期短和成品效果真。特別是對於春晚這種時間緊、動作可能需要隨時調整的任務來說,超寫實數字人可以在幾天時間內完成影像採集和建模,而效果也足以達到以假亂真。
根據真人演員製作的超寫實數字人在近距離觀看也十分逼真
不知道你注意到沒有,馬年春晚與以往的春晚還有一點顯著不同,而且並不在節目上,而是在倒計時環節。往年,春晚都會單獨切出錶盤倒計時的畫面,而今年,春晚將倒計時的鐘錶「搬進」了演播廳——在AR技術的助力下,全球觀眾都可以和演播廳內的演職人員和現場觀眾一起見證零點鐘聲的敲響。
《馬上有奇跡》中,奔騰嘶鳴的群馬;《吉量》中,56個民族的孩子們看《山海經》中奔馳而來的神馬;《追影》中,飲馬岸邊的白馬倒影……其實,AR技術在春晚舞台上的應用已極為成熟,甚至可以達到XR效果。比如在《致愛組曲》中,嚴絲合縫的特效讓觀眾看不出舞台大屏幕和兩側豎屏的位置。演員們仿若真正置身於華麗的殿堂,演奏大家耳熟能詳的名曲,真真正正實現了真假難辨的視覺效果。
通過視覺製作在演播廳內打造更多變化的舞台效果,XR技術起到了關鍵作用。今年,春晚在主舞台正對面設計了一個XR舞台,12米高、5米寬的立屏也為立體影像帶來更廣闊的延伸空間。《絲路古韻》開場的「石窟飛天」和《智造未來》中的「宇宙暢想」,都是依託XR舞台進行延展,不僅將以往需要提前製作短片插入節目才能實現的全景特效簡化為現場演繹,更為節目轉場提供了更為自然的過渡方式。
科技創新既非一蹴而就也非一枝獨秀。作為春節最有影響力的文化符號之一,總台春晚呈現的科技創新應用既為觀眾帶來了觀賞性極佳的文化盛宴,也為媒體行業乃至文化產業、科技產業的發展提供了可借鑒的經驗。「技術賦能,是總台近年來文藝節目持續出新出彩的一大秘訣。」總台文藝節目中心主任張國飛表示。春晚,這頓科技感藝術味俱佳的「文化年夜飯」,讓我們來年繼續!
(來源:CMG觀察)

評論(0)
0 / 255