當前位置: 華文天下 > 綜藝

【歌手2024】背後有哪些技術創新

2024-08-27綜藝

試想一下, 要做【歌手2024】這樣的「超級直播產品」,背後需要滿足哪些條件?

其一, 13場大型直播,需要穩定、流暢、安全 ,涵蓋大小屏,總決賽甚至覆蓋航空場景;其二, 不僅需要繼承頂級音綜IP的頂級視聽效果 ,在當下的傳播語境中,更需要移動場景的智慧互動創新。

這是一場從播控到互動,從覆蓋到傳輸,從傳統技術到AI最新套用的綜合試煉 。湖南廣電從廣播電視時代到AI智慧時代所積累的技術儲備,在長、中、短視訊場景所累積的技術營運經驗,在【歌手2024】中得到全面體現。

【歌手2024】的現象級表現,不僅是內容的勝利,更是技術深入融入甚至驅動內容創作的成果

從「每一個位置都是最佳聽音位」

到「每一個人都擁有自己的導播間」

「絕對殿堂級的現場」「中國有自己的格萊美」是首場直播後,社交媒體上使用者對視聽感受的主流聲音。場景碎片時代,極致視聽是長視訊的第一壁壘。 作為一檔久負盛名的頂級音樂IP,【歌手2024】的現場首先是一個極致的聽覺現場 。在這一季,節目現場首次采用L-ISA沈浸式擴聲系統,實作對所有聲音物件的定位、擴充套件、遠近以及移動,保證場館內每位觀眾擁有相同的聽感,「每一個位置都是最佳聽音位」。

但更多的使用者,只能線上上觀看和收聽。為了保證播出音效, 本季節目共計處理通道數超過900路,各區域、各環節分別設有自己的音訊混音系統,並投入全景聲音訊車,讓現場音效得到最大的還原 。在客戶端播出側,芒果TV的工程師也在用演算法針對不同終端訊號進行聲音偵錯,將節目創造的頂級音效最大程度讓每一位使用者共享。

這些努力, 也最終讓大小屏前的觀眾都能收獲置身演出現場的沈浸體驗

而此次 【歌手2024】 播出過程以 「1個主機位+3個自選機位」 的組合被稱為 「直播也有真人秀」 而引發廣泛關註的 「雲導播」多屏互動玩法 ,從互動上看,是結合移動小屏場景打造的新型互動產品,但要追溯到產品源頭,則是 湖南廣電在大型計畫創制過程對於畫面排程的經驗與傳承 。這一功能之所以能展現在使用者面前,歸功於「一杯咖啡」。3月的某個下午, 芒果TV平台技術中心負責人胡奕涵 去員工咖啡廳買咖啡,經過播控室,看著播控室幾百個螢幕同時閃爍,她和同行的同事討論:這種酷炫的掌控感,有沒有可能讓使用者也擁有?

這個平均90後、最小的技術人員是98年的技術團隊,「很愛玩」。這個疑問,讓大家雀躍,於是帶著 「讓使用者也能成為自己的導播」 的目標,技術團隊與播控團隊,主動與【歌手2024】節目組多次溝通, 最終共同讓技術進入到節目營運,成為直播的一大亮點

為了最大程度最佳化雲導播的效果,芒果技術團隊進行了多次技術試驗 。比如從播控提供的11個分機位中讓使用者選擇3個,是技術端透過多次的前期測試,選中的能夠被使用者頻寬承載,又能夠提供多種選擇的最適合配比。

「讓使用者能自己導播,還要讓導得爽快」。為保證使用者「無感切換」流暢體驗,產品技術團隊采用自研智慧無縫切換技術,在業內首次完美實作了「 多視窗在各螢幕形態下(含折疊屏)的無縫切換和布局顯示」 ,換句話說,沒有一個使用者會在切換直播視窗時候,會面臨緩存、卡頓的情況,這極大地保障了雲導播的功能的使用者體感。

相比傳統的直播形式,雲導播有效提高了內容的使用者觀看時長 。數據顯示,單場直播使用者「雲切換」次數高達18次,帶動直播人均觀看時長提升超60%。技術支撐下的內容創新,讓【歌手2024】融合客廳與手機場景,吸引了觀眾的最大公因數。

更值得一提的是,此類直播大多采用傳統的SDI直播播控技術,成本高昂。此次【歌手2024】全程采用了輕量化的全IP多機位直播播控技術方案,以IP編碼器為核心,同步處理11個機位的字幕、延時、多碼率編轉碼,支撐了雲導播多路直播訊號播控。與傳統直播技術相比, 裝置成本和人力成本降低了70%,同時支持橫豎屏多機位及4K直播 。這也是該方案在行業內的首次套用。

AI再次深度套用於節目營運

成為使用者活躍度催化劑

不僅有傳統優勢的傳承, 【歌手2024】中的很多巧思,也建立在芒果TV對於AI等前沿技術的探索基礎上

例如在直播間中嵌入的AI產品 「愛芒歌手排名預測」 ,基於 芒果大模型的「芒果西米露」智慧體套用平台 打造,在直播期間即時對現場音視訊流進行分析,在視覺維度辨識觀眾情感變化,在音訊維度辨識歌手音高音強的基礎上,再輔以歌手資訊、歌曲資訊、歌手往期排名、即時輿情等數據,實作多模態資訊的理解、整合和分析,最終實作即時的排名預測並釋出。

換句話說, 「你在觀察歌手,AI在觀察你」 。從實際表現來看,愛芒的「觀察」頗有成效, 「愛芒歌手排名預測」的準確率很高 。在第十一期突圍賽,AI成功預測3名突圍選手,第十二期總決賽,對排名和歌王則是100%預測正確。

7月23日,芒果TV大模型正式透過中央網信辦生成式人工智慧(大語言模型)備案稽核, 【歌手2024】則成為這一垂直大模型最新的的套用案例

除了直播中的AI預測,在生產端AI也在大幅提高生產效率。 在節目點播內容的制作過程中,平台也借助AI技術,來實作快速剪輯、AI打碼、AI唱詞等 ,從而大幅提升產能,完成成品的交付。

芒果TV對於綜藝AI套用的探索處於串流媒體領先地位 。在今年的中國網路視聽大會上,作為AI導演的「愛芒」已經亮相;在 綜藝【我們仨】 中,「愛芒」則承擔助理導演的職責,負責與藝人溝通確定節目行程、撰寫分鏡頭指令碼、創作文案、設計節目遊戲等工作。此次 「愛芒歌手排名預測」 正是基於芒果TV大模型衍生的細分場景推理模型創新套用。

空地互聯、海外覆蓋

技術助力內容傳播更廣

「剛從歌手現場出來,這事兒我能炫耀半輩子」,如果說2024新增了一種新型社交貨幣是「我聽過【歌手2024】的現場」,還有一部份人有著更極致的體驗:7月26日, 芒果TV與廈門航空合作,在北京飛往杜哈的MF845次國際航班上直播了【歌手2024】總決賽 ,將直播體驗帶到了海外的萬米高空之上。要實作「空地互聯」,技術上如何解決空地對接、移動距離遠、觀眾即時連續收看的困難?

在打造航空直播生產新場景時,湖南廣電綜合運用串流媒體動態編碼技術、互聯網安全傳輸技術、雲平台微服務功能產品、衛星行動網際網路技術等多種新型融合媒體傳輸技術手段,最佳化了編碼格式、編碼碼率、分辨率、延時等技術參數,來確定適配航空互聯網網路條件的動態編碼模式; 將自研自建的基於微服務技術的雲平台直播分發模組,透過航班引入的衛星互聯網與乘客建立連線,安全傳輸訊號至每一塊飛機螢幕上

這一航空直播能夠實作,包括了不少高維度的技術積累。其中的 「微服務技術」、「互聯網傳輸技術」和「動態編碼技術」,就是湖南廣電參與國家科技部研發計畫的成果之一 。有自研技術、有經驗積累、敢創新突破,是芒果能推動使用者在飛機上觀看【歌手2024】直播的重要內因。

與此同時,【歌手2024】的海外觀看與傳播場景也在技術助力下得到進一步拓展。 【歌手2024】設定了雙語直播間,采用跨國推流技術,支持雙語直播間導播推流+豎屏錄制+雙語直播間調音 ,並且覆蓋新加坡星和視界Hub都會台、馬來西亞電視台Astro QJ、新媒體平台Astro GO等多國媒體。

「技術基建」推動協作創新

實作全流程高水平保障

大型節目創制復雜,直播更是對全流程的工業化水準要求極高。 【歌手2024】演播廳位於湖南廣電新建的「七彩盒子」 ,其「技術基建」的完備,成為節目安全播出的重要保障。

「七彩盒子」首先實作是工作裝置的輕量化 。場地配置的WiFi6無線網路幾乎全域覆蓋,現場的工作人員只需使用膝上型電腦等輕量化通用裝置,就可以實作節目電子流程單和導播公告訊息的一鍵匯入與精準推播,面向不同工口、不同終端進行分許可權的客製化推播。

七彩盒子

這次直播還首次套用了數位化審片來提升效率 。在「七彩盒子」Wifi6無線專網中,節目稽核人員可以即時接收返送的直播PGM訊號,軟體具備即時截圖、線上批註和快速備註等審片功能,並對不同角色的稽核意見進行分類匯總,相比傳統的紙質審片大大提升了審片效率,並且有利於數位化資產的歸檔。

在播出方面,大小屏同步直播對訊號傳輸提出超高挑戰 ,湖南廣電基於多年在無線射頻傳輸方面的套用經驗,對微波傳輸系統進行關鍵技術升級,同時極致最佳化了5G網路和傳輸系統,保證「雲導播」等小屏執行的新產品流暢穩定。

可以說, 【歌手2024】的13場大型直播的成功,正是在協同創新的技術系統之上,播控、傳輸、演算法等各項技術的全面最佳化與創新 ,其現象級表現,不僅是內容的勝利,更是技術主動前置、能動創新、與內容深度共創的成果。而從更大的系統來看, 湖南廣電正在布局以長、中、短內容貫通的「國有數智超級平台」,融合了湖南衛視、芒果TV、小芒電商、風芒、5G智慧電台等矩陣式平台 。據報道,生態融合之下,湖南廣電「內容+技術」復合型人才占比達到80%,技術人才90後占比達到70%。一個多層次的技術創新系統,正在加速融入乃至驅動內容創制。

在一個分眾、碎片化的時代,【歌手2024】證明了技術和內容能力結合完全有能力打破圈層壁壘、創造出具有全社會影響力的新型大眾文化產品。 湖南廣電的技術實踐,也正持續為新時代文化與科技加速融合提供全新範式。