(CWW)2022北京冬奧會賽程過半,激戰(zhàn)正酣。在“家門口”的賽場上,已獲得4金3銀2銅的中國冰雪健兒正與來自世界各地的運動員同臺競技,觀眾可以通過咪咕視頻、中國移動魔百和、視頻彩鈴“前排圍觀”冬奧精彩,見證冰雪健兒的榮耀時刻!
作為2022北京冬奧會的官方轉播商,中國移動咪咕承擔賽事轉播及帶動三億人參與冰雪運動的責任和使命,不僅邀請了冰雪名將陪伴觀眾暢聊冬奧,同時還通過技術創(chuàng)新給觀眾帶來更佳的觀賽體驗。
冬奧新看法,5G+XR開啟冬奧觀賽新方式
第24屆冬季奧林匹克運動會精彩開賽,作為2022北京冬奧會官方持權轉播商,中國移動咪咕通過體娛跨界、虛實交互的聯(lián)動,為這場2022冰雪盛會吹響“集結號”。冬奧期間,賽事精彩紛呈,觀眾常常要同時關注多場比賽,進行多場比賽的切換,觀賽體驗零散無沉浸感。為解決以上問題,咪咕公司將關鍵技術研發(fā)項目“5G云XR”的成果---6DoF場景下多屏同看技術,應用在北京冬奧賽事直播中。本成果利用Inside-Out定位技術,結合Nreal AR眼鏡提供六自由度的賽事體驗場景,同時利用多實例播放技術,實現多路獨立視頻同時播放功能,達到三維空間多屏同看場景效果。
這是首次將5G+XR觀賽技術應用到冬奧賽場,打造了虛實結合的多賽同看三維直播空間,同時支持三場比賽直播、賽事結果、獎牌榜、賽程、相關推薦、熱賣商品等8塊虛擬屏幕觀看比賽,通過拖動即可隨意切換比賽,支持任意屏幕縮放和遠近調節(jié),實現自由布局,并采用柔性射線控制,有效降低傳統(tǒng)僵硬拖拽造成的不適和眩暈感。利用特色賽事內容優(yōu)勢,貼合體育用戶真實需求,打造6DoF沉浸式虛實融合的觀賽體驗,實現了XR終端及場景新突破。
隨著5G技術的普及和終端設備顯示能力的進一步提升,消費者對于“真實”“沉浸”的超高清音視頻體驗的呼聲越來越多、越來越強烈。依托中國移動網絡優(yōu)勢及5G的大帶寬、低時延、穩(wěn)定可靠等特點,并結合終端AR眼鏡,多路賽事直播同傳清晰穩(wěn)定,多屏切換自然流暢,觀看者隨心所欲仿佛置身賽場。此次冬奧會上打造的多屏同看多維觀賽的全新視覺體驗將對推動5G+XR應用產業(yè)生態(tài)的發(fā)展帶來了長遠且積極的推動力與影響力。
科技助奧,智能雙語字幕直擊冬奧賽事
為貫徹落實“籌辦好北京冬奧會、冬殘奧會”重要指示精神,咪咕公司創(chuàng)新研發(fā)AI雙語直播字幕,并于2022年2月3日在咪咕視頻上線應用,支撐冬奧賽事。
直播最大特點就是將現場聲畫同步、實時播出,具有強烈的現場感和時效性。它不僅能讓觀眾在第一時間耳聞目睹現場的情況,還帶給觀眾極強的“在場”感和參與感,因此,它給予觀眾的不僅僅是一個結果,更是整個充滿暴念的發(fā)生演進過程,但這必須借助視、聽綜合特性。
通過這些年對大型賽事的支撐,我們越來越深切地認識到,視覺畫面并不能完全獨立、完備地傳播所有信息,更需要聽覺信息的傳遞。然而,對于聽障患者或是處于靜音、噪聲下的特殊人群,無法獲取聲音帶來的補充信息。那么,在觀看直播的過程中,體驗感將大大折損。
不僅如此,專業(yè)的直播,如體育賽事,因其特有的規(guī)則,常伴有“難以琢磨“的專業(yè)術語,就連聽覺人群在視、聽信息完全捕捉的情況下,也因其非專業(yè)性,常伴有不解與無奈。
對此,咪咕公司依托智能中英翻譯,搭載語音自訓練平臺,打造業(yè)界首個AI實時雙語字幕。同時,為了在此次冬奧期間讓廣大觀眾感受到AI科技的魅力,我們還圍繞體育場景精細化訓練,結合自研知識圖譜、智能糾錯、語義分析、垂直領域優(yōu)化等多種手段,全面提升體育直播字幕準確率,平均準確率超95%,雪車雪橇等項目準確率達98%,極大的解決了體育賽事普遍面臨的“聽不到,聽不清,聽不懂”問題,豐富了直播信息,彌補了聽覺特殊人群在直播的聽覺信息缺失。
冬奧期間,AI雙語實時字幕在咪咕視頻APP上以“為了聽不見的你”的暖心名稱服務大眾,被網友直呼“好懂”!更是被網易、搜狐、騰訊企鵝號等媒體稱贊為暖心的陪伴。咪咕公司此次在直播雙語字幕的探索,是對AI如何賦能生活,深耕服務創(chuàng)新的充分思考與實踐,對科技之力賦能體育強國、賦能高質量發(fā)展具有重要意義。
科技助力冬奧,咪咕公司首發(fā)AVS3移動端直播應用
2022冬奧期間,咪咕公司攜手北京大學、上海交通大學將AVS3編解碼標準應用在咪咕視頻北京冬季奧運會賽事直播中。據悉,這是AVS3標準在移動端直播場景首次應用及落地,探索了一種AVS3在移動端直播應用的解決方案,讓用戶隨時隨地欣賞精彩的冬奧賽事。
AVS工作組是由原信息產業(yè)部科技司批準成立的標準組織,目前已經運行19年,完成了三代AVS標準的制定,AVS3是全球首個已推出使用的面向8K及5G產業(yè)應用的音視頻信源編碼標準,對加速AVS3與5G新媒體的融合發(fā)展、完成我國AVS3+5G+8K產業(yè)發(fā)展領先全球的部署意義重大。AVS3編碼模塊采用了精細的塊劃分方案、更高效準確的預測算法、適配性更高的變換模式以及效率更高的濾波算法,AVS3的編碼性能和國際視頻編碼標準HEVC相比,性能提升接近30%,并且相同碼率下,AVS3視頻質量明顯高于H.265/HEVC,冰雪健將在冰雪賽場上的矯健身影每一幀都清晰可見,猶如近在眼前。除此之外,AVS3采用了多線程解碼優(yōu)化, 大幅提升解碼性能,終端軟解碼能力從原來的25fps提升到50fps。
隨著5G技術的普及和終端設備顯示能力的進一步提升,消費者對于“真實”“沉浸”的超高清音視頻體驗的呼聲越來越多、越來越強烈。然而現階段業(yè)界常用的H.265/HEVC 存在專利風險。AVS3作為我國全自主知識產權,打破國際專利對我國音視頻產業(yè)發(fā)展的制約的音視頻標準,為超高清視頻產業(yè)和消費者帶來更多選擇,咪咕公司此次在移動端的直播試驗,示范了AVS3在編解碼標準的適用廣泛性,為我國超高清視頻領域實現從并跑到領跑的跨越提供強大助力,為超高清國產化標準生態(tài)體系構筑帶來了長遠積極的推動力。
科技點亮大屏,炫彩超清視界
為實現“科技冬奧·8K看奧運”的目標,咪咕公司基于多年超高清沉浸式視頻服務經驗創(chuàng)新研發(fā)8K超高清直播制播一站式技術能力,成為率先在全國多地實現8K直播技術落地的公司,覆蓋北京、上海等地近30塊公共屏幕,包括商圈、營業(yè)廳、咖啡店、園區(qū)、街道、銀行等場景,讓廣大人民群眾“零距離”體驗8K顯示帶來的震撼臨場視覺體驗。
咪咕公司本次推出的“科技冬奧8K超高清”解決方案,包含8K公共信號制作、8K頻道播出、8K直播分發(fā)及8K信號展示的端到端供給功能,所有環(huán)節(jié)均采用8K標準,并通過千兆光網+5G的新一代內容分發(fā)能力體系,最終保障各類泛場景8K展現點位均可穩(wěn)定接收到超過120Mbps超大碼率+HDR技術的8K直播信號,配合靈活的終端適配解決方案,滿足戶外8K大屏、大屏幕8K電視及各類異型屏幕、4K、高清等各類顯示終端高質量播放8K直播內容。
“科技冬奧8K超高清”方案在視覺展現和內容制作兩方面進行了技術探索。在視覺展現方面,為確保公共區(qū)域大屏幕場景下的視覺還原效果,方案采用HDR標準的8K信號,8K+HDR的高光亮度可達到10000尼特;基于BT.2020的廣闊色域,最多包含顏色達到687億種,達到人眼對色彩的分辨極限。同時在現有編碼方案基礎上進行了深度參數調優(yōu),提出一整套適應8K直播場景的內容傳輸分發(fā)方案;在內容制作方面,咪咕公司建立了完善的8K頻道生產制作能力,可實現將8K直播信號、8K點播素材及非8K的各類素材進行靈活編排,解決了8K場景下信號切換和素材銜接等技術難題,在國內新媒體領域率先制作并播出7x24小時的8K公共信號。
基于技術和內容的雙支柱,“科技冬奧8K超高清”方案為泛場景、全時段的公共大屏觀眾群體呈現更卓越、更舒適的視覺效果,帶來“還原真實,讓所見成真”的視覺盛宴。
5G消息賦能冬奧傳播新范式,中國移動5G融媒手機報打造沉浸式賽事報道
為傳遞奧運精神,全方位呈現冬奧冰雪盛宴,中國移動5G融媒手機報在冬奧會期間,圍繞賽事熱點,特別推出《新聞早晚報—北京2022年冬奧會???,匯聚音視頻、圖文、H5等富媒體內容,以5G消息和視頻短信形態(tài)傳播冬奧會精彩內容,使用戶能準確、便捷獲取冬奧會相關資訊,帶領用戶瞬間“抵達”火熱的比賽現場,感受沉浸式體驗。
5G融媒手機報充分發(fā)揮技術優(yōu)勢,推出5G消息冬奧???,以特有的富媒體卡片式展現形式,賦予用戶看、聽、讀、智能互動為一體的多維度閱讀體驗,用戶滑動卡片,便可獲取多條精彩資訊。5G消息突破傳統(tǒng)短彩信的容量和格式限制,使用戶可享受豐富的超高清視頻、圖文及熱門資訊,隨時隨地體驗奧運現場的澎湃激情。用戶可通過回復不同文字或語音,查找自己感興趣的內容。5G消息聊天機器人在與用戶的自然語言交互中洞悉需求,提供個性化服務。5G消息冬奧專刊設置精彩時刻、前線播報、冬奧小課堂、賽事預告等多個主題欄目,用戶可通過按鈕實現一鍵抵達。
在當前5G消息終端覆蓋不足的情況下,為進一步提升用戶消息接收體驗,5G融媒手機報創(chuàng)新使用視頻短信鏈路監(jiān)控技術,實現5G消息、視頻短信、普彩、短信等形態(tài)消息的自動回落。該技術可以在視頻短信下發(fā)過程中或下發(fā)后自動監(jiān)測目標終端所能支持的媒體類型(MIME)的標示信息,當發(fā)現異常時及時改變策略繼續(xù)不同類型消息的下發(fā),并進行信息記錄,從而提高下發(fā)成功率。冬奧會賽事期間,5G融媒手機報針對非5G消息終端用戶推出視頻短信和H5內容,實現5G融媒冬奧資訊全覆蓋。
憑借5G技術賦能,5G融媒手機報在北京冬奧會期間打造兼具專業(yè)性、互動性、娛樂性的賽事體驗,推進5G消息創(chuàng)新應用,預計服務用戶超2.8億人次。中國移動咪咕將持續(xù)探索數字閱讀領域,順應用戶需求的變化,打造創(chuàng)新文化全場景沉浸體驗生態(tài),融合感官場景拓展閱讀的想象空間,引領數字閱讀行業(yè)5G 風潮。