导读:北京冬奥会虽已拉下帷幕,但会上的精彩瞬间却给人留下了不可磨灭的印象。作为冬奥官方转播商,咪咕公司通过一系列技术创新给观众带来了极佳的观赛体验,现在让我们一起回顾冬奥期间运用到的那些硬技术!
赛事直播篇
01
冰雪奥运一触即达
2022北京冬奥会,冬残奥会期间,咪咕公司采用多种分发网络进行了赛事直播分发,其中包含低时延分发网络。
低时延分发网络相比传统CDN而言,能提供更低分发时延的分发网络,端到端时延显着缩短,大大提升了用户观赛体验低时延网络基于流进行分发,而传统CDN通常采用基于文件进行分发,流分发与文件分发的区别导致了二者端到端时延差别大传统CDN接收到源视频流之后,网络侧先进行切片,切片完成之后进行分发,切片大小决定了网络的缓存时间,终端接入网络,需要先获取若干个切片后进行播放,切片大小和等待切片个数决定了端到端时延而低时延分发网络相对简单了很多,接收到源视频流之后,直接在网络内部分发,终端接入网络,直接拉流进行播放,同时低时延分发网络提供了丰富的接入手段
本次冬奥会,咪咕公司首次在这类大型赛事直播中试点了低延时超高清分发,通过边缘云跨域容器方案实现资源的灵活调度和智能推流选线等,提升网络整体可靠性,保证了直播网络质量,通过低时延无中心推拉流方案,实现端到端时延显着降低,让用户先人一步体验精彩内容。
本次冬奥会对短道速滑女子1000米决赛和自由式滑雪坡面障碍技巧决赛,试点使用了低时延网络进行分发,显着降低赛事直播端到端的时延,相比传统CDN端到端时延缩短近30秒。同时,强调绿色发展,促进<;2三能计划建设绿色电网,建设新<;智慧与低碳现状;基础设施。
当前视频直播已经广泛应用到各类业务场景中,并且处在高速发展中,从赛事直播,个人直播,游戏直播,购物直播,讲座直播等,应用行业非常广泛,咪咕公司作为中国移动面向移动互联网领域设立的负责数字内容领域产品提供,运营,服务的一体化专业子公司,拥有音乐,视频,阅读,游戏,动漫数字业务运营实体,自身业务:体育赛事直播,游戏直播,音乐演唱会等对直播有着各种应用需求,低时延分发网络的应用将较为显着的改善观众直播时效的体验。
02
4/5G现网验证超高清加速观赛
在北京冬奥会期间,咪咕公司联合中国移动北京公司,研究院,在集团技术部的指导下,实现了咪咕5G权益用户基于4/5G网络的热点赛事直播加速服务应用,业内首次实现了基于现网网络能力开放平台的5G SA网络动态QoS业务加速的小规模试商用验证,同时为用户提供基于边缘VIP分发的加速能力。云网运营层构建全球优化的运营管理能力,形成统一,敏捷,高效的云网资源供应运营体系。
当用户是咪咕视频钻石会员且符合咪咕5G权益用户白名单时,在通过北京移动4/5G网络观看特定热点赛事直播时,会被精准调度到咪咕边缘VIP分发节点,同时向北京移动能力开放平台申请启动基于5QI 6/QCI 6的实时动态QoS加速能力。
从本次小规模商用测试的分析可以看出,通过热点赛事直播加速服务,咪咕5G权益用户相比普通用户在直播延时上大大提升,平均比普通用户提前4秒观看到赛事内容,在本场冬奥盛宴中以更好的超高清观看服务体验共同见证了谷爱凌在张家口赛区的首秀并晋级决赛。
通过本次冬奥热点赛事直播加速服务的小规模应用验证,咪咕视频在4/5G现网验证了基于动态QoS加速和边缘VIP分发赋能超高清观赛的新模式,实践了5G网络技术和大视频业务的深度融合,为视频业务用户体验的提升和产品经营的创新提供了示范应用经验和参考案例,也为进一步探索基于网络加速能力的视频业务商用转化提供重要依据。
互动参与篇
01
沉浸式冰雪新娱乐,让元宇宙走入身边
2022年冬奥期间,联动新春+冬奥双节点,为了扩大中国移动集团和咪咕公司的影响力,咪咕公司首次使用游戏引擎+H5+数智人的自主研发技术实现了冬奥会H5小游戏:冰雪嘉年华创新性的使用了运营+数智人+权益+3D小游戏的宣传运营模式,在娱乐游戏的同时也能领取相关的移动权益和各种合作品牌的优惠券,同时结合冬奥赛事,科普了冬奥赛事比赛项目以及该项目的世界纪录等冬奥知识,在娱乐的同时科普和宣传了冬奥赛事,以及加入春节元素,为活动添加了一些年味
冬奥会H5 + 3D 小游戏采用游戏引擎作为跨平台技术解决方案,基于TypeScript + GLSL进行开发,一次编写,多平台运行小游戏通过对3D模型的面数,光照,烘培以及渲染管线进行优化,做到了即使在低端机型也可以60 fps丝滑运行,保证游戏运行不卡顿为了让元宇宙不再抽象,冬奥会H5也自研并应用了基于WebGL的3D数智人高效渲染的技术,通过Canvas自动生成3D数智人海报
在目前业界大火的元宇宙概念中,冬奥会H5+3D小游戏也打造了3D虚拟形象和1比1复刻冬奥滑雪主场馆的场景,都可留做数字资产,持续使用,同时同一个3D数智人可以进行不用换装,适应不同游戏场景。
与传统的H5游戏不同的是,一般H5游戏只有一个场景,而冬奥会H5小游戏拥有3种游戏场景+超多游戏玩法,给玩家提供了不同游戏选择和刺激的玩法,以及沉浸式的体验同时与传统的移动权益页面只能领取权益或者做一些宣传元素的运营页面不同的是,冬奥会H5小游戏使用了运营+游戏的模式,在宣传的同时还可以进行游戏,极大提升了用户在宣传页面的停留时间
科技与创意结合,打造传播冬奥体育精神和知识科普的寓教于乐的冬奥小游戏,传承体育热爱精神,打造沉浸式的冰雪游戏新体验,让元宇宙走入身边让人难忘的2022冬奥会已落下帷幕,为冬奥而生的小游戏也已完成自己的使命,但H5小游戏不会停下自己拓宽赛道的步伐
02
跨次元联动,咪咕助力冬奥集光之夜
2022冰雪盛会蓄势待发,一场以冰雪之名的音乐狂欢到来日前,由北京冬奥组委文化活动部主办的集光之夜虚拟交互冰雪音乐嘉年华动感来袭,在咪咕视频,咪咕音乐,咪咕圈圈,咪咕快游等平台同步播出作为首个由冬奥会官方认证支持的冬季冰雪运动IP虚拟音乐会,集光之夜携手多位知名明星艺人,人气虚拟偶像组成超强跨次元阵容,依托嘉年华虚拟场馆的全新场景,以虚拟,演出与娱乐交互的全新体验,呈现出一场冰雪主题的沉浸式视听盛宴
整个演出场馆以雪花的六片花为原型延伸出集光雪原,远古洞窑,流光水洞,海底雨林,古楼摘星,天际轨道等六个充满冰雪氛围的虚拟场馆,而每个场馆又是由纵向多层次的平行世界构成,舞台场景变幻多端,异常丰富相比实体场馆,这种舞台效果更加绚烂多姿,如梦如幻,令人惊叹,而这种效果的完美呈现正是由于中国移动5G云游戏多项技术深度参与其中
中国移动咪咕公司基于云端高性能GPU算力服务器和智能动态编码技术,通过3D建模和实时渲染等手段,创造了完全不同于传统晚会的观演体验观众在屏前享受到的高画质,全视角和沉浸感,都依赖于中国移动咪咕公司提供的虚拟化和容器化技术,实现了为舞台场景建模提供算力动态伸缩,为不同场景的画质,分辨率和帧率提供最匹配的算力支持
本次晚会,有一批拥有观演特权的观众不同于其他看直播的普通观众,在1月28日的晚会中,特权观众拥有虚拟游戏ID,以第一视角进入晚会现场并观看演出他们可以通过传送门在六大虚拟场馆之间随意穿梭,360deg,全方位观看真实艺人和虚拟偶像同台演出,还能与次元明星们进行现场互动,真正突破次元壁,全程身临其境,虚实难分不仅如此,这批特权观众还能参与演出中为他们专门设置的游戏环节,边看边玩,其乐无穷那么,这批特权观众是怎么挑选出来的呢原来,集光之夜前夕,中国移动咪咕上线了一组冰雪游戏PK活动,总积分胜出的60位用户才能入选,享受最极致的元宇宙观演体验根据消息显示该活动持续到2月6日,登录咪咕视频搜索集光之夜打榜小游戏,当天积分排名前60的用户都能以玩家视角进入集光之夜体验游戏化的互动观演
这种游戏化互动观演体验,也同样要依靠中国移动5G云游戏技术来实现遍布全国的边缘节点,精细化的资源调度策略以及深度优化的RTC传输,极大程度地降低了画面渲染延迟,为观众提供了无比精致流畅的游戏化视觉享受,同时,AI大数据和池化加载技术,也让所有游戏指令在云端完成预加载和秒级启动,观众的游戏ID能够在虚拟舞台场景中更加顺畅的进行游戏操控,真正做到即点即玩
集光之夜的举办,是中国移动5G云游戏技术在互动娱乐领域的一次成效突出的数智化应用,也是中国移动基于5G科技贯彻落实《带动三亿人参与冰雪运动实施纲要》,大力推广冰雪运动的一次成功实践推动传统产业走向数实融合,构建数字孪生体的核心工具,已越来越广泛地被应用于各个领域可以预见,中国移动5G云游戏技术将加速文化产业的数智化进程,全方位迭代大众的数智化互动娱乐方式,将数字孪生,虚拟原生,虚实融生等深度交互的潮流玩法不断送到大众面前
03
Meet GU超写实音库让谷爱凌为你读书
冬奥前夕,谷爱凌凭借其超高天赋,独特的成长经历,以超高话题热度跃入大众视野,成为此次冬奥备受关注的一员日前,谷爱凌在自由式滑雪女子大跳台比赛中夺金,创造历史性一刻,2月15日,谷爱凌在自由式滑雪女子坡面障碍技巧赛中于第三跳绝地反击,成功摘银hellip,hellip,谷爱凌的后续比赛,更是被寄予厚望
作为此次冬奥的新晋偶像,观众对谷爱凌的呼声居高不下,更是标榜谷爱凌所展现出来的优秀品质,引领新时代励志人生的价值走向为实现观众与奥运冠军零距离接触,随时随地听心中所想,中国移动咪咕在咪咕阅读首发以谷爱凌为原型的Meet GU 5G冰雪数智达人
数智达人Meet GU的声音基于新一代个性化语音合成能力研发而成,在音色和发音风格方面都与中国移动5G冰雪推广大使谷爱凌本人极为相似,实现了让奥运冠军谷爱凌成为你的专属主播。
新一代个性化语音合成技术基于深度学习在语音流畅度,真实度,情感度方面深度优化TTS,训练后的个性化音库可获得与原声极为相似的效果。
伴伴随着谷爱凌在此次冬奥期间的完美表现,Meet GU超写实语音获网友热议有网友称居然能听谷爱凌读《庆余年》想听谷爱凌读唐诗三百首hellip,hellip,青蛙公主谷爱凌的超写实个性化音库掀起一阵听书热,促进了文化的传播
此外,咪咕公司联合北京交通广播打造首档元宇宙冰雪音频节目《荣耀时刻》中,Mr.Q小强携手谷爱凌数智分身趣聊冰雪运动,提升观众对运动科普的接纳度,助力观众畅享冬奥赛事。
除了在Meet Gu超写实音库的应用,个性化语音合成能力还可通过采集用户声音进行模型训练,仅需几分钟,即可复刻用户的声音,生成专属于每一个用户的超写实语音包,实现用户自身成为声音主播。
科技改变生活,超写实个性化语音合成让听你所想变为现实。
智能创作篇
01
智能横转竖助力冬奥热点视频智能创作
伴随着各平台不断爆出的热搜,持续助推冬奥整体氛围日渐高涨,人们对这场全民盛会关注度也越来越高冬奥期间产生大量精彩视频片段并在短视频平台广为传播可是,这些短视频多为横屏视频直接裁剪而成的横屏片段,在短视频平台播放时,不能铺满整个画面,在人物关键动作,表情等细节信息的凸显方面表现不足,视频的观赏性,感染力,传播性受到限制相比之下,竖屏视频可以更好的放大精彩细节,更有助于在短视频平台传播
对此,中国移动咪咕自研智能横转竖功能,可实现竖屏视频的自动生产,提高竖屏短视频的生产效率。。
智能横转竖基于计算机视觉技术实现视频的深度理解,通过人物识别,动作识别,情感识别,场景变换识别,音乐识别,核心区域定位等AI能力多维度分析视频,自动定位包含精彩内容的时间段和画面位置,完成从视频分析,裁剪到合成全面屏视频的全部过程同时,具备后处理能力,可智能识别全面屏视频字幕,基于语音转写自动添加字幕,支持自动消除水印,logo
智能横转竖通过对视频核心区域的精准检测,保证了高速运动场景下核心目标的自动捕捉通过对精彩片段连续性的判断,预测,对动作和画面情节变化趋势的分析,实现对精彩片段的准确定位,保证前后主体意境连续性解决了冬奥赛事场景下人工裁剪面临的视频核心区域定位困难,精彩片段连续剪辑难度大的难题
。