科技日报记者 马爱平
日前，卡塔尔世界杯开幕，这也是央视第12次转播世界杯。据悉，央视频在本届世界杯首次尝试引入竖屏直播，并结合智能技术为观众提供更为丰富的观赛体验。
据央视频相关负责人了解，本届世界杯，央视频获得了国际足联（FIFA）独家授权，以竖屏制作能力为依托，推出了“竖屏世界杯”。相比起横屏观看世界杯，竖屏观赛更具身临其境之感。观众可以追随球员的运动，捕捉到以往观赛所难以观察到的比赛细节与球场情态，仿佛置身球场之中。尤其是对于专业球迷来说，他们的观赛需求不仅仅是一个个精彩进球瞬间，还有球队的攻守转化、球员的跑位变化以及精妙的技战术动作，竖屏观看能够更加精准地满足他们的需要。
“为了给用户带来更加多元的观赛体验，我们从赛事前方选取了近30路并发信号回传，并从中挑选最为适合竖屏制作的信号源，来进行‘横转竖’处理。世界杯比赛场次多、赛程长、流程密集，针对足协项目的特点，我们为世界杯量身打造了竖屏赛事画面标准，结合客户端UI设计，将视频裁切比例定为3:4，最终输出一个9:16的竖屏赛事画面，让图像表达与赛事画面、互动评论、赛事包装相整合，确保准确、高效地输送给观众更具沉浸感的画面信息。”央视频相关负责人说。
世界杯的竖屏转播，看似是呈现画幅的变化，但其挑战性并非简单的“横转竖”的视频裁切，而是涉及整个转播理念的创新与制播方式的全方位更新，要求有极高的技术掌控力和转播专业度。
央视频相关负责人介绍，首先是“智能科技+剪辑技术”的思维升级。竖屏赛事转播从画幅、方式和观感上都打破了受众的接受习惯与心理期待。为确保效果的可视性，其采用“人工智能+视音频技术”进行竖屏世界杯赛事的制作。在裁剪视频播出信号的同时，体育导演在构图语言和叙事方式上都切换竖屏的思维进行重新包装，以专业度升级应对技术挑战。其次是运营“内容+呈现”的适配。除了直播前线的技术升级，其在客户端上也针对本次世界杯AI生产平台智能剪辑内容运营，进行了界面适配。包括竖版横滑泳道的承载展示升级、底层播放页面的改造升级等。力图将内容变化与呈现模式相协调。
“竖屏直播”成为本次世界杯直播的最大亮点，可以看到大量的AI（人工智能）技术层面的参与。
“在拍摄对象跟踪上。由于足球比赛本身就具有距离远、跟踪对象复杂等特点，我们引入AI人工智能技术，以解决竖屏直播中运动员分散轨迹多变、足球体积小又运动速度快、目标相互遮挡、赛场背景环境复杂等问题。这就要求技术团队不仅熟悉赛事直播规律，更要懂得神经网络模型和算法优化平衡等技术运用。在竖屏画面处理上，AI智能横转竖系统自带高精度延时控制能力，可以将多路延时固定在一个相同的延时，相互间仅有毫秒级的误差。在无损画质的条件下，实时裁切渲染稳定每秒25-50帧的处理速度，保证不掉帧，这需要人工导播与机器技术的完美配合。在AI横竖屏剪辑生产上，赛事AI剪辑系统基于深度学习、ASR、NLP等技术，对场上画面、球员号码、赛事数据、环境声、足球轨迹、解说员语音等信息自动识别，并且有专业足球专家参与模型训练。经过上万场次的机器学习积累，实现对直播流画面视觉焦点自动追踪，并按横竖屏分辨率精准自动切条，将直播信号转化为数量庞大的点播视频素材和成品。”央视频相关负责人说。
在用户智能交互上。作为首款跨平台云渲染3D卡通智能语音助手，基于新一代多模态人机交互技术打造的“央小云”，依托智能ASR、TTS、NLP等AI技术，推动交互体验从原本的“单向观看”向“双向互动”演化，拥有了自学习和自适应能力。
