视频内容生产与消费创新

”

8月5日-6日，LiveVideoStackCon 2022 音视频技术大会上海站，和你一同开启通向未来的大门。

视频内容生产与消费创新

音视频技术在整体大环境的影响下，近年来呈现出迅猛的发展趋势，随着更多新概念、新技术的涌现，如元宇宙、虚拟沉浸式、VR/AR等，超高清视频、赛事直播等，未来从生产到消费音视频在哪些新的业务、产品及场景下能够创造更多新的价值是我们迫切需要思考的问题。

讲师与议题

近年来，视频形式的多元展现形式被更多行业所认可，视频技术在跨行业中的应用，被赋予了更多可能性与趣味性。不同行业间生产内容的多样性与差异化让视频内容升级的需求进一步提升，视杏科技作为专业的音视频技术服务商，提出了影视级的跨平台视频制作技术解决方案，并应用到了实际案例场景中。

随着人工智能、云渲染、AI自动建模以及智能驱动等相关技术的进步，数字人技术门槛正在逐步降低，并且在精细化程度、渲染质量等关键体验方面品质也在不断提升。华为云MetaStudio基于云桌面、云渲染、视频AI等技术，提供全流程、场景化的数字人服务。本演讲将结合华为云在数字人行业的实践经验，详细介绍华为云MetaStudio如何助力实现数字人自由。

超高清视频发展与人工智能、虚拟现实等新一代的技术深度融合，催生了大量新应用、新场景、新内容、和新交互的方式。超高清视频技术的演进从追求更清晰、更鲜艳、更流畅的高画质提升朝向更真实、更沉浸式的身临其境体验。这些都驱动着阿里云视频云在超高清视频生产与智能交互上的技术创新。

本次分享将分为三个部分，第一部分介绍阿里云视频云对超高清的全新理念和对创新技术的探索，包括画质增强、编码优化、和端侧处理技术等。第二部分基于超高清对真实和沉浸的追求，在数字虚拟人和智能交互上的发展。第三部分，将为大家分享阿里云视频云结合场景在超高清内容生产和智能交互的应用实例。

视频节目内容制作完成后，可能面临不可预知的一些变更，包括内容审核的变化、广告投放的追加等，需要对视频内容进行再次的编辑，包括遮挡相关内容或植入新的内容。 编辑的内容要求与原视频在运动、环境融合等方面实现高保真效果，同时对时效性有严苛的要求。这些都需要应用视频内容编辑的技术来应对挑战。

本次分享将分为五个部分，第一分部介绍视频节目内容后期编辑需求产生的具体原因以及时效要求，第二部分介绍技术实践中的难点与挑战，包括具有强烈镜头变焦的未标定相机、极端窄基线运动、高度运动场景等，第三部分介绍核心技术解决方案，包括微运动建模、特征跟踪策略优化、滑窗 BA、基于单应性的初始化等方法，第四部分展示在芒果TV热门综艺中的实际应用效果，第五部分介绍我们在电视剧内容编辑上的创新应用。通过以上五个部分将为大家系统的介绍视频内容编辑技术在芒果TV的创新实践。

携程日常对外投放大量的视频营销广告，人工制作视频成本高昂。携程基础AI团队研发了一套从图像理解到视频全自动化算法平台。首先根据图像分类、目标检测、文字检测、图像分割算法理解图像的构成元素，然后自适应地为不同图像元素添加不同的特效，包括更换背景、图像流动、三维重建、特效添加等等生成高质量的视频；同时根据场景内容生成文本，最终将文本通过语音合成播出。

该平台可以支持各种定制化视频生成任务，基本做到覆盖面广、灵活好用，能解决业务中大部分问题；在性能方面，平台可以做实时高效，每天处理百万级别图片。

疫情时代，我们面临着比以往任何时候都要层出不穷的突发状况，我们的人手随时可能缺少，A计划总是需要有个B计划甚至C计划，而场内观众的缺失使得奥运赛事能否被精彩呈现在全球电视观众面前变得至关重要。

本次分享将大致分为三个部分，首先将介绍如何把复杂的采集转码处理流程简化成“乐高积木块”。主要采用搭建积木块的方式定制自己所学的工作流程，流程定制好以后自动运转，把对人手的依赖降低到最少；其次，在拍摄过程中，摄制HDR的同时生成SDR并几乎同时实现对两者的编辑，提供更为丰富的色彩呈现和暗部细节选择，以能让观众身临其境；最后，将介绍当制作团队未在现场的情况下，是如何远程制作赛事花絮和精彩片段并实时呈现的。

随着音乐生产所依赖的设备成本不断降低，音乐消费者与创作者之间的界限正在逐渐消融。我们提出了一种新型音乐创作引擎。借助人工智能和即时演算技术，音乐的创作过程和体验过程得以实现融合：音乐将不再是视觉场景中的静态资源，而成为一种可以对用户即兴创作灵感做出实时响应的可交互元素。这使得更多的音乐消费者有机会体验置身于交互式音乐场景之中的趣味性。

本演讲主要介绍这种新型音乐创作引擎的研究成果和技术实践。

 

---

扫描图中二维码或点击阅读原文

了解大会更多信息

喜欢我们的内容就点个“在看”吧！

本文分享自微信公众号 - LiveVideoStack（livevideostack）。
如有侵权，请联系 [email protected] 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一起分享。