推动超高清+沉浸式+AIGC技术应用,4K花园亮相2024 UWA Summit

2024 UWA SUMMIT暨世界超高清视频产业联盟会员大会于11月28-30日在深圳举办,大会发布了超高清九大产业发展趋势及十六大应用场景,并同期举办“智享未来 共创菁彩”同名主题超高清产业生态体验展。国内领先的超高清视频行业龙头企业4K花园作为UWA联盟会员单位受邀参会,与行业伙伴携手推进超高清视频技术创新和产品应用落地,加速推动超高清产业高质量发展。

本次展示,4K花园带来8K(VR)精品纪录片&3D沉浸式&空间视频拍摄和现场直播解决方案,获行业广泛关注。论坛上,4K花园副总裁兼前端技术总工程师于路发表《超高清、沉浸式、AIGC内容创制与应用探索》主题演讲。5G+超高清、XR、AIGC等技术的融合应用彰显数字时代的独特性正引领着“未来电视”的最前沿趋势,将逐步在娱乐演艺、体育赛事、数字文旅、在线教育/培训、远程医疗、移动直播等领域渗透,在4K/8K超高清、3D沉浸式视频、空间视频等各需求侧给观众带来越来越清晰、沉浸交互式的创新体验。

精准高效,3D沉浸式&空间视频拍摄方案随意切换

据了解,本方案是行业内第一款支持8K 3D VR沉浸式视频和3D空间视频拍摄和现场直播的解决方案,4K花园通过定制开发8K 3D小型化、超低功耗VR摄像机,在手掌大小的机身中实现了内嵌双6K S35画幅CMOS和电影级画质输出能力,搭配后端“满天星”8K VR实时处理服务器,仅通过一根网线,就可以在舞台上、赛场边、活动现场、影视拍摄地安置多机位的小型化8K 3D VR相机,通过远程高质量信号传输、实时摄像机遥控、3D误差和舒适度校正、VR ERP处理、影调调整、双目和声画同步性校正等专业级功能,保证高画质、高精度、超低延迟的8K 3D VR现场直播效果。该系统还支持广电基带SDI输出接口,可以直接与专业8K视频导播台和录像机连接,实现高效的专业直播或后期制作,从根本上解决了VR制作流程复杂、成本高、周期长等问题,保证高质量的优质VR内容快速生产。

4K花园副总裁兼前端技术总工程师于路表示,“4K花园在超高清专业视频制作、直播、3D VR制作技术和实践经验方面都有长期积累,本方案是基于前期与业内XR平台等需求方的反复沟通后量身定制的,专为周期性、批量化的8K高级别的沉浸式视频内容生产打造的标准解决方案,通过简化、便携、高规格影像指标及高稳定性要求来定义前端8K 3D VR拍摄终端,将高强度复杂处理功能后置,通过大量的细节优化保证了整体系统的运行流畅和成本可控。”

值得一提的是,该解决方案还可根据不同的内容需求进行规模调整。例如,通过摄像机镜头调整,可以直接从VR切换为3D空间视频制作,用于新型3D显示终端,如裸眼3D手机、PAD、AR 3D头显、LED 3D大屏等载体的空间视频内容生产,通过群播系统、8K定制球幕LED、VR播出平台实现线上线下沉浸式体验。

目前,全行业内8K超高清前后期制作设备与技术还处于尚未普及阶段,业界普遍缺乏8K VR精品内容规模化生产和制作经验,制作成本居高不下。自2022年起,4K花园先后与中国移动咪咕云VR、爱奇艺奇遇VR、字节跳动PICO等多个大型VR平台展开合作,实现了8K级别2D/3D 180°或360°沉浸式VR大型赛事、交互式节目应用,为高效优质内容生态的初步建立进行全方位技术赋能。近期,4K花园在一个大型港澳主题的4K 3D空间视频项目中进一步探索,加速3D沉浸视频与空间视频的落地应用步伐。

AIGC加速融合,为超高清、沉浸式视听应用降本增效

日前,工业和信息化部等十二部门印发《5G规模化应用“扬帆”行动升级方案》的通知,其中提出,加快超高清、沉浸式等高新视听内容智能生产、云上制播、快捷分发、大小屏联动以及车载音视频等场景5G规模应用,支持视频平台加大高清视频和4K/8K超高清视频内容供给。

随着需求的快速增长,4K花园近几年在5G+超高清与各商业领域中的规模化应用在国内也获得率先落地,并与超高清创新中心平台携手共同打造国产化前端超高清转播系统和核心硬件解决方案;面向新一代的VR/AR头显、裸眼3D等创新终端,重点开拓高规格的3D沉浸式视频和空间视频专业化制作解决方案;同时,4K花园通过AIGC技术全面优化生产链条、辅助提升内容创意,推出立体形态“未来电视”新媒体内容创制方案,将超高清技术和产业发展融合,带动端到端产业链各环节价值进一步提升。

于路表示,“将AI技术植入标准化节目拍摄和制作流程,建立更高效的管理流程,实现降本增效。”通过AI+人工结合的方式,实现4K/8K调色流程、高质量的4K/8K超分流程的优化,规模化老电影、模拟素材瑕疵修复,可快速实现4K/8K 2D转3D AI影像深度解析制作,大大提升工作效率。

应用层面,4K花园采用4K AI超分技术修复经典老片,并通过AI转换技术进行2D转3D,生成精彩的立体影像内容,让老片再获新生。此外,4K花园将AIGC应用在超高清视频彩铃领域,利用AIGC技术进行数字人创建和动画短视频内容设计生产,将人工智能与后期图像视频制作融合,通过计算机视觉算法对图像进行加强处理,实现图像的修复、人物风格转换、人物修复换脸、2D生成3D等。

“AIGC能够通过对图像、视频的深度学习和分析,实现更精准、高效的处理,不仅可以提高工作效率,节省人力成本,还可以赋能出更加优质的服务和产品。”于路说。

4K花园作为一家以超高清技术为底层驱动的应用型科技公司,正深入推动超高清与VR/AR/XR、AI等技术相融合的创新应用落地,面向不同终端和场景,探索“超高清改变世界”所带来的极致精彩,全力推动超高清产业发展步入崭新的时代。