6月29日下午,亚太CDN产业联盟、众视Tech 分布式云网、全球分布式云联盟联合主办的音视频产业技术峰会在北京隆重召开。大会聚焦音视频技术最新应用与场景拓展,为推动音视频产业高质量发展,推动全产业链拓展“元宇宙”世纪下的产业风口与延展空间,携手全产业链探索“AIGC”时代下音视频与千行百业的融合发展新赛道。4K花园副总裁兼前端技术总工程师于路带来题为《8K超高清与VR技术应用探索》的主题演讲。
4K花园副总裁兼前端技术总工程师于路
于路在演讲中指出,4K花园成立于2016年,是国内最早开始做超高清的公司,初期以打造4K内容生态为主,是国内最大的超高清内容集成和分发平台。随着5G、VR元宇宙等相关产业的发展,4K花园发展成为一家以超高清技术为底层驱动的应用型科技公司,秉承“超高清改变世界”的愿景和使命,以领先的超高清技术优势,在视频、户外LED、VR元宇宙、5G通讯及超高清硬科技创新研发等各商业领域中拓展与落地超高清应用。同时,4K花园联合上下游合作伙伴聚焦解决产业链前端“卡脖子”问题,将国产化的硬件研发制造和应用相结合,持续深耕与赋能超高清内容和行业应用市场。
一、8K内容创制
超高清视频领域的发展一直追求的方向是希望提供给观众临场感和沉浸感体验的内容和应用,无论是做4K、8K,围绕的都是大屏的场景,4K花园希望为更大的屏幕提供更有沉浸感、更高质量的内容。
伴随着HDR、宽色域等音视频相关技术的发展,4K花园从2019年开始启动打造8K内容生态。一方面聚焦精品8K内容;一方面联合合作伙伴协同赋能8K内容生态,逐渐建立了规模化内容制作规范和标准。直到今日,4K花园已经在8K视频领域深耕多年。现在的高端内容创制,基本上都按照视频领域最高的技术规格8K高帧率、HDR、宽色域+全景声的制作标准。
在纪录片领域,4K花园这几年联合合作伙伴打造了《喜粤之味》、《雨林之子》、《万物之生》和《千年陕菜》等精品IP。在视频应用领域,4K花园定位高端8K精品内容,今年在8K内容方面的规划和内容主要是,围绕中国的边境线的人文美食相关特点去打造相应的优质内容,制作8K纪录片《边境线上的好味》、《万物之生》第二季等。
二、国产超高清转播车
工信部在2019年发布了中国超高清制作核心设备领域的国产化替代计划,提出超高清视频前端领域的核心元器件及设备、系统希望尽早实现用国产化产品来完成替换。2021年4K花园牵头在广东建立了超高清视频前端系统创新中心,联合上下游合作伙伴聚焦解决产业链前端“卡脖子”问题,打造国产化的5G+4K/8K+VR大型转播车系统,是4K花园在硬件研发和技术应用层面另外一个方向的拓展。
截至2022年底,4K花园核心技术团队负责建设完成并向创新中心交付两辆大型超高清转播车:第一辆为5G+4K转播系统,第二辆为5G+8K+3D VR概念型转播系统。5G+4K/8K+VR超高清融媒体转播车的前端系统围绕摄录设备、转播系统(5G+)、核心处理系统、光学镜头、内容制作创新、5G融合应用等六个方向来做相应的解决方案;在设备选型方面,超高清转播车的8K超高清视频系统链路相关核心、关键设备(镜头、摄像机、监视器、导播台、录像机、编码器等),首次实现全国产化;同时,充分考虑国内技术发展趋势,围绕5G应用、元宇宙超高清VR现场直播等需求进行了针对性的定制开发。
大型超高清+融媒体转播制作系统是国内首套以国产8K设备为核心设计集成的,该系统是国内首套可同时进行广播级多机位8K HDR、8K 3D VR两种模式现场转播及全景声音频现场制作的转播系统,满足大型活动、顶级赛事的5G+8K高规格直播需求。
三、8K+3D+VR技术
超高清的基础就是视野决定了分辨率,高清给观众设定的视野范围是30°视角,4K是60°视角,8K是96°视角,而VR是180°及360°视角,随着VR的视野增加,有效画面的像素就得增加,观众才有更好的视觉体验。
2020年广电总局发布《5G高新视频-VR视频技术白皮书(2020)》
8K对于平面影像是巅峰的规格,对于VR全景沉浸式视频来讲是基础规格,8K的影像在360°视角下提供给观众的眼前90°范围也只是高清分辨率水平,如果要达到全视野下的超高清水平,总视频分辨率需要达到30K,这也就为超高清未来技术指标的进一步升级提供了重要的场景需求。而音乐现场、大型活动、体育赛事等场景非常适合通过VR技术进行现场直播,观众希望能够更近距离的感受明星的魅力,这是沉浸式视频技术带来的沉浸感具备的价值。
基于大量多种类的沉浸式内容制作经验,4K花园认为如何平衡临场氛围感与内容导向性对于做出好的沉浸式节目体验非常重要,相比于360°的环绕式包围感可能更适用于“风景漫游”体验,180°VR使观众更关注前方,更有利于专注于主体的表演;同时,3D VR方式可以营造逼真的立体空间,加强临场氛围,可以与VR拍摄技术紧密结合,180°3D VR兼顾了氛围感和指向性。专业级180° 3D VR摄像机,机身小巧,可以近距离摆放在舞台周围,不会影响正常表演,并且能够为观众带来VIP视角体验。环绕式机位布设,无缝覆盖舞台表演;180°镜头指向清晰,主体明确,利于导演镜头选择调度。
由4K花园订制研发的8K 3D VR摄像机,与自主开发的“满天星”8K VR摄像机硬件处理平台组合,支持:8K 50P 3D VR高标准影视级拍摄和迅道化传输;摄像机IP远程信号传输和遥控,广电级别的画面精细调整;行业领先的实时VR ERP校正和实时8K VR头显效果监看、支持毫秒级延时控制调整,保证广电级系统同步要求;摄像机处理平台支持VR源素材录制,为专业后期制作提供便利;支持广电级8K 12G-SDI X4基带输出,可直接接入广电8K导播台和转播系统。
四、8K 3D VR现场转播
去年年底和今年3月份,4K花园在上海和北京两站跟中国移动动感地带合作了街舞大赛总决赛,为了满足精彩赛事的制作直播要求,启用了6套满天星服务器负责现场实时8K 3D VR摄像机的控制和VR ERP及误差校正和监看,保证最高质量的8K直播信号品质。通过4K花园自主研发的8K VR编码器,向咪咕推送了最高规格的8K分辨率3D VR直播信号,满足了8K高规格实时直播的稳定性和高性能实时编解码需求,同时也针对3D VR直播影像特征开发了实用功能,以保证VR直播中可以实时监测信号质量和标准,确保观众观看8K立体VR影像的沉浸感和舒适感。
8K 3D VR直播技术和定制研发的8K 3D VR直播系统、8K满天星直播服务器、8K VR推流编码器,是4K花园大力推广的超高清新型应用解决方案和专业系统级产品。4K花园技术团队基于多年来在超高清、3D和VR方面的直播制作技术经验积累,进行了细化的功能设计开发,力求为专业化制作提供稳定、专业、简洁、直观的8K和VR流程标准,实现高性价比的顶级规格内容创制和直播能力。
于路最后总结,4K花园围绕超高清技术,可以为每个项目量身定制超高清和VR内容直播制作方案。这套方案可以针对4K、8K、横屏、竖屏,也可以根据5G场景需求进行自由视角直播,以及180 3D和360沉浸式视频现场直播,观众可以自由选择不同的内容观看终端进行多元化内容体验,满足未来电视对未来不同的终端用户提供丰富内容选择的需求。