元宇宙是一个读屏的时代,无论通过手机屏幕,还是通过户外大屏,都是通过视频、音频的交互进行体验。未来是视频融合的场景,5G通信、XR、8K、AI、AOT是整个数字底座的重点,通过沉浸式实现低延时、高保真、实时交互的智能化体验。
2022年11月10-11日,由深圳市工业和信息化局指导,中国移动通信联合会主办、BIC EURONOVA(比爱西)支持、众视Tech承办的2022全球元宇宙大会深圳站在深圳南山区隆重召开。大会包括开幕式、论坛、项目展示、成立深圳元宇宙研究院、成立深圳元宇宙创新产业联盟、发布“灵境杯”全球元宇宙创新大赛入围企业、推荐深圳最具潜力元宇宙案例、启动欧盟科技创新大奖赛、《全球首创元宇宙创新示范100强案例集》等系列重要活动。
在大会的元宇宙主题论坛上,深圳市九洲光电科技有限公司技术总监李凯峰发表了题为《九洲天彧灵境XR元宇宙生态解决方案》的精彩演讲。
演讲内容
九洲光电作为一家军工国企的企业,隶属于九洲集团,总部在绵阳,业务范围主要在军事、电子雷达、5G通信,负责LED屏相关的系统技术。
元宇宙是一个读屏的时代,无论手机屏幕,还是户外大屏,都是通过视频、音频的交互进行体验。九洲天彧灵境XR元宇宙解决方案也是基于这个理念。
从大屏的建设来看,未来是视频融合的场景,通过各种视频的融合,可以统一展示在超大屏的场景下,对于运维、基础设施、数字孪生在未来是非常大的市场,元宇宙对生活和工作的改变非常巨大,未来是视频融合的场景,5G通信、XR、8K、AI、AOT是整个数字底座的重点,通过沉浸式实现低延时、高保真、实时交互的智能化体验。
从系统方案来看,通过超高清XR LED大屏、毫米波无线传输等先进设备形成8K图像采集及传输处理,线上进行高端内容的制作,实现具有强大综合能力的创作平台,打通线上线下,形成数据相同超现实的沉浸式用户体验。
九洲光电希望实现1+1+3的模式,1是智慧屏与沉浸式体验,3是服务商角色,通过智慧运营服务,加上内容生产服务以及生态集成服务,实现元宇宙的垂直应用,涉及的技术包括交互式、数字孪生以及生态集成服务。
解决方案
沉浸式内容生产服务平台
沉浸式内容生产服务平台以九洲LED显示系统为载体,采用8K+5G+AI技术提供8K高清画面呈现,通过视频、语音、体感等AI交互技术和XR技术的虚实交互体验,联动摄像机、舞台灯光与摄像机轨道等设备为客户提供一个具有超高清、高保真、低延时、多感交互的全真沉浸式声光电综合显控一体化整体解决方案。
其场景全部由LED沉浸式巨幕展现,可在舞台上或者摄影棚内任意切换,无需额外进行布景或者外出取景即可完成整个场景搭设。
LED巨幕舞台创造了一个沉浸式的拍摄场景,演员或观众能与虚拟出来的真实场景直接互动,与传统的空旷舞台相比来说环境更真实,提升整体的沉浸感。
LED沉浸式巨幕的场景展技术与回放技术大大的降低了视觉特效部门的后期处理周期与难度,从而使制作的成本大幅度降低。且无需现场额外再布景,可以减少舞台及片场的人手以及成本。
在技术方面,九洲光电从内容收集到交付硬件、元宇宙引擎、结构输出打通整个元宇宙的技术,8K+5G+AI显控提一体化技术实现全真高清影像,智慧交互式互动,达到沉浸式体验,依托VR、AI、区块链技术,构建一个拥有超时空的社交体系、极致沉浸的体验、开放多元内容生态、随时随地低时延连接、虚实交互的数字平行世界。
数字人管理平台
九洲光电目前正在与中国移动、中国电信对接BOSS系统,从大厅的LED一体机,通过数字人语音识别、语音播报,对接BOSS系统后,很多业务可以实现在线或者无人化办理,通过这种方式可以节省很多人工,同时从数字人应用的角度来说,它能够带来很多线下的应用,比如说手机端或者移动端的应用,这对传统行业的优化和升级。
九洲光电的数字孪生是物联网的一种升级管理方式,它带来的实时感知预警以及开放的协议通道给元宇宙带来很好的数字底座,通过物的管理实现真正的实时交互和更好的体验。利用数字孪生、物联网、人工智能、大数据技术、区块链等多种先进技术,建设九洲光电天彧大总管显控平台,实时监测LED及周边环境的健康运行状态,实现设备监测、可视化展示、工单管理、资产管理、应急管理等功能。
未来50%以上都有线上的会议,线下和线上会议的结合是未来企业在高效沟通中必备的模式,为此九洲光电推出一套天彧雅系列的会议一体机,实现了5G和wifi6的融合,支持AI方面的手势以及语音识别,同时设计了虚实结合的会议系统。
会议室从线下来说包含智慧门口屏、无纸化系统、沉浸式的会议系统、多媒体以及LOT融合物联,从门禁来说在线上也提供相应的服务,通过线上线下的结合,给企业进行效率的提升。
场景应用展示
虚拟会议室:通过混合现实技术,打破2D屏幕展示束缚,将远程会议用户置入同一虚拟空间,跨越物理局限,实现从二维到三维的本能沟通交互。用户通过VR眼镜,接入VR会议,使用虚拟形象开会,视频连接线下真实会议室,线下会议室与VR会议室中的参会人员能够彼此互相看见与交流。
VR智慧教室:VR智慧教室采用VR技术设计沉浸式解决方案,可进行教学,也可用于拓展体验。课程内容丰富优质、全沉浸、科技感强,方案灵活配置,轻松部署,应用落地成本。
电子沙盘:硬件基础包含全息沙盘、3D弧形大屏、多种AR设备、VR设备。通过大屏和全息沙盘提供可视化呈现与浏览交互。
通过3D的沙盘以及沉浸式的建设,可以提供教育、娱乐以及军事相关的产品和服务,对元宇宙来说,结合线下的体验是不可或缺的。
XR仿真实训的项目
传统的展览展示:创意显示一体化解决方案根据现场建筑主体结构、建筑内部结构、外观需求(例如弧形需求、球形需求、异形需求)、内容需求(例裸眼3D)与使用需求(例电源控制需求、亮度自动控制需求、内容播放时间控制需求、显示控制需求、状态监测需求)来定制的一体化的解决方案。
虚拟演播厅:通过摄影机追踪系统和三维实时渲染系统技术,将导演和观众从视觉带入虚拟的世界中,通过渲染技术,将模拟出来的前景显示出来。借此,可以将xR对现实的世界进行扩展延伸。
一屏统显,生产数据实时呈现。在智慧制造方面,对于车间流水线所有产线做虚拟仿真,通过数字孪生的技术,可以把整个场景呈现给客户,更高效管理故障、产品。
8k超高清LED屏赋能远程精准医疗:在医疗方面,通过8K超高清LED屏幕进行交互式的传输。8K超高清LED大屏在中央电视台以及相关的晚会都得到应用。
九洲天彧大总管:九洲天彧大总管5G运维系统+8K大屏+AVS3国产编码传输+CCTV8K高清节目源系统方案。
河南广播电视台600平米XR的演播厅:通过对立面屏、地砖屏以及灯光摄像控制系统一体化设计,实现XR软硬件系统方案交付。
九洲集团虚拟平台项目:系统设定虚拟发布会、虚拟会议室、虚拟展台三个应用场景。
横店的水底屏:横店影视城梦幻谷水下LED屏位于横店影视城内,演出充分运用多媒体、激光、水浸屏等高科技手段,利用屏体的画面变化、层次叠加、水流等结合舞蹈、杂技、魔术、影视特技等表现形式,以炫目的服装、优美的舞姿、震撼的音乐、惊险的奇技、梦幻的色彩,呈献出一台精彩绝伦的艺术盛宴,让您在惊喜欢乐的氛围中领略博大精深的中国易经文化。
航空机场仿真的大屏幕:虚拟仿真模拟综合实验室能使航空学生作为一个操作者进入一个由计算机系统生成的交互式三维环境,结合360°大屏, 具有视、听、触等多种感知,通过使用各种特殊的交互设备,与虚拟仿真环境进行互动,全方位地获取虚拟环境所蕴 涵的各种空间信息和逻辑信息,使之产生身临其境感觉的交互式视景仿真和信息交流的虚拟现实平台。
元宇宙教育仓:元宇宙研学体验仓集成沉浸空间、全息教师、光影互动、VR探索、AR混合五大板块,搭载定制化的教育元宇宙云平台,内嵌百种中小学数字媒体教育资源,为中小学数字媒体教育资源,为中小学生提供集成式的元宇宙体验。
在演讲的最后,李凯峰表示元宇宙是非常大的产业链,并不是靠一己之力就能完成的,更多的是需要与生态企业的强强联合,一起讨论和尝试,通过应用的方式把企业的优势和特长发挥出来。
责任编辑:Johnny