境腾科技COO&联合创始人程凌在本次大会上发表了题目为《混合现实工业元宇宙与 AI 赋能》的精彩演讲。

程凌说：境腾科技产品方案以XR技术连接虚拟与现实，打通核心AI能力，使用数字技术设计、构建、运营和优化物理系统，人类和人工智能共同合作，提升见解，帮助做出更明确的决策。

大家下午好，我是来自境腾科技的联合创始人程凌，前面几位嘉宾分享了各种各样的元宇宙，围绕文旅、文化、游戏、娱乐、社交、品牌宣传、招商引资等等，但漏掉了一个很重要的场景——工业。我今天就讲讲工业元宇宙，以及我们如何用人工智能赋能工业元宇宙的应用。

境腾科技位于上海闵行区的紫竹高新区，除了上海总部我们在苏州和昆山有元宇宙交付中心，同时在成都、重庆也有西南区的元宇宙中心。华南地区主要是在深圳，我们暂时还没有到华北成立分支部门，不过我们现在全国各地的客户都有。

我们这家公司核心专注的技术方向就是围绕XR技术开发企业级的解决方案，我们现在最多的企业场景是工业制造业，还有职业教育这样的一些场景，也会涉及到部分金融、医疗业务的场景。

我们公司是在2017年成立，现在是第六年，在这段发展的历程中我们始终秉持两条路的解决方案，这两类的解决方案我们都会做。我们已经发布了一系列的标准化SaaS产品。

同时我们也在今年成为了GSMA通信协会成员，我们在很多的业务场景和运营商有过很紧密的项目合作。就在今年，我们也在韩国交付了跟5G相关的医疗远程培训系统，这也是由韩国运营商进行主导的项目。

在技术这一块，我们研发的主要技术包括XR领域里面的方方面面，VR、AR、MR等跟虚拟现实混合现实相关的，我们都会进行技术上面的研发。同时对于各种各样的硬件平台产品我们也有很多的适配，里面不仅包括国际的一线品牌，也包括国内很多的VR/AR眼镜，甚至包括一些信创的适配的设备。我们知道现在在国内企业特别是国有企业，他们对信创的概念有很大的需求，所以不仅我们的解决方案要信创化，而且硬件的设备也要信创化，我们就会推出完全满足信创需求的整体XR解决方案。

我们针对不同企业和客户的需求会推不同的硬件设备，我们不会绑定某一个设备和产品上，我们会以开放合作的方式把最佳适配的硬件设备给到企业客户。

我们会支持各种各样的XR的经典应用场景，远程协助、培训教学、沉浸式会议、辅助可视化展示、多人协同以及销售辅助等等。这些比较经典的XR的解决方案我们都会去做。

前面讲得比较抽象，我们再来看看具体的产品框架，这边是我们现在的一个技术底座，是一套XR+AI的技术底座。在左边的这部分主要是我们从2017年一直研发到现在的基于纯XR技术的一套解决方案，右半部分则是从去年年底开始逐渐融入的AI相关的解决方案。
我们拥有一套完全自主研发的云平台PaaS系统，在这套云平台上我们能够实现虚拟人技术、3D模型的渲染、空间的协同、音视频的通信等等一整套的服务，集合在我们称为HoloLogic的平台上。基于此平台，我们又研发出一系列的SaaS产品，并且可以提供给企业定制化的解决方案。我们能够以非常灵活的方式进行部署，并不是所有的方案都要上云，甚至可以直接部署在企业的本地化环境里面。

AI这一块我们是从去年年底开始进行研发的，我们现在也可以提供SaaS版本AI的服务能力，以及私有化部署AI服务的能力。

这个是我们把刚才那一张大图概括抽象一下形成的1+1+N战略。这个战略中的第一个1代表刚才我提到的PaaS平台，第二个1是指一整套的SaaS产品工具集，对企业用户来说只要订阅一个账号马上可以用的XR解决方案。最后一个N就是指为各种不同的企业客户的具体业务情况去定制开发的解决方案。

现在我来逐个介绍我们的SaaS产品工具集。第一个产品是JTRA，它适用于远程协助的场景，比如在工厂里面出现了一些故障情况，但是设备专家又不在现场，那我们就可以通过多种XR的设备直接呼叫远程的专家给现场工作人员提供远程支持。在这个过程中，不仅能够实现音视频的通信，同时我们的专家在远程可以直接做出空间定位标注，标注信息能够直接出现在现场设备指定的位置上。比如说这个设备有一排的操作按纽，远程专家能够画一个圈准确标定出来应该按哪一个按纽。这一套产品也是我们现在使用最广、用户采购量最大的标准化解决方案。

第二个产品是JTWorkflow，偏重在培训教学。这套培训的方案我们其实是提供给企业一个可以自己编辑XR教学课件的编辑平台，用户用了我们这个产品以后可以完全自主编辑出复制的XR培训内容，比如说设备的操作流程、维保流程、紧急情况处置办法等。我们能够实现两种效果：一种是虚实结合的培训效果，虚拟的信息叠加在实物上，展示操作步骤；另外一种是完全虚拟化的操作培训，可以把设备全3D的模型展示出来，并基于虚拟3D模型进行仿真操作。我们只要创建一次课件内容，就可以实现虚实结合和纯虚拟教学两种体验。对用户来说创建课件也比较方便，完全不需要任何的代码就可以编辑出来这样的一套培训解决方案。

第三个产品叫做彼临，它能够实现混合现实全息会议的概念。我们这套解决方案应该是国内第一个真正意义的混合现实会议产品，只需要每个用户一张头像就能生成三维立体的形象，并且不管你在哪里，加入到这个会议以后你马上能够直接出现在其他参会人员的眼前。比如说我今天站在这个舞台上，戴上一个XR眼镜后，在北京甚至国外同时参加到这个会议的参会人员就可以以全息形象出现在我的面前，并且我们两个人可以协同操作同一个对象。比如说前面放一个三维模型，我可以操作，他也可以操作，所有参会人员可以协同操作同一个物体对象，我能够清晰看到对方是向我走近还是说转身走掉了。并且所有的手部动作完全可以实时还原在全息虚拟人上面，给大家一个真正的面对面交流的感觉。

除此以外，我们跟很多工业企业客户做过大量XR的数字孪生解决方案，这部分很多都是通过定制化去进行开发的。我们通过数字孪生建模，可以把大到一个工厂和园区，小到一个产品设备，都完整地还原出来。我们也可以把数字孪生的模型与工厂里面实时生产的IoT传感器进行连接，用传感器的数据反向驱动数字孪生的工业模型。即便是在不进入工厂里面的情况下，我看到的数字孪生的工业模型都能够非常清楚地展现出这个工厂里面发生了什么情况，现在哪些机器是在运转，哪些机器上有告警信息出现，所有的信息都在数字孪生当中得到体现。

我们把这套数字孪生的解决方案应用的现场，就可以实现混合现实巡检的效果。我戴着混合现实的眼镜在车间里走动，看向哪一个机器设备，这台机器上面的各种各样的数据参数信息都会直接出来，并且像隐藏的管线、隐藏的传感器等信息也会直接出现在我的面前。

前面讲到的几个产品和案例是我们前几年开发的纯XR的解决方案，从去年年底开始我们逐渐为这些方案赋能AI，加上AI的工业元宇宙解决方案有了新的变化。这边我先简单介绍一下，XR的技术，特别是头戴式的眼镜，其实是扩展了我们的感觉器官，特别是视觉和听觉，能够把更多的信息展现在眼前，让更多的声音出现在耳朵里面。加上AI技术以后，它其实又扩展了我们的人脑，帮助我们的人脑去处理各种各样复杂的信息。所以我们这边提了一个双脑协同的概念，通过头戴式的AR、MR眼镜能够把XR技术和AI技术很好融合在一起，给人一个非常自然的体验。

拿我们刚才讲到的三个产品来说，第一个是远程协助的产品，在这个产品当中原来是纯XR的解决方案，人呼叫人，远程专家还是一个真人在那边指导我。当我们融入AI的解决方案后，不仅是由人指导人，还可以出现AI指导人，纯AI驱动的协助。系统可以通过前期人协助人的场景当中去分析他们的对话，能够自动地提炼出来这个问题是一个什么问题，对应的解决方案是什么，具体操作步骤如何。然后把每一次的故障和每一次的解决方案自动归档变成一个知识库系统，下次当用户遇到同样的问题时，解决方案会自动出现在用户面前，你不需要呼叫专家，我们的AI系统直接会把答案告诉你。

第二产品用于培训场景，培训过程中我们原来这套课件还是需要人来编辑创建的，每个步骤都需要一步一步在操作平台上编辑出来。现在结合AI之后只要输入一些文档资料，比如说企业里面原有的一些SOP文档、产品说明书等，把这些文档上传到系统里面，通过分析处理可以自动生产操作流程步骤，就可以节省大量培训课件编辑的时间。

第三个产品用于远程会议场景，在远程会议中，我们原来的彼临产品方案还是人跟人之间的交流。虽然我们看到前面是一个全息的虚拟人形象，但是它也是由真人驱动的。现在加入AI后就完全可以是一个AI的虚拟人出现在你面前跟你交流。这个场景我们现在看到比较明确的场景是用于专业客服的训练。比如金融行业的专业客服，原来是人对人之间的训练，现在我们可以通过具备AI的虚拟人模拟有一个客户，让她来提问你来应答， AI系统可以分析你回答的准确度以及回答时的情绪，并给出评分。

我们现在的AI解决方案有两个版本，一个是基于SaaS，我们采用的是OpenAI 的 ChatGPT接口。另一个是私有化部署方案，我们使用的是基于LLAMA2的开源大语言模型。

最后有一个视频，这个是我们为某一个消费品制造企业开发的工业元宇宙案例，它里面结合了刚才讲到的多方面的解决方案。在工厂车间里面，能够实现MR产线巡检，工人戴着MR眼镜走进车间，生产设备上的实时数据信息可以自动的呈现，同时我们可以把整个车间变成一个数字孪生的沙盘，不在工厂里面也可以打开数字沙盘看到现场车间里面的具体情况。通过现场传感器采集的数据会驱动整个数字沙盘模型，让它像真实车间一样进行运作。同一套方案中我们也实现了远程协助的功能以及远程参观的功能，在现场参观的画面可以通过网络进行直播，远端用户打开一个网页就能看到虚实结合的现场画面。再结合一些AI的扩展能力以后，还能够实现智能运维等方面的效果。

以上就是我今天分享的主要内容，谢谢大家！如果有工业元宇宙方面的需求，可以联系境腾科技，谢谢大家！