2016年5月30日上午,瑞金医院的手术室里面,中国腹腔镜外科首席专家的郑民华教授成功为一名八十多岁的右半结肠癌患者实施肿瘤切除手术,并首次通过虚拟现实技术(VR)对手术全程进行了直播。这也是国内首次实现用虚拟现实身临其境般“围观”的手术。同时为了更好地体现现实手术细节用于满足微创手术教学需要,在全景360VR直播的基础上,这次直播还把3D腹腔镜视频信号整合进直播过程中,这是全球范围内首创。
6月3日上午,瑞金医院将召开新闻通气会,再现VR直播+3D腹腔镜直播的全球首例盛况。
虚拟现实技术中VR直播是目前较为广泛的应用之一,通过特殊的全景相机架设在手术室主刀医生的上方,就能够把第一现场的场景360度完全摄录下来,再通过专门拼接融合传输到云端,再通过专门的APP或者微信网页端视频播放器结合现有的手机端虚拟现实设备就能有在身临其境仿佛在手术室观摩手术。
以外VR直播技术,主要应用于运动比赛和演唱会等文体娱乐现场,相比之下手术室的VR直播,难度更大,除了因为空间太小容易全景照成变形以外,还要兼顾好手术室全景和手术细节展现的需要,特别是目前的手术更多是微创手术,手术的细节更多是通过手术室的高清显示器中的图像显示。以往的微创手术转播观摩,就只能看到内窥镜下的图像,就连主刀医生都未必能出现在图像中更何况是手术中起重要配合辅助作用的助手,护士以及麻醉师。这让无法亲临现场的低年资医生只能看个热闹,很难理解高难度手术中的玄机和技巧。VR直播的出现,让这些困境迎刃而解。
但是目前的全景视频拍摄还不能体现出手术的细节部分,特别是微创类型的手术。上海医微讯数字科技有限公司开发的柳叶刀客VR直播播放器,把全景视频和3D手术视频有效的整合在一起,让观看者能在观看全景的同时观看到手术腔镜的视野的图像,并通过视觉焦点进行交互自由的选择观看的角度和内容。利用这种方式的转播,让原本被动的受众变得更为主动,更好交互和沉浸将有助于实现更好的教学目的。
6月3日上午,瑞金医院将召开新闻通气会,再现VR直播+3D腹腔镜直播的全球首例盛况。