虚拟动点·OptiTrack技术,探索VR医学教学新玩法
现如今,对于刚毕业的医学专业学生来说,正式工作前的培训是每个人的必经之路,学员须进行规范化上岗培训,培训结束并通过考核者才可以正式进入医院工作。
以往的理论培训方式往往仍是通过课件讲解理论知识,难以与现场效果和实践相结合,对于实际操作的帮助仍然非常有限。在操作环节培训中,普通的医疗培训系统是通过搭设简单的场景、使用医学模拟人道具对学生进行技能培训的,不仅临场感较弱,且无法在考评时精准记录操作分数。为解决这些问题,有机构研发了VR医疗培训系统,希望解决临场感不足等问题,但目前的VR医疗培训系统多是通过动画制作改善临场感,仅有视觉效果,无法自由走动、与环境互动或与多人互动,无法更全面地帮助学员学习。
那么如果能将VR技术与实际道具结合起来,医院其实就可以让学员体验到最大临场感、同时又可以自由实践操作了。以心肺复苏和听诊训练为例,南京梦宇三维技术有限公司研发的虚拟听诊VSP(Virtual Standardized Patient)和心肺复苏CPR(Cardiopulmonary Resuscitation)培训系统搭配了
OptiTrack空间定位技术,营造了逼真的沉浸式救治现场,同时还使得学生有机会和现实中的模拟人道具进行互动。
OptiTrack主动式追踪套件可适配市面主流VR头显,基于空间定位的VR医疗培训系统可实现虚拟与现实融合,达到“眼手和一”的效果。这种系统通过搭建多种教学模式,包括3D视频演示、3D自我演练、3D实训以及3D技能培训考试,为学员提供全方位的教学、复习与考核。
在3D视频演示中,所有手术操作过程都由经验丰富的真人医学培训师事先穿着动捕服装进行预先录制,这些由OptiTrack红外摄像机采集的动作数据可以绑定到虚拟人物身上,从而驱动虚拟人物的手术动作。此时学生即可以第一视角观看手术操作教学,获得对手术最直观的认知。
而在3D自我演练、3D实训以及3D技能培训考试中,学生可头戴VR头显,看到模拟真实场景的3D图像,仿佛置身于实际抢救场景中;同时,模拟人道具和学员手部均附有标记点,运用OptiTrack空间定位技术,学员可在VR头显中看到按模拟人一比一还原的虚拟人物,同时在现实中触摸到模拟人道具,实现虚拟与现实的融合,以第一视角进行心肺复苏实际抢救操作。
除此之外,运用了空间定位和虚拟现实技术的医疗培训考试由于配备了相应的考核系统,相较于传统考核方式,可让学员操作考评及审核结果更加精准。
这种创新型的培训方式为医疗行业规范化上岗培训提供了更加生动及丰富的病例呈现形式和身临其境的感官体验,第一视角的手术观察帮助学员加深学习印象,虚实结合的学习方式让学员在实践中更深入地了解整体操作流程。
虚拟动点·OptiTrack技术,探索VR医学教学新玩法 - 图文



